如何有效地“最大化”并发HTTP请求
2017-01-15
深圳市新思维软件有限责任公司
深圳市新思维软件有限公司致力于为企业、组织提供专业的软件产品解决方案、软件集成,软件开发及服务。总部设于中国深圳,服务客户包括政府、公安、环保、教育、旅游、酒店、转型制造业等组织及企业。
向TA提问
关注
展开全部
条回答
何处理量数据并发操作
文件缓存数据库缓存优化sql,数据流,数据库表横向纵向划优化代码结构
锁述概
. 要引入锁
用户同数据库并发操作带数据致问题:
丢失更新
A,B两用户读同数据并进行修改,其用户修改结破坏另修改结,比订票系统
脏读
A用户修改数据,随B用户读该数据,A用户某些原取消数据修改,数据恢复原值,B数据与数据库内数据产致
重复读
A用户读取数据,随B用户读该数据并修改,A用户再读取数据发现前两值致
并发控制主要封锁,锁段间内禁止用户做某些操作避免产数据致
二 锁类
锁类别两种:
1. 数据库系统角度看:独占锁(即排锁)共享锁更新锁
MS-SQL Server 使用资源锁模式
锁模式 描述
共享 (S) 用于更改或更新数据操作(读操作) SELECT 语句
更新 (U) 用于更新资源防止读取、锁定及随能进行资源更新发见形式死锁
排 (X) 用于数据修改操作例 INSERT、UPDATE 或 DELETE确保同同资源进行重更新
意向锁 用于建立锁层结构意向锁类型:意向共享 (IS)、意向排 (IX) 及与意向排共享 (SIX)
架构锁 执行依赖于表架构操作使用架构锁类型:架构修改 (Sch-M) 架构稳定性 (Sch-S)
容量更新 (BU) 向表容量复制数据并指定 TABLOCK 提示使用
共享锁
共享 (S) 锁允许并发事务读取 (SELECT) 资源资源存共享 (S) 锁任何其事务都能修改数据旦已经读取数据便立即释放资源共享 (S) 锁除非事务隔离级别设置重复读或更高级别或者事务存周期内用锁定提示保留共享 (S) 锁
更新锁
更新 (U) 锁防止通形式死锁般更新模式由事务组事务读取记录获取资源(页或行)共享 (S) 锁修改行操作要求锁转换排 (X) 锁两事务获资源共享模式锁试图同更新数据则事务尝试锁转换排 (X) 锁共享模式排锁转换必须等待段间事务排锁与其事务共享模式锁兼容;发锁等待第二事务试图获取排 (X) 锁进行更新由于两事务都要转换排 (X) 锁并且每事务都等待另事务释放共享模式锁发死锁
若要避免种潜死锁问题请使用更新 (U) 锁事务获资源更新 (U) 锁事务修改资源则更新 (U) 锁转换排 (X) 锁否则锁转换共享锁
排锁
排 (X) 锁防止并发事务资源进行访问其事务能读取或修改排 (X) 锁锁定数据
意向锁
意向锁表示 SQL Server 需要层结构某些底层资源获取共享 (S) 锁或排 (X) 锁例放置表级共享意向锁表示事务打算表页或行放置共享 (S) 锁表级设置意向锁防止另事务随包含页表获取排 (X) 锁意向锁提高性能 SQL Server 仅表级检查意向锁确定事务否安全获取该表锁须检查表每行或每页锁确定事务否锁定整表
意向锁包括意向共享 (IS)、意向排 (IX) 及与意向排共享 (SIX)
锁模式 描述
意向共享 (IS) 通各资源放置 S 锁表明事务意向读取层结构部(全部)底层资源
意向排 (IX) 通各资源放置 X 锁表明事务意向修改层结构部(全部)底层资源IX IS 超集
与意向排共享 (SIX) 通各资源放置 IX 锁表明事务意向读取层结构全部底层资源并修改部(全部)底层资源允许顶层资源并发 IS 锁例表 SIX 锁表放置 SIX 锁(允许并发 IS 锁)前所修改页放置 IX 锁(已修改行放置 X 锁)虽每资源段间内能 SIX 锁防止其事务资源进行更新其事务通获取表级 IS 锁读取层结构底层资源
独占锁:允许进行锁定操作程序使用其任何操作均接受执行数据更新命令SQL Server自使用独占锁象其锁存其加独占锁
共享锁:共享锁锁定资源其用户读取其用户修改执行SelectSQL Server象加共享锁
更新锁:SQL Server准备更新数据首先数据象作更新锁锁定数据能修改读取等SQL Server确定要进行更新数据操作自更新锁换独占锁象其锁存其加更新锁
2. 程序员角度看:乐观锁悲观锁
乐观锁:完全依靠数据库管理锁工作
悲观锁:程序员自管理数据或象锁处理
MS-SQLSERVER 使用锁同数据库内执行修改用户间实现悲观并发控制
三 锁粒度
锁粒度封锁目标,封锁粒度则并发性高,销,封锁粒度则并发性低销
SQL Server支持锁粒度行、页、键、键范围、索引、表或数据库获取锁
资源 描述
RID 行标识符用于单独锁定表行
键 索引行锁用于保护串行事务键范围
页 8 千字节 (KB) 数据页或索引页
扩展盘区 相邻八数据页或索引页构组
表 包括所数据索引内整表
DB 数据库
四 锁定间短
锁保持间度保护所请求级别资源所需间度
用于保护读取操作共享锁保持间取决于事务隔离级别采用 READ COMMITTED 默认事务隔离级别读取页期间内控制共享锁扫描直扫描内页获取锁才释放锁指定 HOLDLOCK 提示或者事务隔离级别设置 REPEATABLE READ 或 SERIALIZABLE则直事务结束才释放锁
根据游标设置并发选项游标获取共享模式滚锁保护提取需要滚锁直提取或关闭游标(先发者准)才释放滚锁指定 HOLDLOCK则直事务结束才释放滚锁
用于保护更新排锁直事务结束才释放
连接试图获取锁该锁与另连接所控制锁冲突则试图获取锁连接直阻塞:
冲突锁释放且连接获取所请求锁
连接超间隔已期默认情况没超间隔些应用程序设置超间隔防止限期等待
五 SQL Server 锁自定义
1 处理死锁设置死锁优先级
死锁用户申请同封锁,由于申请者均拥部封锁权等待其用户拥部封锁引起休止等待
使用SET DEADLOCK_PRIORITY控制发死锁情况反应式两进程都锁定数据并且直其进程释放自锁每进程才能释放自锁即发死锁情况
2 处理超设置锁超持续间
@@LOCK_TIMEOUT 返前前锁超设置单位毫秒
SET LOCK_TIMEOUT 设置允许应用程序设置语句等待阻塞资源间语句等待间于 LOCK_TIMEOUT 设置系统自取消阻塞语句并给应用程序返已超锁请求超段 1222 号错误信息
示例
例锁超期限设置 1,800 毫秒
SET LOCK_TIMEOUT 1800
3) 设置事务隔离级别
4 ) SELECT、INSERT、UPDATE DELETE 语句使用表级锁定提示
5) 配置索引锁定粒度
使用 sp_indexoption 系统存储程设置用于索引锁定粒度
六 查看锁信息
1 执行 EXEC SP_LOCK 报告关锁信息
2 查询析器按Ctrl+2看锁信息
七 使用注意事项
何避免死锁
1 使用事务尽量缩短事务逻辑处理程及早提交或滚事务;
2 设置死锁超参数合理范围:3钟-10种;超间自放弃本操作避免进程悬挂;
3 优化程序检查并避免死锁现象现;
4 .所脚本SP都要仔细测试版本前
5 所SP都要错误处理(通@error)
6 般要修改SQL SERVER事务默认级别推荐强行加锁
解决问题 何行 表 数据库加锁
八 几关锁问题
1 何锁表某行
SET TRANSACTION ISOLATION LEVEL READ UNCOMMITTED
SELECT * FROM table ROWLOCK WHERE id = 1
2 锁定数据库表
SELECT * FROM table WITH (HOLDLOCK)
加锁语句:
sybase:
update 表 set col1=col1 where 1=0 ;
MSSQL:
select col1 from 表 (tablockx) where 1=0 ;
oracle:
LOCK TABLE 表 IN EXCLUSIVE MODE ;
加锁其操作直加锁用户解锁用commit或rollback解锁
几例帮助家加深印象
设table1(A,B,C)
A B C
a1 b1 c1
a2 b2 c2
a3 b3 c3
1)排锁
新建两连接
第连接执行语句
begin tran
update table1
set A=’aa’
where B=’b2′
waitfor delay ’00:00:30′ –等待30秒
commit tran
第二连接执行语句
begin tran
select * from table1
where B=’b2′
commit tran
若同执行述两语句则select查询必须等待update执行完毕才能执行即要等待30秒
2)共享锁
第连接执行语句
begin tran
select * from table1 holdlock -holdlock加锁
where B=’b2′
waitfor delay ’00:00:30′ –等待30秒
commit tran
第二连接执行语句
begin tran
select A,C from table1
where B=’b2′
update table1
set A=’aa’
where B=’b2′
commit tran
若同执行述两语句则第二连接select查询执行
update必须等待第事务释放共享锁转排锁才能执行 即要等待30秒
3)死锁
增设table2(D,E)
D E
d1 e1
d2 e2
第连接执行语句
begin tran
update table1
set A=’aa’
where B=’b2′
waitfor delay ’00:00:30′
update table2
set D=’d5′
where E=’e1′
commit tran
第二连接执行语句
begin tran
update table2
set D=’d5′
where E=’e1′
waitfor delay ’00:00:10′
update table1
set A=’aa’
where B=’b2′
commit tran
同执行系统检测死锁并止进程
补充点:
Sql Server2000支持表级锁定提示
HOLDLOCK 持共享锁直整事务完应该锁象需要立即释放等于SERIALIZABLE事务隔离级别
NOLOCK 语句执行发共享锁允许脏读 等于 READ UNCOMMITTED事务隔离级别
PAGLOCK 使用表锁用页锁
READPAST 让sql server跳任何锁定行执行事务适用于READ UNCOMMITTED事务隔离级别跳RID锁跳页区域表锁
ROWLOCK 强制使用行锁
TABLOCKX 强制使用独占表级锁锁事务期间阻止任何其事务使用表
何处理量数据并发操作
文件缓存数据库缓存优化sql,数据流,数据库表横向纵向划优化代码结构
锁述概
. 要引入锁
用户同数据库并发操作带数据致问题:
丢失更新
A,B两用户读同数据并进行修改,其用户修改结破坏另修改结,比订票系统
脏读
A用户修改数据,随B用户读该数据,A用户某些原取消数据修改,数据恢复原值,B数据与数据库内数据产致
重复读
A用户读取数据,随B用户读该数据并修改,A用户再读取数据发现前两值致
并发控制主要封锁,锁段间内禁止用户做某些操作避免产数据致
二 锁类
锁类别两种:
1. 数据库系统角度看:独占锁(即排锁)共享锁更新锁
MS-SQL Server 使用资源锁模式
锁模式 描述
共享 (S) 用于更改或更新数据操作(读操作) SELECT 语句
更新 (U) 用于更新资源防止读取、锁定及随能进行资源更新发见形式死锁
排 (X) 用于数据修改操作例 INSERT、UPDATE 或 DELETE确保同同资源进行重更新
意向锁 用于建立锁层结构意向锁类型:意向共享 (IS)、意向排 (IX) 及与意向排共享 (SIX)
架构锁 执行依赖于表架构操作使用架构锁类型:架构修改 (Sch-M) 架构稳定性 (Sch-S)
容量更新 (BU) 向表容量复制数据并指定 TABLOCK 提示使用
共享锁
共享 (S) 锁允许并发事务读取 (SELECT) 资源资源存共享 (S) 锁任何其事务都能修改数据旦已经读取数据便立即释放资源共享 (S) 锁除非事务隔离级别设置重复读或更高级别或者事务存周期内用锁定提示保留共享 (S) 锁
更新锁
更新 (U) 锁防止通形式死锁般更新模式由事务组事务读取记录获取资源(页或行)共享 (S) 锁修改行操作要求锁转换排 (X) 锁两事务获资源共享模式锁试图同更新数据则事务尝试锁转换排 (X) 锁共享模式排锁转换必须等待段间事务排锁与其事务共享模式锁兼容;发锁等待第二事务试图获取排 (X) 锁进行更新由于两事务都要转换排 (X) 锁并且每事务都等待另事务释放共享模式锁发死锁
若要避免种潜死锁问题请使用更新 (U) 锁事务获资源更新 (U) 锁事务修改资源则更新 (U) 锁转换排 (X) 锁否则锁转换共享锁
排锁
排 (X) 锁防止并发事务资源进行访问其事务能读取或修改排 (X) 锁锁定数据
意向锁
意向锁表示 SQL Server 需要层结构某些底层资源获取共享 (S) 锁或排 (X) 锁例放置表级共享意向锁表示事务打算表页或行放置共享 (S) 锁表级设置意向锁防止另事务随包含页表获取排 (X) 锁意向锁提高性能 SQL Server 仅表级检查意向锁确定事务否安全获取该表锁须检查表每行或每页锁确定事务否锁定整表
意向锁包括意向共享 (IS)、意向排 (IX) 及与意向排共享 (SIX)
锁模式 描述
意向共享 (IS) 通各资源放置 S 锁表明事务意向读取层结构部(全部)底层资源
意向排 (IX) 通各资源放置 X 锁表明事务意向修改层结构部(全部)底层资源IX IS 超集
与意向排共享 (SIX) 通各资源放置 IX 锁表明事务意向读取层结构全部底层资源并修改部(全部)底层资源允许顶层资源并发 IS 锁例表 SIX 锁表放置 SIX 锁(允许并发 IS 锁)前所修改页放置 IX 锁(已修改行放置 X 锁)虽每资源段间内能 SIX 锁防止其事务资源进行更新其事务通获取表级 IS 锁读取层结构底层资源
独占锁:允许进行锁定操作程序使用其任何操作均接受执行数据更新命令SQL Server自使用独占锁象其锁存其加独占锁
共享锁:共享锁锁定资源其用户读取其用户修改执行SelectSQL Server象加共享锁
更新锁:SQL Server准备更新数据首先数据象作更新锁锁定数据能修改读取等SQL Server确定要进行更新数据操作自更新锁换独占锁象其锁存其加更新锁
2. 程序员角度看:乐观锁悲观锁
乐观锁:完全依靠数据库管理锁工作
悲观锁:程序员自管理数据或象锁处理
MS-SQLSERVER 使用锁同数据库内执行修改用户间实现悲观并发控制
三 锁粒度
锁粒度封锁目标,封锁粒度则并发性高,销,封锁粒度则并发性低销
SQL Server支持锁粒度行、页、键、键范围、索引、表或数据库获取锁
资源 描述
RID 行标识符用于单独锁定表行
键 索引行锁用于保护串行事务键范围
页 8 千字节 (KB) 数据页或索引页
扩展盘区 相邻八数据页或索引页构组
表 包括所数据索引内整表
DB 数据库
四 锁定间短
锁保持间度保护所请求级别资源所需间度
用于保护读取操作共享锁保持间取决于事务隔离级别采用 READ COMMITTED 默认事务隔离级别读取页期间内控制共享锁扫描直扫描内页获取锁才释放锁指定 HOLDLOCK 提示或者事务隔离级别设置 REPEATABLE READ 或 SERIALIZABLE则直事务结束才释放锁
根据游标设置并发选项游标获取共享模式滚锁保护提取需要滚锁直提取或关闭游标(先发者准)才释放滚锁指定 HOLDLOCK则直事务结束才释放滚锁
用于保护更新排锁直事务结束才释放
连接试图获取锁该锁与另连接所控制锁冲突则试图获取锁连接直阻塞:
冲突锁释放且连接获取所请求锁
连接超间隔已期默认情况没超间隔些应用程序设置超间隔防止限期等待
五 SQL Server 锁自定义
1 处理死锁设置死锁优先级
死锁用户申请同封锁,由于申请者均拥部封锁权等待其用户拥部封锁引起休止等待
使用SET DEADLOCK_PRIORITY控制发死锁情况反应式两进程都锁定数据并且直其进程释放自锁每进程才能释放自锁即发死锁情况
2 处理超设置锁超持续间
@@LOCK_TIMEOUT 返前前锁超设置单位毫秒
SET LOCK_TIMEOUT 设置允许应用程序设置语句等待阻塞资源间语句等待间于 LOCK_TIMEOUT 设置系统自取消阻塞语句并给应用程序返已超锁请求超段 1222 号错误信息
示例
例锁超期限设置 1,800 毫秒
SET LOCK_TIMEOUT 1800
3) 设置事务隔离级别
4 ) SELECT、INSERT、UPDATE DELETE 语句使用表级锁定提示
5) 配置索引锁定粒度
使用 sp_indexoption 系统存储程设置用于索引锁定粒度
六 查看锁信息
1 执行 EXEC SP_LOCK 报告关锁信息
2 查询析器按Ctrl+2看锁信息
七 使用注意事项
何避免死锁
1 使用事务尽量缩短事务逻辑处理程及早提交或滚事务;
2 设置死锁超参数合理范围:3钟-10种;超间自放弃本操作避免进程悬挂;
3 优化程序检查并避免死锁现象现;
4 .所脚本SP都要仔细测试版本前
5 所SP都要错误处理(通@error)
6 般要修改SQL SERVER事务默认级别推荐强行加锁
解决问题 何行 表 数据库加锁
八 几关锁问题
1 何锁表某行
SET TRANSACTION ISOLATION LEVEL READ UNCOMMITTED
SELECT * FROM table ROWLOCK WHERE id = 1
2 锁定数据库表
SELECT * FROM table WITH (HOLDLOCK)
加锁语句:
sybase:
update 表 set col1=col1 where 1=0 ;
MSSQL:
select col1 from 表 (tablockx) where 1=0 ;
oracle:
LOCK TABLE 表 IN EXCLUSIVE MODE ;
加锁其操作直加锁用户解锁用commit或rollback解锁
几例帮助家加深印象
设table1(A,B,C)
A B C
a1 b1 c1
a2 b2 c2
a3 b3 c3
1)排锁
新建两连接
第连接执行语句
begin tran
update table1
set A=’aa’
where B=’b2′
waitfor delay ’00:00:30′ –等待30秒
commit tran
第二连接执行语句
begin tran
select * from table1
where B=’b2′
commit tran
若同执行述两语句则select查询必须等待update执行完毕才能执行即要等待30秒
2)共享锁
第连接执行语句
begin tran
select * from table1 holdlock -holdlock加锁
where B=’b2′
waitfor delay ’00:00:30′ –等待30秒
commit tran
第二连接执行语句
begin tran
select A,C from table1
where B=’b2′
update table1
set A=’aa’
where B=’b2′
commit tran
若同执行述两语句则第二连接select查询执行
update必须等待第事务释放共享锁转排锁才能执行 即要等待30秒
3)死锁
增设table2(D,E)
D E
d1 e1
d2 e2
第连接执行语句
begin tran
update table1
set A=’aa’
where B=’b2′
waitfor delay ’00:00:30′
update table2
set D=’d5′
where E=’e1′
commit tran
第二连接执行语句
begin tran
update table2
set D=’d5′
where E=’e1′
waitfor delay ’00:00:10′
update table1
set A=’aa’
where B=’b2′
commit tran
同执行系统检测死锁并止进程
补充点:
Sql Server2000支持表级锁定提示
HOLDLOCK 持共享锁直整事务完应该锁象需要立即释放等于SERIALIZABLE事务隔离级别
NOLOCK 语句执行发共享锁允许脏读 等于 READ UNCOMMITTED事务隔离级别
PAGLOCK 使用表锁用页锁
READPAST 让sql server跳任何锁定行执行事务适用于READ UNCOMMITTED事务隔离级别跳RID锁跳页区域表锁
ROWLOCK 强制使用行锁
TABLOCKX 强制使用独占表级锁锁事务期间阻止任何其事务使用表
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询