2011年5月9日星期一

印象很深的一次SQL Server调优经历

印象很深的一次SQL Server调优经历

时间:2009-10-05 07:34来源:未知 作者:killkill 点击: 251次我要投稿 高质量的ASP.NET空间,完美支持1.0/2.0/3.5/MVC等
前段时间数据库健康检查发现SQL Server服务器的idle时间变少,IO还是比较空闲,估计是遇到了高CPU占用的语句了。
介绍一下背景,我们公司负责运维N多的应有系统,负责提供良好的软、硬件环境,至于应用的开发质量,我们就无能为力了
解决这个问题,我的思路是:
  1. 找出CPU占用最大的语句。
  2. 分析查询计划。
  3. 优化。
1、找出语句
使用SQL Server自带的性能报表(不是报表服务),找出CPU占用最大的语句。如图1所示
image
图1 性能报表

我选取了“性能-按总CPU时间排在前面的查询”,得出以下两张报表,如图2所示:
image
图2 性能-按总CPU时间排在前面的查询
在报表中不能直接把语句Copy出来,非得让我另存为Excel才能Copy语句;而且经常标示不了是语句属于哪个数据库,不爽 :( 。
费了我九牛二虎之力才找出该条语句在哪个数据库执行,然后马上备份数据库,在另一个非生产数据库上面还原,创造实验环境。
废话少说,我把语句Copy出来,顺便整理了一下格式。如下:
select * from network_listen where
node_code
in
(

select distinct node_code
from view_Log_Network_circsByUnit
where status='1'
)
or
node_code
=
(
select top 1 nodeCode
from TransmissionUnit_LocalInfo
)
and
node_code
<>
(
select parentNodeCode
from TransmissionUnit_RouterInfo
where nodeCode=
(
select top 1 nodeCode
from TransmissionUnit_LocalInfo
)
)

2、分析语句
执行计划如下:
图太大了,将就着看吧 :( .
image
图3 查询计划全图
image
图4 查询计划1
image
图5 查询计划2
image
图6 查询计划3
从整个查询计划来看,主要开销都花在了图5的那个部分——两个“聚集索引扫描”。
查看一下这两个数“聚集索引扫描”,搞什么飞机呢?
image image
奇怪了,查询语句里面没有Log_Nwtwork_circs 这个表啊,再仔细分析一下这个执行计划,嫌疑最大的就是view_Log_Network_circsByUnit这个视图了。
查看一下这个试图的定义:
CREATE VIEW [dbo].[view_Log_Network_circsByUnit] AS SELECT B.* FROM (
SELECT node_code, MAX(end_time) AS end_time
FROM Log_Network_circs
GROUP BY node_code
) A
LEFT OUTER JOIN
dbo.Log_Network_circs B
ON
A.node_code
= B.node_code
AND
A.end_time
= B.end_time

看着有点晕是吧,那么看看下图
image

3、优化
SQL写得好不好,咱不说,反正我是不能改SQL的,而且应该可以判断出整个查询最耗时的地方就是用在搞这张试图了。
那就只能针对这个试图调优啦。仔细观察这个试图,实际上就涉及到一个表 Log_Network_circs,下面是该表的表结构:
CREATE TABLE [dbo].[Log_Network_circs](
[log_id] [varchar](30) NOT NULL,
[node_code] [varchar](100) NULL,
[node_name] [varchar](100) NULL,
[server_name] [varchar](100) NULL,
[start_time] [datetime] NULL,
[end_time] [datetime] NULL,
[status] [varchar](30) NULL, CONSTRAINT [PK_LOG_NETWORK_CIRCS] PRIMARY KEY CLUSTERED
(
[log_id] ASC
)
WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, IGNORE_DUP_KEY = OFF, ALLOW_ROW_LOCKS = ON, ALLOW_PAGE_LOCKS = ON) ON [PRIMARY]
)
ON [PRIMARY]

数据量有489957条记录,不算太大。
根据 3、经常与其他表进行连接的表,在连接字段上应该建立索引;
感觉上得在 node_code 和 end_time 这两字段上建立一个复合索引,大概定义如下:

CREATE INDEX [idx__Log_Network] ON Log_Network_circs
(
node_code
ASC,
end_time
ASC
)

保险起见,我把需要调优的语句copy到一个文件里,然后打开“数据库引擎优化顾问”,设置好数据库,得出以下调优结果:
image

CREATE STATISTICS [_dta_stat_559341057_6_2] ON [dbo].[Log_Network_circs]([end_time], [node_code])
CREATE NONCLUSTERED INDEX [_dta_index_Log_Network_circs_24_559341057__K2_K6] ON [dbo].[Log_Network_circs]
(
[node_code] ASC,
[end_time] ASC
)
WITH (SORT_IN_TEMPDB = OFF, IGNORE_DUP_KEY = OFF, DROP_EXISTING = OFF, ONLINE = OFF) ON [PRIMARY]

嗯,结果差不多,具体参数再说。
按照“数据库引擎优化顾问”给出的建议,建立 STATISTICS 和 INDEX 。
再看看优化后的执行计划
image
明显查询 view_Log_Network_circsByUnit 这个视图的执行计划不一样了。
image
不看广告,看疗效,使用统计功能。执行以下语句:

SET STATISTICS IO on; SET STATISTICS TIME on;

(2 行受影响)
'Log_Network_circs'。扫描计数 2,逻辑读取 13558 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
'TransmissionUnit_RouterInfo'。扫描计数 0,逻辑读取 2 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
'TransmissionUnit_LocalInfo'。扫描计数 3,逻辑读取 6 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
'network_listen'。扫描计数 1,逻辑读取 2 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。

SQL Server 执行时间:
CPU 时间
= 719 毫秒,占用时间 = 719 毫秒。

(
2 行受影响)
'Log_Network_circs'。扫描计数 2,逻辑读取 9 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
'TransmissionUnit_RouterInfo'。扫描计数 0,逻辑读取 2 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
'TransmissionUnit_LocalInfo'。扫描计数 3,逻辑读取 6 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。
'network_listen'。扫描计数 1,逻辑读取 2 次,物理读取 0 次,预读 0 次,lob 逻辑读取 0 次,lob 物理读取 0 次,lob 预读 0 次。

SQL Server 执行时间:
CPU 时间
= 0 毫秒,占用时间 = 2 毫秒。
逻辑读取数,总执行时间都大大缩减,开来调优还是挺成功。

WIN7装8G内存设置

http://365jia.cn/news/2011-01-04/3439B63D56174C28.html

1.请问SQL2005在哪里设置连接超时时间呢?

打开 SQL Server Management Studio,工具--->选项---->查询执行--->执行超时值。
把执行超时值设为0

在sqlserver2005中,选中数据库机器名称---右键"属性"---“连接”---允许远程连接此服务器,远程查询超时值设大些.

2011年4月28日星期四

商业管理程序累积更新说明

2011-4-29
A) 进货模块
   1.添加操作记录,具体可在进货记录界面按右键查询,或者在单据界面点击“总计”查询。
   2.进货记录界面添加供应商名称列,修正“按供应商查询按钮功能。
   3.打开单据供应商名称没有更新bug修正。
   4.查看供应商列表双击会关闭BUG修正
B) 销售模块
   1.销售记录界面添加客户名称列。
   2.添加打印vale单据格式2
   3.查看客户列表双击会关闭BUG修正
2011-4-27
更新临时价格保存bug修正
2011-4-25
修正销售单使用价格2功能失效BUG
2011-4-21
1.修正调单会自动加税BUG.
2.修改新报表格式。
3.销售获取ID方式修改。
*
2011-4-20
1.经营记录界面独占显示取消。
2.小票日报表可以打开单据,查看单据操作详细流程。
3.SysLogAll表格-日期改为具体时间.
  SysLogAll表格-保存数据成功/出错都做一个记录。
  SysLog的日期改为具体时间
  syslog排列改为 流水号,ID 递增
2011-4-15
添加销售界面【显示/不显示】报价单按钮。
2011-4-13
1.添加新表Sys_Log_All,记录开单所有的操作。
   a) 经营记录,右键查看。
   b)单据界面,单击合计字样打开查看。
   c)帮助,主界面,记录
2.检测新版本方式修改。
3.使用价格2,3,4情况下,如果没有设置价格不能输入的BUG修正。
2011-4-11
1.商品列表可以导出类别,列数为第9列
2.期初商品录入 添加ASM数据导入。添加类别,供应商导入。
3.A4发票,不含税的单据自定义税率BUG修正。
2011-4-7
修正A4报表某格式不合并商品数量bug
修改 销售界面不显示库存 为针对所有用户,以前是对管理员无效.
2011-4-6
更新发票带logo格式
2011-4-4
1.更新设置界面,西文设置修正等
2.添加远程同步类别
3.产品界面可以导出按类别分类的图像目录
2011-4-1
1.批量导入客户资料 添加按VIP号码,或者按电话号码更新资料
2.图片下单功能调整:输出的销售单包括客户资料,导入销售单可以自动添加新客户。
2011-3-29
数据库升级到 N-11
1.添加客户多地址打印
2.完善批量导入客户资料
3.重编设置界面

2011年4月20日星期三

SQL Server 获取插入记录后的ID(自动编号)

SQL Server 获取插入记录后的ID(自动编号)

 
最近在开发项目的过程中遇到一个问题,就是在插入一条记录的后要立即获取所在数据库中ID,而该ID是自增的,怎么做?在sql server 2005中有几种方式可以实现。
要获取此ID,最简单的方法就是在查询之后select @@indentity
执行下面SQL语句就能查出来刚插入记录对应的自增列的值
insert into tbldemo values('测试') select @@identity
 
SQL Server 2000中,有三个比较类似的功能:SCOPE_IDENTITY、IDENT_CURRENT 和 @@IDENTITY,它们都返回插入到 IDENTITY 列中的值。
1)IDENT_CURRENT 返回为任何会话和任何作用域中的特定表最后生成的标识值,它不受作用域和会话的限制,而受限于所指定的表。
2)@@IDENTITY返回为当前会话的所有作用域中的任何表最后生成的标识值。
3) SCOPE_IDENTITY 返回为当前会话和当前作用域中的任何表最后生成的标识值。
SCOPE_IDENTITY 和 @@IDENTITY 返回在当前会话中的任何表内所生成的最后一个标识值。但是,SCOPE_IDENTITY 只返回插入到当前作用域中的值;@@IDENTITY 不受限于特定的作用域。
例如,有两个表 T1 和 T2,在 T1 上定义了一个 INSERT 触发器。当将某行插入 T1 时,触发器被激发,并在 T2 中插入一行。此例说明了两个作用域:一个是在 T1 上的插入,另一个是作为触发器的结果在 T2 上的插入。
假设 T1 和 T2 都有 IDENTITY 列,@@IDENTITY 和 SCOPE_IDENTITY 将在 T1 上的 INSERT 语句的最后返回不同的值。@@IDENTITY 返回插入到当前会话中任何作用域内的最后一个 IDENTITY 列值,该值是插入 T2 中的值。

2011年4月8日星期五

2011年3月29日星期二

商业管理程序更新说明

2011-3-29
数据库升级到 N-11
1.添加客户多地址打印
2.完善批量导入客户资料
3.重编设置界面
*
2011-3-27
小更新
2011-3-22
商品详细信息可以查询进货历程,可以看到和商品有关联的全部供应商。
小票:根据客户单据的金额折算折扣单,vale 字样改为 DTO
2011-3-21
图片下单可以根据商品状态显示
2011-3-14
1.查询-销售排行榜,添加打印的A4报表格式能显示利润。
2.A4日报表能打印当日营业额,现金,visa,其他,应收款合计。
3.A4报表全部更新为日期字段自动去除 0:00 字样。
  执行文件在根目录下,文件名:A4报表换格式
2011-3-8 
1.全场折扣功能启用
2.单据排序功能加强
3.同步远程客户,可以上传本地客户
4.添加每隔n天自动消掉albaran等非发票单据
2011-2-25
1.可以使用小票打印机打印两套发票号码
2011-2-16
1.图片下单2010可以根据订货数量使用价格2做优惠价。
2.打印中文小票可以去掉 Iva incluido
3.中文小票分行模式设置  
      黑体 、 字号 10 、调整 -6
2011-1-22
修正使用小数A4发票统计IVA没有分开的BUG
添加SQL记录的完整性

新版DENSEN CD下载

http://www.densen.es/file/DENSEN_CD.exe