sql 查询慢的48个缘故原由分析。}H5K!hbJ),"q
查询速度慢的缘故原由许多,常见如下几种:PH9c]/2`#RU46s#
1、没有索引或者没有效到索引(这是查询慢最常见的题目,是程序设计的缺陷))a_Fe(1zr%q=Fzgwr7
2、I/O吞吐量小,形成了瓶颈效应。ID \e~U?'$R~h h
3、没有创建计算列导致查询不优化。qIjH@\^Vn=D&3O[4j
4、内存不足\Cl=K+wF{Rft#
5、网络速度慢e&d_)[^+\€iF~`^
6、查询出的数据量过大(可以采用多次查询,其他的方法降低数据量)P1q\b dOT,H; mH
7、锁或者死锁(这也是查询慢最常见的题目,是程序设计的缺陷)= 70?2 DOS4@*z7n
8、sp_lock,sp_who,运动的用户查看,缘故原由是读写竞争资源。ly?2kJm=7?!+i,fG3
9、返回了不需要的行和列F*3nq~+a]BW@H"
10、查询语句不好,没有优化 ●可以通过如下方法来优化查询 :+2?]@gHECdD
1、把数据、日志、索引放到不同的I/O设备上,增长读取速度,曩昔可以将Tempdb应放在RAID0上,SQL2000不在支撑。数据量(尺寸)越大,进步I/O越紧张.=v*++ v lf& [VGU
2、纵向、横向分割表,削减表的尺寸(sp_spaceuse)e?5u|JWC^(P;ddJeDK
3、升级硬件%A-:pJpeF x865#1
4、根据查询条件,建立索引,优化索引、优化访问体例,限定效果集的数据量。细致添补因子要适当(最好是使用默认值0)。索引应该尽量小,使用字节数小的列建索引好(参照索引的创建),不要对有限的几个值的字段建单一索引如性别字段bYpu^0--{?%565gB
5、进步网速;o%I0$BntZK?:Y5
6、扩大服务器的内存,Windows 2000和SQL server 2000能支撑4-8G的内存。配置假造内存:假造内存大小应基于计算机上并发运行的服务进行配置。运行 Microsoft SQL Server? 2000 时,可考虑将假造内存大小设置为计算机中安装的物理内存的 1.5 倍。假如另外安装了全文检索功能,并打算运行 Microsoft 搜索服务以便实行全文索引和查询,可考虑:将假造内存大小配置为至少是计算机中安装的物理内存的 3 倍。将 SQL Server max server memory 服务器配置选项配置为物理内存的 1.5 倍(假造内存大小设置的一半)。J{[Q)J']lbuQ Nv4
7、增长服务器CPU个数;但是必须晓畅并行处理串行处理更必要资源例如内存。使用并行照旧串行程是MsSQL主动评估选择的。单个义务分解成多个义务,就可以在处理器上运行。例如拖延查询的排序、连接、扫描和GROUP BY字句同时实行,SQL SERVER根据体系的负载情况决定最优的并行等级,复杂的必要消费大量的CPU的查询最适合并行处理。但是更新操作UPDATE,INSERT,DELETE还不能并行处理。e%\/DuNVyu
L\Y5\
ta82=LF8=;U)
1,|dZ
8、假如是使用like进行查询的话,简单的使用index是不行的,但是全文索引,耗空间。 like 'a%' 使用索引 like '%a' 不使用索引用 like '%a%' 查询时,查询耗时和字段值总长度成正比,所以不能用CHAR类型,而是VARCHAR。对于字段的值很长的建全文索引。J}r#8u_yzXB&3`^R?Q
9、DB Server 和APPLication Server 星散;OLTP和OLAP星散m(u l{ {6Ilgaj
10、分布式分区视图可用于实现数据库服务器联合体。联合体是一组分开管理的服务器,但它们相互协作分担体系的处理负荷。这种通过分区数据形成数据库服务器联合体的机制能够扩大一组服务器,以支撑大型的多层 Web 站点的处理必要。有关更多信息,参见设计联合数据库服务器。(参照SQL帮助文件'分区视图')A`/xR@zQ0z#l9tK€O
a、在实现分区视图之前,必须先水平分区表qXR/AMDla/Mx?Z
b、在创建成员表后,在每个成员服务器上定义一个分布式分区视图,并且每个视图具有雷同的名称。如许,引用分布式分区视图名的查询可以在任何一个成员服务器上运行。体系操作如同每个成员服务器上都有一个原始表的复本一样,但其实每个服务器上只有一个成员表和一个分布式分区视图。数据的位置对应用程序是透明的。zj|sC C(=X.JU
11、重修索引 DBCC REINDEX ,DBCC INDEXDEFRAG,收缩数据和日志 DBCC SHRINKDB,DBCC SHRINKFILE. 设置主动收缩日志.对于大的数据库不要设置数据库主动增加,它会降低服务器的性能。 在T-sql的写法上有很大的讲究,下面列出常见的要点:首先,DBMS处理查询计划的过程是如许的:uFTapG"8VaS-Gyz
1、 查询语句的词法、语法检查€8$i'k}AB3|lo@60g
2、 将语句提交给DBMS的查询优化器/ ea%m2YA= I€KR
3、 优化器做代数优化和存取路径的优化]RF%0 {7^^C-FI
4、 由预编译模块生成查询规划dhaiV;ePkA QnA#eD
5、 然后在合适的时间提交给体系处理实行9/!\@)(6dEz+lb
6、 最后将实行效果返回给用户其次,看一下SQL SERVER的数据存放的结构:一个页面的大小为8K(8060)字节,8个页面为一个盘区,按照B树存放。-=Rz*LZ?b"cNV3'^
12、Commit和rollback的区别 Rollback:回滚所有的事物。 Commit:提交当前的事物. 没有需要在动态SQL里写事物,假如要写请写在表面如: begin tran exec(@s) commit trans 或者将动态SQL 写成函数或者存储过程。Q)*Ggb&xJT,Vm]t5
13、在查询Select语句中用Where字句限定返回的行数,避免表扫描,假如返回不需要的数据,虚耗了服务器的I/O资源,加重了网络的负担降低性能。假如表很大,在表扫描的期间将表锁住,禁止其他的联接访问表,后果紧张。5iF€7X=oxxmn{ kvG
14、SQL的解释申明对实行没有任何影响\~ 6IT_1{=^?&=~f
15、尽可能不使用光标,它占用大量的资源。假如必要row-by-row地实行,尽量采用非光标技术,如:在客户端循环,用一时表,Table变量,用子查询,用Case语句等等。游标可以按照它所支撑的提取选项进行分类: 只进 必须按照从第一行到最后一行的顺序提取行。FETCH NEXT 是唯一许可的提取操作,也是默认体例。可滚动性 可以在游标中任何地方随机提取任意行。游标的技术在SQL2000下变得功能很壮大,他的目的是支撑循环。有四个并发选项 READ_ONLY:不许可通过游标定位更新(Update),且在组成效果集的行中没有锁。 OPTIMISTIC WITH valueS:乐观并发控制是事务控制理论的一个标准部分。乐观并发控制用于如许的情形,即在打开游标及更新行的间隔中,只有很小的机会让第二个用户更新某一行。当某个游标以此选项打开时,没有锁控制其中的行,这将有助于最大化其处理能力。BYQlj~+3tg
X]F
yT#Jq\DTV@j€~
假如用户试图修改某一行,则此行的当前值会与最后一次提取此行时获取的值进行比较。假如任何值发生改变,则服务器就会知道其他人已更新了此行,并会返回一个错误。假如值是一样的,服务器就实行修改。 选择这个并发选项OPTIMISTIC WITH ROW VERSIONING:此乐观并发控制选项基于行版本控制。使用行版本控制,其中的表必须具有某种版本标识符,服务器可用它来确定该行在读入游标后是否有所更改。在 SQL Server 中,这个性能由 timestamp 数据类型提供,它是一个二进制数字,透露表现数据库中更改的相对顺序。每个数据库都有一个全局当前时间戳值:@@DBTS。每次以任何体例更改带有 timestamp 列的行时,SQL Server 先在时间戳列中存储当前的 @@DBTS 值,然后增长 @@DBTS 的值。假如某 个表具有 timestamp 列,则时间戳会被记到行级。服务器就可以比较某行的当前时间戳值和上次提取时所存储的时间戳值,从而确定该行是否已更新。服务器不必比较所有列的值,只需比较 timestamp 列即可。假如应用程序对没有 timestamp 列的表要求基于行版本控制的乐观并发,则游标默认为基于数值的乐观并发控制。 SCROLL LOCKS 这个选项实现颓废并发控制。在颓废并发控制中,在把数据库的行读入游标效果集时,应用程序将试图锁定数据库行。在使用服务器游标时,将行读入游标时会在其上放置一个更新锁。假如在事务内打开游标,则该事务更新锁将一向保持到事务被提交或回滚;当提取下一行时,将除去游标锁。假如在事务外打开游标,则提取下一行时,锁就被丢弃。因此,每当用户必要完全的颓废并发控制时,游标都应在事务内打开。更新锁将阻止任何其它义务获取更新锁或排它锁,从而阻止其它义务更新该行。然而,更新锁并不阻止共享锁,所以它不会阻止其它义务读取行,除非第二个义务也在要求带更新锁的读取。滚动锁根据在游标定义的 SELECT 语句中指定的锁提醒,这些游标并发选项可以生成滚动锁。滚动锁在提取时在每行上获取,并保持到下次提取或者游标关闭,以先发生者为准。下次提取时,服务器为新提取中的行获取滚动锁,并释放上次提取中行的滚动锁。滚动锁自力于事务锁,并可以保持到一个提交或回滚操作之后。假如提交时关闭游标的选项为关,则 COMMIT 语句并不关闭任何打开的游标,而且滚动锁被保留到提交之后,以维护对所提取数据的隔离。所获取滚动锁的类型取决于游标并发选项和游标 SELECT 语句中的锁提醒。锁提醒 只读 乐观数值 乐观行版本控制 锁定无提醒 未锁定 未锁定 未锁定 更新 NOLOCK 未锁定 未锁定 未锁定 未锁定 HOLDLOCK 共享 共享 共享 更新 UPDLOCK 错误 更新 更新 更新 TABLOCKX 错误 未锁定 未锁定 更新其它 未锁定 未锁定 未锁定 更新 *指定 NOLOCK 提醒将使指定了该提醒的表在游标内是只读的。s@t= &_BD2&HB,{!QT&^
16、用Profiler来跟踪查询,得到查询所需的时间,找出SQL的题目所在;用索引优化器优化索引muT#*jO,srO$}
17、细致UNion和UNion all 的区别。UNION all好`JX"dU=3y43L:
18、细致使用DISTINCT,在没有需要时不要用,它同UNION一样会使查询变慢。重复的记录在查询里是没有题目的?F aP y@=k+^h}YJ^!
19、查询时不要返回不必要的行、列vy}|6^NO^O!.T
20、用sp_configure 'query governor cost limit'或者SET QUERY_GOVERNOR_COST_LIMIT来限定查询消费的资源。当评估查询消费的资源超出限定时,服务器主动取消查询,在查询之前就扼杀掉。SET LOCKTIME设置锁的时间ShAoTq€_S".4\zU
21、用select top 100 / 10 Percent 来限定用户返回的行数或者SET ROWCOUNT来限定操作的行W?[wDF%^ yM[#aC
22、在SQL2000曩昔,一样平常不要用如下的字句: "IS NULL", "<>", "!=", "!>", "!<", "NOT", "NOT EXISTS", "NOT IN", "NOT LIKE", and "LIKE '%500'",由于他们不走索引全是表扫描。也不要在WHere字句中的列名加函数,如Convert,substring等,假如必须用函数的时候,创建计算列再创建索引来替换.还可以变通写法:WHERE SUBSTRING(firstname,1,1) = 'm'改为WHERE firstname like 'm%'(索引扫描),肯定要将函数和列名分开。并且索引不能建得太多和太大。NOT IN会多次扫描表,使用EXISTS、NOT EXISTS ,IN , LEFT OUTER JOIN 来替换,分外是左连接,而Exists比IN更快,最慢的是NOT操作.假如列的值含有空,曩昔它的索引不起作用,如今2000的优化器能够处理了。雷同的是IS NULL,“NOT", "NOT EXISTS", "NOT IN"能优化她,而”<>”等照旧不能优化,用不到索引。I.7+z~6xPjMN$/tk,S
23、使用Query Analyzer,查看SQL语句的查询计划和评估分析是否是优化的SQL。一样平常的20%的代码占有了80%的资源,我们优化的重点是这些慢的地方。/X?( dy:4K`/r
24、假如使用了IN或者OR等时发现查询没有走索引,使用表现申明指定索引: SELECT * FROM PersonMember (INDEX = IX_Title) WHERE processid IN (‘男',‘女')7=H_]5l_79M6 Tw^q
25、将必要查询的效果预先计算好放在表中,查询的时候再SELECT。这在SQL7.0曩昔是最紧张的手段。例如医院的住院费计算。,}[
|j!=qvfgE_@
5gs&];/aqpuWuz,e
26、MIN() 和 MAX()能使用到合适的索引。F{8EJR)0oLMQ_cxE
27、数据库有一个原则是代码离数据越近越好,所以优先选择Default,依次为Rules,Triggers, Constraint(束缚如外健主健CheckUNIQUE……,数据类型的最大长度等等都是束缚),Procedure.如许不仅维护工作小,编写程序质量高,并且实行的速度快。€PU=N€kQ? 88-+
28、假如要插入大的二进制值到Image列,使用存储过程,万万不要用内嵌INsert来插入(不知JAVA是否)。由于如许应用程序首先将二进制值转换成字符串(尺寸是它的两倍),服务器受到字符后又将他转换成二进制值.存储过程就没有这些动作: 方法:Create procedure p_insert as insert into table(Fimage) values (@image), 在前台调用这个存储过程传入二进制参数,如许处理速度显明改善。qZ3oQ!(&`#(LCFF
29、Between在某些时候比IN速度更快,Between能够更快地根据索引找到范围。用查询优化器可见到差别。 select * from chineseresume where title in ('男','女') Select * from chineseresume where between '男' and '女' 是一样的。因为in会在比较多次,所以偶然会慢些。$Q@?}pb#/ZJXI]d2
30、在需要是对全局或者局部一时表创建索引,偶然能够进步速度,但不是肯定会如许,由于索引也耗费大量的资源。他的创建同是现实表一样。iG6$ xC=8+Wn3a9}fE
31、不要建没有作用的事物例如产生报表时,虚耗资源。只有在需要使用事物时使用它。61jzpR=TUHuKhV
32、用OR的字句可以分解成多个查询,并且通过UNION 连接多个查询。他们的速度只同是否使用索引有关,假如查询必要用到联合索引,用UNION all实行的服从更高.多个OR的字句没有效到索引,改写成UNION的情势再试图与索引匹配。一个关键的题目是否用到索引。\VX8BO77/(tO2&,
33、尽量少用视图,它的服从低。对视图操作比直接对表操作慢,可以用stored procedure来代替她。分外的是不要用视图嵌套,嵌套视图增长了探求原始资料的难度。我们看视图的本质:它是存放在服务器上的被优化好了的已经产生了查询规划的SQL。对单个表检索数据时,不要使用指向多个表的视图,直接从表检索或者仅仅包含这个表的视图上读,否则增长了不需要的开销,查询受到干扰.为了加快视图的查询,MsSQL增长了视图索引的功能。Ib]O+|m"E1Vsmty
34、没有需要时不要用DISTINCT和ORDER BY,这些动作可以改在客户端实行。它们增长了额外的开销。这同UNION 和UNION ALL一样的道理。 SELECT top 20 ad.companyname,comid,position,ad.referenceid,worklocation, convert(varchar(10),ad.postDate,120) as postDate1,workyear,degreedescription FROM jobcn_query.dbo.COMPANYAD_query ad where referenceID in('JCNAD00329667','JCNAD132168','JCNAD00337748','JCNAD00338345','JCNAD00333138','JCNAD00303570', 'JCNAD00303569','JCNAD00303568','JCNAD00306698','JCNAD00231935','JCNAD00231933','JCNAD00254567', 'JCNAD00254585','JCNAD00254608','JCNAD00254607','JCNAD00258524','JCNAD00332133','JCNAD00268618', 'JCNAD00279196','JCNAD00268613') order by postdate desck+t,BaqNI\s4ub_@
35、在IN后面值的列表中,将出现最频繁的值放在最前面,出现得最少的放在最后面,削减判断的次数。MOf_)Ryu%Du/W6 C)
36、当用SELECT INTO时,它会锁住体系表(sysobjects,sysindexes等等),壅塞其他的连接的存取。创建一时表时用表现申明语句,而不是select INTO. drop table t_lxh begin tran select * into t_lxh from chineseresume where name = 'XYZ' --commit 在另一个连接中SELECT * from sysobjects可以看到 SELECT INTO 会锁住体系表,Create table 也会锁体系表(不管是一时表照旧体系表)。所以万万不要在事物内使用它!!!如许的话假如是经常要用的一时表请使用实表,或者一时表变量。5QXe1lxT= )o'*$Ga
37、一样平常在GROUP BY 个HAVING字句之前就能剔除多余的行,所以尽量不要用它们来做剔除行的工作。他们的实行顺序应该如下最优:select 的Where字句选择所有合适的行,Group By用来分组个统计行,Having字句用来剔除多余的分组。如许Group By 个Having的开销小,查询快.对于大的数据行进行分组和Having十分消费资源。假如Group BY的目的不包括计算,只是分组,那么用Distinct更快Aa"PkGgEgdwz:3O@"
gNDLF:
06(Lv/{g
38、一次更新多条记录比分多次更新每次一条快,就是说批处理好YX`d.k]'([g_eF
39、少用一时表,尽量用效果集和Table类性的变量来代替它,Table 类型的变量比一时表好,];E 5!amL?j7^V\
40、在SQL2000下,计算字段是可以索引的,必要知足的条件如下:X5ETD5?z:2[€*xcz)ZD
a、计算字段的表达是确定的dfNo{Jwvu"wfM`
b、不能用在TEXT,Ntext,Image数据类型Q{+|h-e\v"FGH*
c、必须配制如下选项 ANSI_NULLS = ON, ANSI_PADDINGS = ON, …….H}?€WeD|k5SBZE
41、尽量将数据的处理工作放在服务器上,削减网络的开销,如使用存储过程。存储过程是编译好、优化过、并且被组织到一个实行规划里、且存储在数据库中的SQL语句,是控制流语言的荟萃,速度当然快。反复实行的动态SQL,可以使用一时存储过程,该过程(一时表)被放在Tempdb中。曩昔因为SQL SERVER对复杂的数学计算不支撑,所以不得不将这个工作放在其他的层上而增长网络的开销。SQL2000支撑UDFs,如今支撑复杂的数学计算,函数的返回值不要太大,如许的开销很大。用户自定义函数象光标一样实行的消费大量的资源,假如返回大的效果采用存储过程B€b_y[(W ey$ibS
42、不要在一句话里再三的使用雷同的函数,虚耗资源,将效果放在变量里再调用更快D"€WL=QT&S=*€Y9
43、SELECT COUNT(*)的服从教低,尽量变通他的写法,而EXISTS快.同时请细致区别: select count(Field of null) from Table 和 select count(Field of NOT null) from Table 的返回值是不同的!!!GRmik@lB+D5 9B96M
44、当服务器的内存够多时,配制线程数量 = 最大连接数+5,如许能发挥最大的服从;否则使用 配制线程数量<最大连接数启用SQL SERVER的线程池来解决,假如照旧数量 = 最大连接数+5,紧张的损害服务器的性能。5qu{j9F[WVA"'Z
45、按照肯定的次序来访问你的表。假如你先锁住表A,再锁住表B,那么在所有的存储过程中都要按照这个顺序来锁定它们。假如你(不经意的)某个存储过程中先锁定表B,再锁定表A,这可能就会导致一个死锁。假如锁定顺序没有被预先细致的设计好,死锁很难被发现x+4I?;Z€c0~-
46、通过SQL Server Performance Monitor监视响应硬件的负载 Memory: Page Faults / sec计数器假如该值偶尔走高,注解当时有线程竞争内存。假如持续很高,则内存可能是瓶颈。 Process:+} 'M;I/?Qc2y&O
1、% DPC Time 指在范例间隔期间处理器用在缓延程序调用(DPC)接收和提供服务的百分比。(DPC 正在运行的为比标准间隔优先权低的间隔)。 因为 DPC 是以特权模式实行的,DPC 时间的百分比为特权时间 百分比的一部分。这些时间单独计算并且不属于间隔计算总数的一部 分。这个总数表现了作为实例时间百分比的平均忙时。YWidXi&wa$x2U2Qs
2、%Processor Time计数器 假如该参数值持续超过95%,注解瓶颈是CPU。可以考虑增长一个处理器或换一个更快的处理器。(j7| 8}6 O_5j61
3、% Privileged Time 指非闲置处理器时间用于特权模式的百分比。(特权模式是为操作体系组件和操纵硬件驱动程序而设计的一种处理模式。它许可直接访问硬件和所有内存。另一种模式为用户模式,它是一种为应用程序、环境分体系和整数分体系设计的一种有限处理模式。操作体系将应用程序线程转换成特权模式以访问操作体系服务)。 特权时间的 % 包括为间断和 DPC 提供服务的时间。特权时间比率高可能是因为失败设备产生的大数量的间隔而引起的。这个计数器将平均忙时作为样本时间的一部分表现。|`x`+Um:x9]7n.ho
4、% User Time透露表现耗费CPU的数据库操作,如排序,实行aggregate functions等。假如该值很高,可考虑增长索引,尽量使用简单的表联接,水平分割大表格等方法来降低该值。 Physical Disk: Curretn Disk Queue Length计数器该值应不超过磁盘数的1.5~2倍。要进步性能,可增长磁盘。 SQLServer:Cache Hit Ratio计数器该值越高越好。假如持续低于80%,应考虑增长内存。 细致该参数值是从SQL Server启动后,就一向累加记数,所以运行经过一段时间后,该值将不能反映体系当前值。^UkvA7HJVe%ccWs
47、分析select emp_name form employee where salary > 3000 在此语句中若salary是Float类型的,则优化器对其进行优化为Convert(float,3000),由于3000是个整数,我们应在编程时使用3000.0而不要等运行时让DBMS进行转化。同样字符和整型数据的转换。)^N=O0$xqHx] DK0K
48、查询的关联同写的顺序 select a.personMemberID, * from chineseresume a,personmember b where personMemberID = b.referenceid and a.personMemberID = 'JCNPRH39681' (A = B ,B = ‘号码') select a.personMemberID, * from chineseresume a,personmember b where a.personMemberID = b.referenceid and a.personMemberID = 'JCNPRH39681' and b.referenceid = 'JCNPRH39681' (A = B ,B = ‘号码', A = ‘号码') select a.personMemberID, * from chineseresume a,personmember b where b.referenceid = 'JCNPRH39681' and a.personMemberID = 'JCNPRH39681' (B = ‘号码', A = ‘号码')u€\'Y$YQ?l€nT