數(shù)據(jù)庫(kù)優(yōu)化50種方法
查詢(xún)速度慢的原因很多,常見(jiàn)如下幾種:
1由捎、沒(méi)有索引或者沒(méi)有用到索引(這是查詢(xún)慢最常見(jiàn)的問(wèn)題商叹,是程序設(shè)計(jì)的缺陷)
2燕刻、I/O吞吐量小,形成了瓶頸效應(yīng)剖笙。
3卵洗、沒(méi)有創(chuàng)建計(jì)算列導(dǎo)致查詢(xún)不優(yōu)化。
4弥咪、內(nèi)存不足
5过蹂、網(wǎng)絡(luò)速度慢
6、查詢(xún)出的數(shù)據(jù)量過(guò)大(可以采用多次查詢(xún)酪夷,其他的方法降低數(shù)據(jù)量)
7榴啸、鎖或者死鎖(這也是查詢(xún)慢最常見(jiàn)的問(wèn)題,是程序設(shè)計(jì)的缺陷)
8晚岭、sp_lock,sp_who,活動(dòng)的用戶(hù)查看,原因是讀寫(xiě)競(jìng)爭(zhēng)資源。
9勋功、返回了不必要的行和列
10坦报、查詢(xún)語(yǔ)句不好库说,沒(méi)有優(yōu)化可以通過(guò)如下方法來(lái)優(yōu)化查詢(xún) :
1>、把數(shù)據(jù)片择、日志潜的、索引放到不同的I/O設(shè)備上,增加讀取速度字管,以前可以將Tempdb應(yīng)放在RAID0上啰挪,SQL2000不在支持。數(shù)據(jù)量(尺寸)越大嘲叔,提高I/O越重要.
2>亡呵、縱向、橫向分割表硫戈,減少表的尺寸(sp_spaceuse)
3>锰什、升級(jí)硬件
4>、根據(jù)查詢(xún)條件,建立索引,優(yōu)化索引丁逝、優(yōu)化訪問(wèn)方式汁胆,限制結(jié)果集的數(shù)據(jù)量。注意填充因子要適當(dāng)(最好是使用默認(rèn)值0)霜幼。索引應(yīng)該盡量小嫩码,使用字節(jié)數(shù)小的列建索引好(參照索引的創(chuàng)建),不要對(duì)有限的幾個(gè)值的字段建單一索引如性別字段
5>、提高網(wǎng)速;
6>罪既、擴(kuò)大服務(wù)器的內(nèi)存,Windows 2000和SQL server 2000能支持4-8G的內(nèi)存谢谦。配置虛擬內(nèi)存:虛擬內(nèi)存大小應(yīng)基于計(jì)算機(jī)上并發(fā)運(yùn)行的服務(wù)進(jìn)行配置。運(yùn)行 Microsoft SQL Server? 2000 時(shí)萝衩,可考慮將虛擬內(nèi)存大小設(shè)置為計(jì)算機(jī)中安裝的物理內(nèi)存的 1.5 倍回挽。如果另外安裝了全文檢索功能,并打算運(yùn)行 Microsoft 搜索服務(wù)以便執(zhí)行全文索引和查詢(xún)猩谊,可考慮:將虛擬內(nèi)存大小配置為至少是計(jì)算機(jī)中安裝的物理內(nèi)存的 3 倍千劈。將 SQL Server max server memory 服務(wù)器配置選項(xiàng)配置為物理內(nèi)存的 1.5 倍(虛擬內(nèi)存大小設(shè)置的一半)∨平荩
7>墙牌、增加服務(wù)器 CPU個(gè)數(shù);但是必須明白并行處理串行處理更需要資源例如內(nèi)存。使用并行還是串行程是MsSQL自動(dòng)評(píng)估選擇的暗甥。單個(gè)任務(wù)分解成多個(gè)任務(wù)喜滨,就可以在處理器上運(yùn)行。例如耽擱查詢(xún)的排序撤防、連接虽风、掃描和GROUP BY字句同時(shí)執(zhí)行,SQL SERVER根據(jù)系統(tǒng)的負(fù)載情況決定最優(yōu)的并行等級(jí),復(fù)雜的需要消耗大量的CPU的查詢(xún)最適合并行處理辜膝。但是更新操作Update,Insert无牵, Delete還不能并行處理〕Ф叮
8>茎毁、如果是使用like進(jìn)行查詢(xún)的話,簡(jiǎn)單的使用index是不行的忱辅,但是全文索引七蜘,耗空間。 like ’a%’ 使用索引 like ’%a’ 不使用索引用 like ’%a%’ 查詢(xún)時(shí)墙懂,查詢(xún)耗時(shí)和字段值總長(zhǎng)度成正比,所以不能用CHAR類(lèi)型橡卤,而是VARCHAR。對(duì)于字段的值很長(zhǎng)的建全文索引垒在∷馄牵
9>、DB Server 和APPLication Server 分離场躯;OLTP和OLAP分離
10>谈为、分布式分區(qū)視圖可用于實(shí)現(xiàn)數(shù)據(jù)庫(kù)服務(wù)器聯(lián)合體。聯(lián)合體是一組分開(kāi)管理的服務(wù)器踢关,但它們相互協(xié)作分擔(dān)系統(tǒng)的處理負(fù)荷伞鲫。這種通過(guò)分區(qū)數(shù)據(jù)形成數(shù)據(jù)庫(kù)服務(wù)器聯(lián)合體的機(jī)制能夠擴(kuò)大一組服務(wù)器,以支持大型的多層 Web 站點(diǎn)的處理需要签舞。有關(guān)更多信息秕脓,參見(jiàn)設(shè)計(jì)聯(lián)合數(shù)據(jù)庫(kù)服務(wù)器。(參照SQL幫助文件’分區(qū)視圖’)
a儒搭、在實(shí)現(xiàn)分區(qū)視圖之前吠架,必須先水平分區(qū)表
b、在創(chuàng)建成員表后搂鲫,在每個(gè)成員服務(wù)器上定義一個(gè)分布式分區(qū)視圖傍药,并且每個(gè)視圖具有相同的名稱(chēng)。這樣魂仍,引用分布式分區(qū)視圖名的查詢(xún)可以在任何一個(gè)成員服務(wù)器上運(yùn)行拐辽。系統(tǒng)操作如同每個(gè)成員服務(wù)器上都有一個(gè)原始表的復(fù)本一樣,但其實(shí)每個(gè)服務(wù)器上只有一個(gè)成員表和一個(gè)分布式分區(qū)視圖擦酌。數(shù)據(jù)的位置對(duì)應(yīng)用程序是透明的俱诸。
11赊舶、重建索引 DBCC REINDEX ,DBCC INDEXDEFRAG,收縮數(shù)據(jù)和日志 DBCC SHRINKDB,DBCC SHRINKFILE. 設(shè)置自動(dòng)收縮日志.對(duì)于大的數(shù)據(jù)庫(kù)不要設(shè)置數(shù)據(jù)庫(kù)自動(dòng)增長(zhǎng)睁搭,它會(huì)降低服務(wù)器的性能赶诊。在T-sql的寫(xiě)法上有很大的講究,下面列出常見(jiàn)的要點(diǎn):
首先介袜,DBMS處理查詢(xún)計(jì)劃的過(guò)程是這樣的:
1>甫何、 查詢(xún)語(yǔ)句的詞法出吹、語(yǔ)法檢查
2>遇伞、 將語(yǔ)句提交給DBMS的查詢(xún)優(yōu)化器
3>、 優(yōu)化器做代數(shù)優(yōu)化和存取路徑的優(yōu)化
4>捶牢、 由預(yù)編譯模塊生成查詢(xún)規(guī)劃
5>鸠珠、 然后在合適的時(shí)間提交給系統(tǒng)處理執(zhí)行
6>、 最后將執(zhí)行結(jié)果返回給用戶(hù)
12秋麸、Commit和rollback的區(qū)別 Rollback:回滾所有的事物渐排。 Commit:提交當(dāng)前的事物. 沒(méi)有必要在動(dòng)態(tài)SQL里寫(xiě)事物,如果要寫(xiě)請(qǐng)寫(xiě)在外面如: begin tran exec(@s) commit trans 或者將動(dòng)態(tài)SQL 寫(xiě)成函數(shù)或者存儲(chǔ)過(guò)程灸蟆。
13驯耻、在查詢(xún)Select語(yǔ)句中用Where字句限制返回的行數(shù),避免表掃描,如果返回不必要的數(shù)據(jù),浪費(fèi)了服務(wù)器的I/O資源炒考,加重了網(wǎng)絡(luò)的負(fù)擔(dān)降低性能可缚。如果表很大,在表掃描的期間將表鎖住斋枢,禁止其他的聯(lián)接訪問(wèn)表,后果嚴(yán)重帘靡。
14、SQL的注釋申明對(duì)執(zhí)行沒(méi)有任何影響
15瓤帚、盡可能不使用光標(biāo)描姚,它占用大量的資源。如果需要row-by-row地執(zhí)行戈次,盡量采用非光標(biāo)技術(shù),如:在客戶(hù)端循環(huán)轩勘,用臨時(shí)表,Table變量怯邪,用子查詢(xún)绊寻,用Case語(yǔ)句等等。游標(biāo)可以按照它所支持的提取選項(xiàng)進(jìn)行分類(lèi): 只進(jìn) 必須按照從第一行到最后一行的順序提取行擎颖。FETCH NEXT 是唯一允許的提取操作,也是默認(rèn)方式榛斯。可滾動(dòng)性可以在游標(biāo)中任何地方隨機(jī)提取任意行搂捧。游標(biāo)的技術(shù)在SQL2000下變得功能很強(qiáng)大驮俗,他的目的是支持循環(huán)。有四個(gè)并發(fā)選項(xiàng) READ_ONLY:不允許通過(guò)游標(biāo)定位更新(Update)允跑,且在組成結(jié)果集的行中沒(méi)有鎖王凑。 OPTIMISTIC WITH valueS:樂(lè)觀并發(fā)控制是事務(wù)控制理論的一個(gè)標(biāo)準(zhǔn)部分搪柑。樂(lè)觀并發(fā)控制用于這樣的情形,即在打開(kāi)游標(biāo)及更新行的間隔中索烹,只有很小的機(jī)會(huì)讓第二個(gè)用戶(hù)更新某一行工碾。當(dāng)某個(gè)游標(biāo)以此選項(xiàng)打開(kāi)時(shí),沒(méi)有鎖控制其中的行百姓,這將有助于最大化其處理能力渊额。如果用戶(hù)試圖修改某一行,則此行的當(dāng)前值會(huì)與最后一次提取此行時(shí)獲取的值進(jìn)行比較垒拢。如果任何值發(fā)生改變旬迹,則服務(wù)器就會(huì)知道其他人已更新了此行邀杏,并會(huì)返回一個(gè)錯(cuò)誤待秃。如果值是一樣的,服務(wù)器就執(zhí)行修改少漆。選擇這個(gè)并發(fā)選項(xiàng) OPTIMISTIC WITH ROW VERSIONING:此樂(lè)觀并發(fā)控制選項(xiàng)基于行版本控制尸疆。使用行版本控制椿猎,其中的表必須具有某種版本標(biāo)識(shí)符,服務(wù)器可用它來(lái)確定該行在讀入游標(biāo)后是否有所更改寿弱。在 SQL Server 中犯眠,這個(gè)性能由 timestamp 數(shù)據(jù)類(lèi)型提供,它是一個(gè)二進(jìn)制數(shù)字脖捻,表示數(shù)據(jù)庫(kù)中更改的相對(duì)順序阔逼。每個(gè)數(shù)據(jù)庫(kù)都有一個(gè)全局當(dāng)前時(shí)間戳值:@@DBTS。每次以任何方式更改帶有 timestamp 列的行時(shí)地沮,SQL Server 先在時(shí)間戳列中存儲(chǔ)當(dāng)前的 @@DBTS 值嗜浮,然后增加 @@DBTS 的值。如果某 個(gè)表具有 timestamp 列摩疑,則時(shí)間戳?xí)挥浀叫屑?jí)危融。服務(wù)器就可以比較某行的當(dāng)前時(shí)間戳值和上次提取時(shí)所存儲(chǔ)的時(shí)間戳值,從而確定該行是否已更新雷袋。服務(wù)器不必比較所有列的值吉殃,只需比較 timestamp 列即可。如果應(yīng)用程序?qū)](méi)有 timestamp 列的表要求基于行版本控制的樂(lè)觀并發(fā)楷怒,則游標(biāo)默認(rèn)為基于數(shù)值的樂(lè)觀并發(fā)控制蛋勺。 SCROLL LOCKS 這個(gè)選項(xiàng)實(shí)現(xiàn)悲觀并發(fā)控制。在悲觀并發(fā)控制中鸠删,在把數(shù)據(jù)庫(kù)的行讀入游標(biāo)結(jié)果集時(shí)抱完,應(yīng)用程序?qū)⒃噲D鎖定數(shù)據(jù)庫(kù)行。在使用服務(wù)器游標(biāo)時(shí)刃泡,將行讀入游標(biāo)時(shí)會(huì)在其上放置一個(gè)更新鎖巧娱。如果在事務(wù)內(nèi)打開(kāi)游標(biāo)碉怔,則該事務(wù)更新鎖將一直保持到事務(wù)被提交或回滾;當(dāng)提取下一行時(shí)禁添,將除去游標(biāo)鎖撮胧。如果在事務(wù)外打開(kāi)游標(biāo),則提取下一行時(shí)老翘,鎖就被丟棄芹啥。因此,每當(dāng)用戶(hù)需要完全的悲觀并發(fā)控制時(shí)酪捡,游標(biāo)都應(yīng)在事務(wù)內(nèi)打開(kāi)叁征。更新鎖將阻止任何其它任務(wù)獲取更新鎖或排它鎖纳账,從而阻止其它任務(wù)更新該行逛薇。然而,更新鎖并不阻止共享鎖疏虫,所以它不會(huì)阻止其它任務(wù)讀取行永罚,除非第二個(gè)任務(wù)也在要求帶更新鎖的讀取。滾動(dòng)鎖根據(jù)在游標(biāo)定義的 Select 語(yǔ)句中指定的鎖提示卧秘,這些游標(biāo)并發(fā)選項(xiàng)可以生成滾動(dòng)鎖呢袱。滾動(dòng)鎖在提取時(shí)在每行上獲取,并保持到下次提取或者游標(biāo)關(guān)閉翅敌,以先發(fā)生者為準(zhǔn)羞福。下次提取時(shí),服務(wù)器為新提取中的行獲取滾動(dòng)鎖蚯涮,并釋放上次提取中行的滾動(dòng)鎖治专。滾動(dòng)鎖獨(dú)立于事務(wù)鎖,并可以保持到一個(gè)提交或回滾操作之后遭顶。如果提交時(shí)關(guān)閉游標(biāo)的選項(xiàng)為關(guān)张峰,則 COMMIT 語(yǔ)句并不關(guān)閉任何打開(kāi)的游標(biāo),而且滾動(dòng)鎖被保留到提交之后棒旗,以維護(hù)對(duì)所提取數(shù)據(jù)的隔離喘批。所獲取滾動(dòng)鎖的類(lèi)型取決于游標(biāo)并發(fā)選項(xiàng)和游標(biāo) Select 語(yǔ)句中的鎖提示。鎖提示 只讀 樂(lè)觀數(shù)值 樂(lè)觀行版本控制 鎖定無(wú)提示 未鎖定 未鎖定 未鎖定 更新 NOLOCK 未鎖定 未鎖定未鎖定 未鎖定 HOLDLOCK 共享 共享 共享 更新 UPDLOCK 錯(cuò)誤 更新 更新 更新 TABLOCKX 錯(cuò)誤 未鎖定 未鎖定更新其它 未鎖定 未鎖定 未鎖定 更新 *指定 NOLOCK 提示將使指定了該提示的表在游標(biāo)內(nèi)是只讀的铣揉。
16饶深、用Profiler來(lái)跟蹤查詢(xún),得到查詢(xún)所需的時(shí)間逛拱,找出SQL的問(wèn)題所在;用索引優(yōu)化器優(yōu)化索引
17敌厘、注意UNion和UNion all 的區(qū)別。UNION all好
18橘券、注意使用DISTINCT额湘,在沒(méi)有必要時(shí)不要用卿吐,它同UNION一樣會(huì)使查詢(xún)變慢。重復(fù)的記錄在查詢(xún)里是沒(méi)有問(wèn)題的
19锋华、查詢(xún)時(shí)不要返回不需要的行嗡官、列
20、用sp_configure ’query governor cost limit’或者SET QUERY_GOVERNOR_COST_LIMIT來(lái)限制查詢(xún)消耗的資源毯焕。當(dāng)評(píng)估查詢(xún)消耗的資源超出限制時(shí)衍腥,服務(wù)器自動(dòng)取消查詢(xún),在查詢(xún)之前就扼殺掉。 SET LOCKTIME設(shè)置鎖的時(shí)間
21纳猫、用select top 100 / 10 Percent 來(lái)限制用戶(hù)返回的行數(shù)或者SET ROWCOUNT來(lái)限制操作的行
22婆咸、在SQL2000以前,一般不要用如下的字句: "IS NULL", "<>", "!=", "!>", "!<", "NOT", "NOT EXISTS", "NOT IN", "NOT LIKE", and "LIKE ’%500’"芜辕,因?yàn)樗麄儾蛔咚饕潜頀呙枭薪尽R膊灰赪here字句中的列名加函數(shù),如Convert侵续,substring等,如果必須用函數(shù)的時(shí)候倔丈,創(chuàng)建計(jì)算列再創(chuàng)建索引來(lái)替代.還可以變通寫(xiě)法:Where SUBSTRING(firstname,1,1) = ’m’改為Where firstname like ’m%’(索引掃描),一定要將函數(shù)和列名分開(kāi)状蜗。并且索引不能建得太多和太大需五。NOT IN會(huì)多次掃描表,使用EXISTS轧坎、NOT EXISTS 宏邮,IN , LEFT OUTER JOIN 來(lái)替代,特別是左連接,而Exists比IN更快缸血,最慢的是NOT操作.如果列的值含有空蜜氨,以前它的索引不起作用,現(xiàn)在2000的優(yōu)化器能夠處理了属百。相同的是IS NULL记劝,"NOT", "NOT EXISTS", "NOT IN"能優(yōu)化她,而"<>"等還是不能優(yōu)化族扰,用不到索引厌丑。
23、使用Query Analyzer渔呵,查看SQL語(yǔ)句的查詢(xún)計(jì)劃和評(píng)估分析是否是優(yōu)化的SQL怒竿。一般的20%的代碼占據(jù)了80%的資源,我們優(yōu)化的重點(diǎn)是這些慢的地方扩氢。
24耕驰、如果使用了IN或者OR等時(shí)發(fā)現(xiàn)查詢(xún)沒(méi)有走索引,使用顯示申明指定索引: Select * FROM PersonMember (INDEX = IX_Title) Where processid IN (’男’录豺,’女’)
25朦肘、將需要查詢(xún)的結(jié)果預(yù)先計(jì)算好放在表中饭弓,查詢(xún)的時(shí)候再Select。這在SQL7.0以前是最重要的手段媒抠。例如醫(yī)院的住院費(fèi)計(jì)算弟断。
26、MIN() 和 MAX()能使用到合適的索引趴生。
27阀趴、數(shù)據(jù)庫(kù)有一個(gè)原則是代碼離數(shù)據(jù)越近越好,所以?xún)?yōu)先選擇Default,依次為Rules,Triggers, Constraint(約束如外健主健CheckUNIQUE……,數(shù)據(jù)類(lèi)型的最大長(zhǎng)度等等都是約束),Procedure.這樣不僅維護(hù)工作小苍匆,編寫(xiě)程序質(zhì)量高刘急,并且執(zhí)行的速度快。28浸踩、如果要插入大的二進(jìn)制值到Image列叔汁,使用存儲(chǔ)過(guò)程,千萬(wàn)不要用內(nèi)嵌Insert來(lái)插入(不知JAVA是否)民轴。因?yàn)檫@樣應(yīng)用程序首先將二進(jìn)制值轉(zhuǎn)換成字符串(尺寸是它的兩倍)攻柠,服務(wù)器受到字符后又將他轉(zhuǎn)換成二進(jìn)制值.存儲(chǔ)過(guò)程就沒(méi)有這些動(dòng)作: 方法:Create procedure p_insert as insert into table(Fimage) values (@image), 在前臺(tái)調(diào)用這個(gè)存儲(chǔ)過(guò)程傳入二進(jìn)制參數(shù),這樣處理速度明顯改善后裸。
29、Between在某些時(shí)候比IN 速度更快,Between能夠更快地根據(jù)索引找到范圍冒滩。用查詢(xún)優(yōu)化器可見(jiàn)到差別微驶。 select * from chineseresume where title in (’男’,’女’) Select * from chineseresume where between ’男’ and ’女’ 是一樣的。由于in會(huì)在比較多次开睡,所以有時(shí)會(huì)慢些因苹。
30、在必要是對(duì)全局或者局部臨時(shí)表創(chuàng)建索引篇恒,有時(shí)能夠提高速度扶檐,但不是一定會(huì)這樣,因?yàn)樗饕埠馁M(fèi)大量的資源胁艰。他的創(chuàng)建同是實(shí)際表一樣款筑。
31、不要建沒(méi)有作用的事物例如產(chǎn)生報(bào)表時(shí)腾么,浪費(fèi)資源奈梳。只有在必要使用事物時(shí)使用它。
32解虱、用OR的字句可以分解成多個(gè)查詢(xún)攘须,并且通過(guò)UNION 連接多個(gè)查詢(xún)。他們的速度只同是否使用索引有關(guān),如果查詢(xún)需要用到聯(lián)合索引殴泰,用UNION all執(zhí)行的效率更高.多個(gè)OR的字句沒(méi)有用到索引于宙,改寫(xiě)成UNION的形式再試圖與索引匹配浮驳。一個(gè)關(guān)鍵的問(wèn)題是否用到索引。
33捞魁、盡量少用視圖抹恳,它的效率低。對(duì)視圖操作比直接對(duì)表操作慢,可以用stored procedure來(lái)代替她署驻。特別的是不要用視圖嵌套,嵌套視圖增加了尋找原始資料的難度奋献。我們看視圖的本質(zhì):它是存放在服務(wù)器上的被優(yōu)化好了的已經(jīng)產(chǎn)生了查詢(xún)規(guī)劃的SQL。對(duì)單個(gè)表檢索數(shù)據(jù)時(shí)旺上,不要使用指向多個(gè)表的視圖瓶蚂,直接從表檢索或者僅僅包含這個(gè)表的視圖上讀,否則增加了不必要的開(kāi)銷(xiāo),查詢(xún)受到干擾.為了加快視圖的查詢(xún)宣吱,MsSQL增加了視圖索引的功能窃这。
34、沒(méi)有必要時(shí)不要用DISTINCT和ORDER BY征候,這些動(dòng)作可以改在客戶(hù)端執(zhí)行杭攻。它們?cè)黾恿祟~外的開(kāi)銷(xiāo)。這同UNION 和UNION ALL一樣的道理疤坝≌捉猓 select top 20 ad.companyname,comid,position,ad.referenceid,worklocation, convert(varchar(10),ad.postDate,120) as postDate1,workyear,degreedescription FROM jobcn_query.dbo.COMPANYAD_query ad where referenceID in(’JCNAD00329667’,’JCNAD132168’,’JCNAD00337748’,’JCNAD00338345’, ’JCNAD00333138’,’JCNAD00303570’,’JCNAD00303569’, ’JCNAD00303568’,’JCNAD00306698’,’JCNAD00231935’,’JCNAD00231933’, ’JCNAD00254567’,’JCNAD00254585’,’JCNAD00254608’, ’JCNAD00254607’,’JCNAD00258524’,’JCNAD00332133’,’JCNAD00268618’, ’JCNAD00279196’,’JCNAD00268613’) order by postdate desc
35、在IN后面值的列表中跑揉,將出現(xiàn)最頻繁的值放在最前面锅睛,出現(xiàn)得最少的放在最后面,減少判斷的次數(shù)历谍。
36现拒、當(dāng)用Select INTO時(shí),它會(huì)鎖住系統(tǒng)表(sysobjects望侈,sysindexes等等)印蔬,阻塞其他的連接的存取。創(chuàng)建臨時(shí)表時(shí)用顯示申明語(yǔ)句脱衙,而不是 select INTO. drop table t_lxh begin tran select * into t_lxh from chineseresume where name = ’XYZ’ --commit 在另一個(gè)連接中Select * from sysobjects可以看到 Select INTO 會(huì)鎖住系統(tǒng)表侥猬,Create table 也會(huì)鎖系統(tǒng)表(不管是臨時(shí)表還是系統(tǒng)表)。所以千萬(wàn)不要在事物內(nèi)使用它F袂稹A昃俊!這樣的話如果是經(jīng)常要用的臨時(shí)表請(qǐng)使用實(shí)表奥帘,或者臨時(shí)表變量铜邮。
37、一般在GROUP BY 個(gè)HAVING字句之前就能剔除多余的行,所以盡量不要用它們來(lái)做剔除行的工作松蒜。他們的執(zhí)行順序應(yīng)該如下最優(yōu):select 的Where字句選擇所有合適的行扔茅,Group By用來(lái)分組個(gè)統(tǒng)計(jì)行,Having字句用來(lái)剔除多余的分組秸苗。這樣Group By 個(gè)Having的開(kāi)銷(xiāo)小召娜,查詢(xún)快.對(duì)于大的數(shù)據(jù)行進(jìn)行分組和Having十分消耗資源。如果Group BY的目的不包括計(jì)算惊楼,只是分組玖瘸,那么用Distinct更快
38、一次更新多條記錄比分多次更新每次一條快,就是說(shuō)批處理好
39檀咙、少用臨時(shí)表雅倒,盡量用結(jié)果集和Table類(lèi)性的變量來(lái)代替它,Table 類(lèi)型的變量比臨時(shí)表好
40、在SQL2000下弧可,計(jì)算字段是可以索引的蔑匣,需要滿足的條件如下: a、計(jì)算字段的表達(dá)是確定的 b棕诵、不能用在TEXT,Ntext裁良,Image數(shù)據(jù)類(lèi)型 c、必須配制如下選項(xiàng) ANSI_NULLS = ON, ANSI_PADDINGS = ON, ……. 41校套、盡量將數(shù)據(jù)的處理工作放在服務(wù)器上价脾,減少網(wǎng)絡(luò)的開(kāi)銷(xiāo),如使用存儲(chǔ)過(guò)程搔确。存儲(chǔ)過(guò)程是編譯好彼棍、優(yōu)化過(guò)、并且被組織到一個(gè)執(zhí)行規(guī)劃里膳算、且存儲(chǔ)在數(shù)據(jù)庫(kù)中的SQL語(yǔ)句,是控制流語(yǔ)言的集合弛作,速度當(dāng)然快涕蜂。反復(fù)執(zhí)行的動(dòng)態(tài)SQL,可以使用臨時(shí)存儲(chǔ)過(guò)程,該過(guò)程(臨時(shí)表)被放在Tempdb中映琳。以前由于SQL SERVER對(duì)復(fù)雜的數(shù)學(xué)計(jì)算不支持机隙,所以不得不將這個(gè)工作放在其他的層上而增加網(wǎng)絡(luò)的開(kāi)銷(xiāo)。SQL2000支持UDFs,現(xiàn)在支持復(fù)雜的數(shù)學(xué)計(jì)算萨西,函數(shù)的返回值不要太大有鹿,這樣的開(kāi)銷(xiāo)很大。用戶(hù)自定義函數(shù)象光標(biāo)一樣執(zhí)行的消耗大量的資源谎脯,如果返回大的結(jié)果采用存儲(chǔ)過(guò)程
42葱跋、不要在一句話里再三的使用相同的函數(shù),浪費(fèi)資源,將結(jié)果放在變量里再調(diào)用更快
43、Select COUNT(*)的效率教低娱俺,盡量變通他的寫(xiě)法稍味,而EXISTS快.同時(shí)請(qǐng)注意區(qū)別: select count(Field of null) from Table 和 select count(Field of NOT null) from Table 的返回值是不同的!\怼模庐!
44、當(dāng)服務(wù)器的內(nèi)存夠多時(shí)油宜,配制線程數(shù)量 = 最大連接數(shù)+5掂碱,這樣能發(fā)揮最大的效率;否則使用 配制線程數(shù)量<最大連接數(shù)啟用SQL SERVER的線程池來(lái)解決,如果還是數(shù)量 = 最大連接數(shù)+5慎冤,嚴(yán)重的損害服務(wù)器的性能疼燥。
45、按照一定的次序來(lái)訪問(wèn)你的表粪薛。如果你先鎖住表A悴了,再鎖住表B,那么在所有的存儲(chǔ)過(guò)程中都要按照這個(gè)順序來(lái)鎖定它們违寿。如果你(不經(jīng)意的)某個(gè)存儲(chǔ)過(guò)程中先鎖定表B湃交,再鎖定表A,這可能就會(huì)導(dǎo)致一個(gè)死鎖藤巢。如果鎖定順序沒(méi)有被預(yù)先詳細(xì)的設(shè)計(jì)好搞莺,死鎖很難被發(fā)現(xiàn)
46、通過(guò)SQL Server Performance Monitor監(jiān)視相應(yīng)硬件的負(fù)載 Memory: Page Faults / sec計(jì)數(shù)器如果該值偶爾走高掂咒,表明當(dāng)時(shí)有線程競(jìng)爭(zhēng)內(nèi)存才沧。如果持續(xù)很高,則內(nèi)存可能是瓶頸绍刮。
Process:
1>温圆、% DPC Time 指在范例間隔期間處理器用在緩延程序調(diào)用(DPC)接收和提供服務(wù)的百分比。(DPC 正在運(yùn)行的為比標(biāo)準(zhǔn)間隔優(yōu)先權(quán)低的間隔)孩革。 由于 DPC 是以特權(quán)模式執(zhí)行的岁歉,DPC 時(shí)間的百分比為特權(quán)時(shí)間百分比的一部分。這些時(shí)間單獨(dú)計(jì)算并且不屬于間隔計(jì)算總數(shù)的一部 分膝蜈。這個(gè)總數(shù)顯示了作為實(shí)例時(shí)間百分比的平均忙時(shí)锅移。
2>饱搏、%Processor Time計(jì)數(shù)器 如果該參數(shù)值持續(xù)超過(guò)95%非剃,表明瓶頸是CPU⊥品校可以考慮增加一個(gè)處理器或換一個(gè)更快的處理器备绽∪耄
3>、% Privileged Time 指非閑置處理器時(shí)間用于特權(quán)模式的百分比疯坤。(特權(quán)模式是為操作系統(tǒng)組件和操縱硬件驅(qū)動(dòng)程序而設(shè)計(jì)的一種處理模式报慕。它允許直接訪問(wèn)硬件和所有內(nèi)存。另一種模式為用戶(hù)模式压怠,它是一種為應(yīng)用程序眠冈、環(huán)境分系統(tǒng)和整數(shù)分系統(tǒng)設(shè)計(jì)的一種有限處理模式。操作系統(tǒng)將應(yīng)用程序線程轉(zhuǎn)換成特權(quán)模式以訪問(wèn)操作系統(tǒng)服務(wù))菌瘫。特權(quán)時(shí)間的 % 包括為間斷和 DPC 提供服務(wù)的時(shí)間蜗顽。特權(quán)時(shí)間比率高可能是由于失敗設(shè)備產(chǎn)生的大數(shù)量的間隔而引起的。這個(gè)計(jì)數(shù)器將平均忙時(shí)作為樣本時(shí)間的一部分顯示雨让」透牵
4>、% User Time表示耗費(fèi)CPU的數(shù)據(jù)庫(kù)操作栖忠,如排序崔挖,執(zhí)行aggregate functions等。如果該值很高庵寞,可考慮增加索引狸相,盡量使用簡(jiǎn)單的表聯(lián)接,水平分割大表格等方法來(lái)降低該值捐川。 Physical Disk: Curretn Disk Queue Length計(jì)數(shù)器該值應(yīng)不超過(guò)磁盤(pán)數(shù)的1.5~2倍脓鹃。要提高性能,可增加磁盤(pán)古沥。 SQLServer:Cache Hit Ratio計(jì)數(shù)器該值越高越好瘸右。如果持續(xù)低于80%,應(yīng)考慮增加內(nèi)存岩齿。 注意該參數(shù)值是從SQL Server啟動(dòng)后太颤,就一直累加記數(shù),所以運(yùn)行經(jīng)過(guò)一段時(shí)間后盹沈,該值將不能反映系統(tǒng)當(dāng)前值栋齿。
47襟诸、分析select emp_name form employee where salary > 3000 在此語(yǔ)句中若salary是Float類(lèi)型的,則優(yōu)化器對(duì)其進(jìn)行優(yōu)化為Convert(float,3000)基协,因?yàn)?000是個(gè)整數(shù)歌亲,我們應(yīng)在編程時(shí)使用3000.0而不要等運(yùn)行時(shí)讓DBMS進(jìn)行轉(zhuǎn)化。同樣字符和整型數(shù)據(jù)的轉(zhuǎn)換澜驮。
48陷揪、查詢(xún)的關(guān)聯(lián)同寫(xiě)的順序 select a.personMemberID, * from chineseresume a,personmember b where personMemberID = b.referenceid and a.personMemberID = ’JCNPRH39681’ (A = B ,B = ’號(hào)碼’) select a.personMemberID, * from chineseresume a,personmember b where a.personMemberID = b.referenceid and a.personMemberID = ’JCNPRH39681’ and b.referenceid = ’JCNPRH39681’ (A = B ,B = ’號(hào)碼’, A = ’號(hào)碼’) select a.personMemberID, * from chineseresume a,personmember b where b.referenceid = ’JCNPRH39681’ and a.personMemberID = ’JCNPRH39681’ (B = ’號(hào)碼’, A = ’號(hào)碼’)
49悍缠、(1)IF 沒(méi)有輸入負(fù)責(zé)人代碼 THEN code1=0 code2=9999 ELSE code1=code2=負(fù)責(zé)人代碼 END IF 執(zhí)行SQL語(yǔ)句為: Select 負(fù)責(zé)人名 FROM P2000 Where 負(fù)責(zé)人代碼>=:code1 AND負(fù)責(zé)人代碼 <=:code2 (2)IF 沒(méi)有輸入負(fù)責(zé)人代碼 THEN Select 負(fù)責(zé)人名 FROM P2000 ELSE code= 負(fù)責(zé)人代碼 Select 負(fù)責(zé)人代碼 FROM P2000 Where 負(fù)責(zé)人代碼=:code END IF 第一種方法只用了一條SQL語(yǔ)句,第二種方法用了兩條SQL語(yǔ)句卦绣。在沒(méi)有輸入負(fù)責(zé)人代碼時(shí),第二種方法顯然比第一種方法執(zhí)行效率高,因?yàn)樗鼪](méi)有限制條件; 在輸入了負(fù)責(zé)人代碼時(shí),第二種方法仍然比第一種方法效率高,不僅是少了一個(gè)限制條件,還因相等運(yùn)算是最快的查詢(xún)運(yùn)算。我們寫(xiě)程序不要怕麻煩
50飞蚓、關(guān)于JOBCN現(xiàn)在查詢(xún)分頁(yè)的新方法(如下)滤港,用性能優(yōu)化器分析性能的瓶頸,如果在I/O或者網(wǎng)絡(luò)的速度上趴拧,如下的方法優(yōu)化切實(shí)有效溅漾,如果在CPU或者內(nèi)存上,用現(xiàn)在的方法更好著榴。請(qǐng)區(qū)分如下的方法添履,說(shuō)明索引越小越好∧杂郑 begin DECLARE @local_variable table (FID int identity(1,1),ReferenceID varchar(20)) insert into @local_variable (ReferenceID) select top 100000 ReferenceID from chineseresume order by ReferenceID select * from @local_variable where Fid > 40 and fid <= 60 end 和 begin DECLARE @local_variable table (FID int identity(1,1),ReferenceID varchar(20)) insert into @local_variable (ReferenceID) select top 100000 ReferenceID from chineseresume order by updatedate select * from @local_variable where Fid > 40 and fid <= 60 end 的不同 begin create table #temp (FID int identity(1,1),ReferenceID varchar(20)) insert into #temp (ReferenceID) select top 100000 ReferenceID from chineseresume order by updatedate select * from #temp where Fid > 40 and fid <= 60 drop table #temp end
另附:存儲(chǔ)過(guò)程編寫(xiě)經(jīng)驗(yàn)和優(yōu)化措施
一暮胧、適合讀者對(duì)象:數(shù)據(jù)庫(kù)開(kāi)發(fā)程序員,數(shù)據(jù)庫(kù)的數(shù)據(jù)量很多问麸,涉及到對(duì)SP(存儲(chǔ)過(guò)程 stored procedure)的優(yōu)化的項(xiàng)目開(kāi)發(fā)人員往衷,對(duì)數(shù)據(jù)庫(kù)有濃厚興趣的人。
二口叙、介紹:在數(shù)據(jù)庫(kù)的開(kāi)發(fā)過(guò)程中炼绘,經(jīng)常會(huì)遇到復(fù)雜的業(yè)務(wù)邏輯和對(duì)數(shù)據(jù)庫(kù)的操作,這個(gè)時(shí)候就會(huì)用SP來(lái)封裝數(shù)據(jù)庫(kù)操作妄田。如果項(xiàng)目的SP較多俺亮,書(shū)寫(xiě)又沒(méi)有一定的規(guī)范,將會(huì)影響以后的系統(tǒng)維護(hù)困難和大SP邏輯的難以理解疟呐,另外如果數(shù)據(jù)庫(kù)的數(shù)據(jù)量大或者項(xiàng)目對(duì)SP的性能要求很脚曾,就會(huì)遇到優(yōu)化的問(wèn)題,否則速度有可能很慢启具,經(jīng)過(guò)親身經(jīng)驗(yàn)本讥,一個(gè)經(jīng)過(guò)優(yōu)化過(guò)的SP要比一個(gè)性能差的SP的效率甚至高幾百倍。
三鲁冯、內(nèi)容:
1拷沸、開(kāi)發(fā)人員如果用到其他庫(kù)的Table或View,務(wù)必在當(dāng)前庫(kù)中建立View來(lái)實(shí)現(xiàn)跨庫(kù)操作薯演,最好不要直接使用“databse.dbo.table_name”撞芍,因?yàn)閟p_depends不能顯示出該SP所使用的跨庫(kù)table或view,不方便校驗(yàn)跨扮。
2序无、開(kāi)發(fā)人員在提交SP前验毡,必須已經(jīng)使用set showplan on分析過(guò)查詢(xún)計(jì)劃,做過(guò)自身的查詢(xún)優(yōu)化檢查帝嗡。
3晶通、高程序運(yùn)行效率,優(yōu)化應(yīng)用程序哟玷,在SP編寫(xiě)過(guò)程中應(yīng)該注意以下幾點(diǎn):
a) SQL的使用規(guī)范:
i. 盡量避免大事務(wù)操作狮辽,慎用holdlock子句,提高系統(tǒng)并發(fā)能力碗降。
ii. 盡量避免反復(fù)訪問(wèn)同一張或幾張表隘竭,尤其是數(shù)據(jù)量較大的表,可以考慮先根據(jù)條件提取數(shù)據(jù)到臨時(shí)表中讼渊,然后再做連接动看。
iii. 盡量避免使用游標(biāo),因?yàn)橛螛?biāo)的效率較差爪幻,如果游標(biāo)操作的數(shù)據(jù)超過(guò)1萬(wàn)行菱皆,那么就應(yīng)該改寫(xiě);如果使用了游標(biāo)挨稿,就要盡量避免在游標(biāo)循環(huán)中再進(jìn)行表連接的操作仇轻。
iv. 注意where字句寫(xiě)法,必須考慮語(yǔ)句順序奶甘,應(yīng)該根據(jù)索引順序篷店、范圍大小來(lái)確定條件子句的前后順序,盡可能的讓字段順序與索引順序相一致臭家,范圍從大到小疲陕。
v. 不要在where子句中的“=”左邊進(jìn)行函數(shù)、算術(shù)運(yùn)算或其他表達(dá)式運(yùn)算钉赁,否則系統(tǒng)將可能無(wú)法正確使用索引蹄殃。
vi. 盡量使用exists代替select count(1)來(lái)判斷是否存在記錄,count函數(shù)只有在統(tǒng)計(jì)表中所有行數(shù)時(shí)使用你踩,而且count(1)比count(*)更有效率诅岩。
vii. 盡量使用“>=”,不要使用“>”带膜。
viii. 注意一些or子句和union子句之間的替換
ix. 注意表之間連接的數(shù)據(jù)類(lèi)型吩谦,避免不同類(lèi)型數(shù)據(jù)之間的連接。
x. 注意存儲(chǔ)過(guò)程中參數(shù)和數(shù)據(jù)類(lèi)型的關(guān)系膝藕。
xi. 注意insert逮京、update操作的數(shù)據(jù)量,防止與其他應(yīng)用沖突束莫。如果數(shù)據(jù)量超過(guò)200個(gè)數(shù)據(jù)頁(yè)面(400k)懒棉,那么系統(tǒng)將會(huì)進(jìn)行鎖升級(jí),頁(yè)級(jí)鎖會(huì)升級(jí)成表級(jí)鎖览绿。
b) 索引的使用規(guī)范:
i. 索引的創(chuàng)建要與應(yīng)用結(jié)合考慮策严,建議大的OLTP表不要超過(guò)6個(gè)索引。
ii. 盡可能的使用索引字段作為查詢(xún)條件饿敲,尤其是聚簇索引妻导,必要時(shí)可以通過(guò)index index_name來(lái)強(qiáng)制指定索引
iii. 避免對(duì)大表查詢(xún)時(shí)進(jìn)行table scan,必要時(shí)考慮新建索引怀各。
iv. 在使用索引字段作為條件時(shí)倔韭,如果該索引是聯(lián)合索引,那么必須使用到該索引中的第一個(gè)字段作為條件時(shí)才能保證系統(tǒng)使用該索引瓢对,否則該索引將不會(huì)被使用寿酌。
v. 要注意索引的維護(hù),周期性重建索引硕蛹,重新編譯存儲(chǔ)過(guò)程醇疼。
c) tempdb的使用規(guī)范:
i. 盡量避免使用distinct、order by法焰、group by秧荆、having、join埃仪、cumpute乙濒,因?yàn)檫@些語(yǔ)句會(huì)加重tempdb的負(fù)擔(dān)。
ii. 避免頻繁創(chuàng)建和刪除臨時(shí)表卵蛉,減少系統(tǒng)表資源的消耗颁股。
iii. 在新建臨時(shí)表時(shí),如果一次性插入數(shù)據(jù)量很大毙玻,那么可以使用select into代替create table豌蟋,避免log,提高速度桑滩;如果數(shù)據(jù)量不大梧疲,為了緩和系統(tǒng)表的資源,建議先create table运准,然后insert幌氮。
iv. 如果臨時(shí)表的數(shù)據(jù)量較大,需要建立索引胁澳,那么應(yīng)該將創(chuàng)建臨時(shí)表和建立索引的過(guò)程放在單獨(dú)一個(gè)子存儲(chǔ)過(guò)程中该互,這樣才能保證系統(tǒng)能夠很好的使用到該臨時(shí)表的索引。
v. 如果使用到了臨時(shí)表韭畸,在存儲(chǔ)過(guò)程的最后務(wù)必將所有的臨時(shí)表顯式刪除宇智,先truncate table蔓搞,然后drop table,這樣可以避免系統(tǒng)表的較長(zhǎng)時(shí)間鎖定随橘。
vi. 慎用大的臨時(shí)表與其他大表的連接查詢(xún)和修改喂分,減低系統(tǒng)表負(fù)擔(dān),因?yàn)檫@種操作會(huì)在一條語(yǔ)句中多次使用tempdb的系統(tǒng)表机蔗。
d) 合理的算法使用:
根據(jù)上面已提到的SQL優(yōu)化技術(shù)和ASE Tuning手冊(cè)中的SQL優(yōu)化內(nèi)容,結(jié)合實(shí)際應(yīng)用,采用多種算法進(jìn)行比較,以獲得消耗資源最少蒲祈、效率最高的方法。具體可用ASE調(diào)優(yōu)命令:set statistics io on, set statistics time on , set showplan on 等萝嘁。