SQLServer性能優(yōu)化--間接實現(xiàn)函數(shù)索引或者Hash索引
SQLServer中沒有函數(shù)索引,在某些場景下查詢的時候要根據(jù)字段的某一部分做查詢或者經(jīng)過某種計算之后做查詢,如果使用函數(shù)或者其他方式作用在字段上之后,就會限制到索引的使用,不過我們可以間接地實現(xiàn)類似于函數(shù)索引的功能。
另外一個就是如果查詢字段較大或者字段較多的時候,所建立的索引就顯得有點笨重,效率也不高,就需要考慮使用一個較小的"替代性"字段做等價替換,類似于Hash索引,
本文粗淺地介紹兩種上述兩種問題的解決方式,僅供參考。
1,在計算列上建索引,實現(xiàn)“函數(shù)索引”的功能
SQLServer在建表的時候允許使用計算列,可以借助這個計算列來實現(xiàn)函數(shù)索引的功能,這里舉例說明一下
Create Table TestFunctionIndex ( id int identity(1,1), val varchar(50), subval as LOWER(SUBSTRING(val,10,4)) persisted --增加一個持久化計算列 ) GO --在持久化計算列上建立索引 create index idx_subvar on TestFunctionIndex(subval) GO --插入10W行測試數(shù)據(jù) insert into TestFunctionIndex(val) values (NEWID()) go 100000
在有索引的字段上使用函數(shù)之后,是無法使用索引的
如果直接在計算列上查詢,就可以正常地使用到索引了
以上通過在計算列上建立一個索引,可以根據(jù)計算列上的索引做查找,避免了直接在字段上使用函數(shù)或者其他操作,造成即便字段上有索引也用不到的情況
補充:
測試中神奇地發(fā)現(xiàn),如果計算列字段上建立了索引,在原始字段上使用函數(shù)與計算列的函數(shù)一樣的時候,可以神奇地使用到計算列上的索引。可見SQLServer在我們沒有注意的地方也是下了不少功夫的啊
2,生成較長字段或者多個字段的Hash值替代原始字段做查詢或者連接來提升查詢效率
開發(fā)中遇到另外一種常見的情況是經(jīng)常使用到的查詢條件字段較長,或者是表連接的時候連接條件字段較多,
即便是字段或者查詢條件上有索引,但是因為字段較長或者條件較多,此時有可能會影響到查詢的效率
這種情況就適當(dāng)考慮將原始的較長的字段生成一個較小的字段(但是要確保唯一性),或者是講多個字段生成一個較短的數(shù)據(jù)類型做替代,以提高查詢的效率
舉個例子,假如有這么一張表,Name字段是我模擬出來的,Name是一個比較長的字段,又要用來做檢索
意思就是查詢字段較長,索引代價太大,此時就需要考慮用一種較小的等價字段來替代
下面通過某種方式計算較長字段的Hash值,來做等價替換
模擬生成一下測試數(shù)據(jù)
Create table testHashColumn ( id int identity(1,1), QueryName nvarchar(100), HashName AS CAST( HASHBYTES('MD2',QueryName) AS UNIQUEIDENTIFIER) persisted ) GO create index idx_HashName ON testHashColumn(HashName) GO --這里模擬生成一個較長的名字字段 DECLARE @i int = 0 while @i<10000 begin INSERT INTO testHashColumn (QueryName) VALUES (CONCAT('北京新視點科技文化傳媒有限公司',@i)) set @i = @i+1 end
我們知道,Name這個名字是nvarchar(100)的,這個字段做索引不是不可以,如果情況復(fù)雜,實際中有可能比這個字段更大,做索引顯得太寬了,造成索引空間過大,在效率上有一定程度的影響。
這里就可以考慮在Name這個字段上生成一個“替代”字段(上述HashName AS CAST( HASHBYTES('MD2',QueryName) AS UNIQUEIDENTIFIER) persisted這個計算列),
這個字段首選是要跟實際值一一對應(yīng)的,另外就是要求“替代”的字段類型要求相對較小,當(dāng)然方法也有多種,比如生成利用checksum函數(shù)生成一個校驗值,但是據(jù)實際觀察checksum生成的校驗值是有可能重復(fù)的,也就是說兩個不同的字符串,生成同一個校驗值
比如這樣,很容易驗證出來這個問題,可以認(rèn)為是對于不同的字符串,計算之后得到同一個校驗和
因此在生成“替代”字段的時候,需要考慮計算值的唯一性
這里使用的是HASHBYTES加密函數(shù),對字符串加密,然后對加密之后的數(shù)據(jù)生成一個UNIQUEIDENTIFIER,重復(fù)的概率就小的多的多了
演示這里通過CAST( HASHBYTES('MD2','北京新視點科技文化傳媒有限公司999') AS UNIQUEIDENTIFIER)的方式,就可以給這個較長的字段生成一個UNIQUEIDENTIFIER類型的字段,
當(dāng)然也不一定只有這一種方法,甚至可以做的跟復(fù)雜,只要能保證一個唯一的長字段生成的較短的字段也是唯一的就可以達(dá)到目的了
參考如下查詢,就可以使用HashName計算出來的值與計算列做比較,在一定程度上可以減少檢索字段索引的大小,又能達(dá)到目的的效果
如截圖,就可以使用HashName字段上的索引了,同時也避免了在原始的QueryName這個較長的字段上建索引,節(jié)約了空間并提高了查詢效率
3, 邏輯主鍵為多個字段的時候,在多了字段上生成一個“替代”性的唯一字段
某些情況下業(yè)務(wù)需求或者設(shè)計也好(比如沒有達(dá)到第三范式,BC范式,第四范式,甚至是第五范式),在表連接的時候往往會有多個字段
比如這種樣子:
SELECT * FROM TableNameA a INNER JOIN TableNameB b ON a.key=b.key AND a.Type = b.Type AND a.Status = b.Staus AND a.CreationTime = b.CreationTime AND a.***=b.*** where ***
在表關(guān)聯(lián)的時候,連接條件很多,如果是這樣子,最好的情況就是建立一個較寬的復(fù)合索引,但是這樣的話,索引的寬度和體積就變得很大,使用的時候效率也有一定的影響。這種情況就可以考慮在TableNameA 和 TableNameB 上,利用多個連接的字段(Key+Type +Status +CreationTime+***)做了類似于示例2中的一個計算列,在計算列上建立一個索引,然后再表連接的時候就可以用如下的方式替代
SELECT * FROM TableNameA a INNER JOIN TableNameB b ON a.HashValue=b.HashValue WHERE ***
總是,這是一種以空間換時間的思路(冗余存儲一個類似于標(biāo)識符的字段,提高查詢效率),在生成“替代”字段的思想有兩點,第一要足夠的小,第二要原始值生成替代字段的唯一性
總結(jié):SQLServer 中沒有函數(shù)索引和Hash索引,而某些業(yè)務(wù)需求或者說是為了性能考慮,又需要類似的功能,通過類似于空間換時間的方法來實現(xiàn),可以變通地來實現(xiàn)類似于函數(shù)索引或者Hash索引的功能,已達(dá)到其他數(shù)據(jù)庫中函數(shù)索引和Hash索引的效果(雖然原理可能不一樣)。需要注意的就是在生成計算列或者說Hash值替代的時候要注意計算方式,確保生成之后的Key值的唯一性。當(dāng)然實現(xiàn)方式就可以根據(jù)需要自行選擇了,條條大路通羅馬。
以上就是本文的全部內(nèi)容,希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作能帶來一定的幫助,同時也希望多多支持我們!
欄 目:MsSql
下一篇:SqlServer快速檢索某個字段在哪些存儲過程中(sql 語句)
本文標(biāo)題:SQLServer性能優(yōu)化--間接實現(xiàn)函數(shù)索引或者Hash索引
本文地址:http://mengdiqiu.com.cn/a1/MsSql/10508.html
您可能感興趣的文章
- 01-10SQLServer存儲過程實現(xiàn)單條件分頁
- 01-10SQLServer中防止并發(fā)插入重復(fù)數(shù)據(jù)的方法詳解
- 01-10SQL Server性能調(diào)優(yōu)之緩存
- 01-10SqlServer 在事務(wù)中獲得自增ID的實例代碼
- 01-10SqlServer快速檢索某個字段在哪些存儲過程中(sql 語句)
- 01-10SQL Server里書簽查找的性能傷害
- 01-10SQLServer數(shù)據(jù)庫中開啟CDC導(dǎo)致事務(wù)日志空間被占滿的原因
- 01-10SQLServer中使用擴展事件獲取Session級別的等待信息及SQLServer 2016中
- 01-10SQLServer2008新實例遠(yuǎn)程數(shù)據(jù)庫鏈接問題(sp
- 01-10SQLServer存儲過程創(chuàng)建和修改的實現(xiàn)代碼


閱讀排行
本欄相關(guān)
- 01-10SQLServer存儲過程實現(xiàn)單條件分頁
- 01-10SQLServer中防止并發(fā)插入重復(fù)數(shù)據(jù)的方
- 01-10SQL Server 2012降級至2008R2的方法
- 01-10SQL Server性能調(diào)優(yōu)之緩存
- 01-10SQL Server數(shù)據(jù)庫定時自動備份
- 01-10Sql Server 死鎖的監(jiān)控分析解決思路
- 01-10實現(xiàn)SQL Server 原生數(shù)據(jù)從XML生成JSON數(shù)
- 01-10SqlServer快速檢索某個字段在哪些存儲
- 01-10SqlServer 在事務(wù)中獲得自增ID的實例代
- 01-10SQLServer性能優(yōu)化--間接實現(xiàn)函數(shù)索引或
隨機閱讀
- 01-10使用C語言求解撲克牌的順子及n個骰子
- 01-11Mac OSX 打開原生自帶讀寫NTFS功能(圖文
- 01-10SublimeText編譯C開發(fā)環(huán)境設(shè)置
- 08-05DEDE織夢data目錄下的sessions文件夾有什
- 08-05dedecms(織夢)副欄目數(shù)量限制代碼修改
- 01-11ajax實現(xiàn)頁面的局部加載
- 01-10delphi制作wav文件的方法
- 08-05織夢dedecms什么時候用欄目交叉功能?
- 01-10C#中split用法實例總結(jié)
- 04-02jquery與jsp,用jquery