網站首頁 編程語言 正文
1 鎖片化的產生
1.1 產生碎片化的原因
1、在B-tree索引中,表數(shù)據(jù)按照聚集索引的排序進行物理存儲,若聚集索引離散化比較嚴重,那么可能會出現(xiàn)較為嚴重的碎片化問題;
2、隨著業(yè)務的DML操作,會伴隨著數(shù)據(jù)頁分裂的情況,這種情況下也會導致表空間碎片化問題;
3、大表通過delete清理無效歷史數(shù)據(jù),delete產生碎片化空間;
1.2 碎片化的影響
表空間碎片化越嚴重越容易影響對該表的查詢效率,這是因為當表碎片化比較嚴重時,數(shù)據(jù)庫根據(jù)執(zhí)行計劃掃描滿足需求的數(shù)據(jù)頁會掃描較多“無效頁面”,導致查詢操作需要更多的IO消耗。
1.3 定位碎片化
1、在SQL Server中,可以通過DBCC SHOWCONTIG的方式查看表空間碎片化的一些統(tǒng)計信息,具體語法如下:
--查看數(shù)據(jù)庫中所有索引的碎片信息 use ${數(shù)據(jù)庫名} DBCC SHOWCONTIG WITH ALL_INDEXES --查看指定表的所有索引的碎片信息 DBCC SHOWCONTIG (${表名}) WITH ALL_INDEXES --查看指定表、指定索引的碎片信息 DBCC SHOWCONTIG (${表名},${索引名})
2、通過sys.dm_db_index_physical_stats()查看索引碎片化
SELECT * FROM sys.dm_db_index_physical_stats(DB_ID(N'db1'), OBJECT_ID(N'db1.dbo.users'), NULL, NULL , 'LIMITED'); SELECT * FROM sys.dm_db_index_physical_stats(DB_ID(N'db1'), OBJECT_ID(N'db1.dbo.users'), NULL, NULL , 'DETAILED');
重點關注:
- avg_fragment_size_in_pages : 該參數(shù)值越大,范圍掃描的性能越好
- avg_fragmentation_in_percent :對于heap表,該參數(shù)表示區(qū)碎片百分比;對于index,該參數(shù)表示邏輯碎片;該參數(shù)越大表示表的碎片化越嚴重,需要通過 Reorganize or Rebuild Indexes 來進行碎片化回收
- avg_page_space_used_in_percent : 該參數(shù)表示數(shù)據(jù)頁的填充程度,一般小于100%,但是該參數(shù)越小,表示數(shù)據(jù)頁面碎片化情況越嚴重。若想要數(shù)據(jù)頁使用率的問題,必須進行索引重建操作
- fragment_count : 碎片化數(shù)據(jù)頁數(shù)
- page_count : 掃描數(shù)據(jù)頁數(shù)
3、通過統(tǒng)計信息查看數(shù)據(jù)庫碎片化空間Top表信息
SELECT db_name() as DbName, t.NAME AS TableName, s.Name AS SchemaName, p.rows AS RowCounts, SUM(a.total_pages) * 8 AS TotalSpaceKB, CAST(ROUND(((SUM(a.total_pages) * 8) / 1024.00), 2) AS NUMERIC(36, 2)) AS 總共占用空間MB, SUM(a.used_pages) * 8 AS 總使用空間KB, CAST(ROUND(((SUM(a.used_pages) * 8) / 1024.00), 2) AS NUMERIC(36, 2)) AS 總使用空間MB, (SUM(a.total_pages) - SUM(a.used_pages)) * 8 AS 碎片化空間KB, CAST(ROUND(((SUM(a.total_pages) - SUM(a.used_pages)) * 8) / 1024.00, 2) AS NUMERIC(36, 2)) AS 碎片化空間MB FROM sys.tables t INNER JOIN sys.indexes i ON t.OBJECT_ID = i.object_id INNER JOIN sys.partitions p ON i.object_id = p.OBJECT_ID AND i.index_id = p.index_id INNER JOIN sys.allocation_units a ON p.partition_id = a.container_id LEFT OUTER JOIN sys.schemas s ON t.schema_id = s.schema_id WHERE t.is_ms_shipped = 0 AND i.OBJECT_ID > 0 GROUP BY t.Name, s.Name, p.Rows ORDER BY 總共占用空間MB desc
2 碎片化處理
由于表數(shù)據(jù)是根據(jù)聚集索引排序進行物理存儲,所以當表碎片化比較嚴重時,可以通過對聚集索引的重新組織來進行碎片化空間回收,重建索引的方式也有比較多方式,主要如下:
2.1 刪除并重建聚集索引
該方式其實就是將碎片化比較嚴重的表,先通過drop index刪除其聚集索引,然后通過create index或者alter table重建聚集索引。該方式的特點是:
- 執(zhí)行刪除聚集索引后,會影響該表有關利用該索引進行查詢的SQL執(zhí)行效率
- 執(zhí)行刪除聚集索引,也會導致該表相關的非聚集索引重建
- 在重建聚集索引期間,會獲取相應的Sch-M鎖,阻塞業(yè)務正常讀寫操作,且創(chuàng)建聚集索引后也會導致相應的非聚集索引重建
- 該方式會將整張表數(shù)據(jù)進行重新組織,可回收最大限度的碎片化空間
2.2 DROP_EXISTING
使用DROP_EXISTING進行重建索引,也是對聚集索引的刪除重建,但是該方式在方法一的基礎上做了一些優(yōu)化:
- 刪除聚集索引時,會保留主鍵索引的鍵值,避免了刪除、重建聚集索引時對非聚集索引的重建
- 執(zhí)行DROP_EXISTING重建索引期間,仍然會對正常業(yè)務讀寫操作造成阻塞
- 該方式會將整張表數(shù)據(jù)進行重新組織,可回收最大限度的碎片化空間
基本語法:
CREATE INDEX ${index_name} ON T(${index_col}) WITH (DROP_EXISTING = ON)
2.3 DBCC DBREINDEX
DBCC DBREINDEX也是通過對索引的刪除以及重建來實現(xiàn)碎片化回收。根據(jù)數(shù)據(jù)庫版本(企業(yè)版or非企業(yè)版)以及索引類型(非聚集or聚集),該操作是可以實現(xiàn)在線或者離線操作。
- 在企業(yè)版數(shù)據(jù)引擎中,對于非聚集索引的索引重建可以通過在線的方式進行操作
- 在線索引重建期間,雖然不阻塞正常業(yè)務讀寫操作,但還是對應的DML操作執(zhí)行效率還是會有所下降
- 離線索引重建期間,阻塞業(yè)務讀寫
- 對于在線索引重建,可以進行暫停或者終止。但是暫停期間應用會影響該表的DML執(zhí)行效率,如果后續(xù)不繼續(xù)索引的重建操作,請直接終止而不是暫停
- 該方式會將整張表數(shù)據(jù)進行重新組織,可回收最大限度的碎片化空間
基本語法:
-- 重建指定索引 USE ${db_name}; ?? GO ? DBCC DBREINDEX ('${schema_name}.${table_name}', ${index_name},80); ? GO -- 重建指定表全部索引 USE ${db_name}; ?? GO ? DBCC DBREINDEX ('${schema_name}.${table_name}', ' ', 70); ? GO
2.4 DBCC INDEXDEFRAG
該方式的實現(xiàn)邏輯與以上三種大有不同,DBCC INDEXDEFRAG并非完全重新組織整張表的b-tree結構:
DBCC INDEXDEFRAG按照索引鍵的邏輯順序,通過壓縮索引頁里的行然后刪除那些由此產生的不必要的碎片化數(shù)據(jù)頁、刪除完全碎片化數(shù)據(jù)頁面的方式來進行碎片化空間的回收
該方式執(zhí)行期間不阻塞業(yè)務讀寫操作
該方式下可回收的碎片化空間效果可能不如以上三種索引重建的方式
基本語法:
DBCC INDEXDEFRAG (${db_name}, '${schema_name}.${table_name}', ${index_name});
3 空間回收
需要注意的是,在SQL Server數(shù)據(jù)庫,我們對表空間數(shù)據(jù)進行碎片化處理、或者truncate清空無效歷史數(shù)據(jù),這些釋放出來的空間只是空出來,當有新數(shù)據(jù)寫入時,優(yōu)先使用這些空出來的數(shù)據(jù)頁,而不是再向OS申請新的數(shù)據(jù)空間擴展。所以這部分并不會直接釋放給OS,如果我們想要達到降低整個OS的磁盤空間使用率的話,還需要對數(shù)據(jù)庫的數(shù)據(jù)文件進行收縮。
1、檢查數(shù)據(jù)文件空間使用率
-- 檢查數(shù)據(jù)庫文件空間使用率 SELECT a.name [文件名稱] ,cast(a.[size]*1.0/128 as decimal(12,1)) AS [文件設置大小(MB)] , CAST( fileproperty(s.name,'SpaceUsed')/(8*16.0) AS DECIMAL(12,1)) AS [文件所占空間(MB)] , CAST( (fileproperty(s.name,'SpaceUsed')/(8*16.0))/(s.size/(8*16.0))*100.0 AS DECIMAL(12,1)) AS [所占空間率%] , CASE WHEN A.growth =0 THEN '文件大小固定,不會增長' ELSE '文件將自動增長' end [增長模式] ,CASE WHEN A.growth > 0 AND is_percent_growth = 0 THEN '增量為固定大小' WHEN A.growth > 0 AND is_percent_growth = 1 THEN '增量將用整數(shù)百分比表示' ELSE '文件大小固定,不會增長' END AS [增量模式] , CASE WHEN A.growth > 0 AND is_percent_growth = 0 THEN cast(cast(a.growth*1.0/128as decimal(12,0)) AS VARCHAR)+'MB' WHEN A.growth > 0 AND is_percent_growth = 1 THEN cast(cast(a.growth AS decimal(12,0)) AS VARCHAR)+'%' ELSE '文件大小固定,不會增長' end AS [增長值(%或MB)] , a.physical_name AS [文件所在目錄] ,a.type_desc AS [文件類型] FROM sys.database_files a INNER JOIN sys.sysfiles AS s ON a.[file_id]=s.fileid LEFT JOIN sys.dm_db_file_space_usage b ON a.[file_id]=b.[file_id] ORDER BY a.[type]
2、收縮數(shù)據(jù)文件
USE [${db_name}] GO DBCC SHRINKDATABASE(N'${db_name}' ) GO
參考鏈接:
https://docs.microsoft.com/en-us/sql/relational-databases/indexes/reorganize-and-rebuild-indexes?view=sql-server-ver15
https://docs.microsoft.com/en-us/sql/t-sql/statements/create-index-transact-sql?view=sql-server-ver15
原文鏈接:https://blog.csdn.net/weixin_37692493/article/details/122577940
相關推薦
- 2022-08-21 C#?Any()和AII()方法的區(qū)別_C#教程
- 2023-07-02 Python中列出目錄中的文件的五種方法小結_python
- 2022-06-09 詳解C++?functional庫中的仿函數(shù)使用方法_C 語言
- 2022-03-14 命令刪除node_modules
- 2022-08-15 VPP靜態(tài)映射實現(xiàn)DNAT
- 2022-03-17 Qt編寫提示進度條的實現(xiàn)示例_C 語言
- 2022-09-07 淺談React底層實現(xiàn)原理_React
- 2022-10-15 C++中?Sort函數(shù)詳細解析_C 語言
- 最近更新
-
- window11 系統(tǒng)安裝 yarn
- 超詳細win安裝深度學習環(huán)境2025年最新版(
- Linux 中運行的top命令 怎么退出?
- MySQL 中decimal 的用法? 存儲小
- get 、set 、toString 方法的使
- @Resource和 @Autowired注解
- Java基礎操作-- 運算符,流程控制 Flo
- 1. Int 和Integer 的區(qū)別,Jav
- spring @retryable不生效的一種
- Spring Security之認證信息的處理
- Spring Security之認證過濾器
- Spring Security概述快速入門
- Spring Security之配置體系
- 【SpringBoot】SpringCache
- Spring Security之基于方法配置權
- redisson分布式鎖中waittime的設
- maven:解決release錯誤:Artif
- restTemplate使用總結
- Spring Security之安全異常處理
- MybatisPlus優(yōu)雅實現(xiàn)加密?
- Spring ioc容器與Bean的生命周期。
- 【探索SpringCloud】服務發(fā)現(xiàn)-Nac
- Spring Security之基于HttpR
- Redis 底層數(shù)據(jù)結構-簡單動態(tài)字符串(SD
- arthas操作spring被代理目標對象命令
- Spring中的單例模式應用詳解
- 聊聊消息隊列,發(fā)送消息的4種方式
- bootspring第三方資源配置管理
- GIT同步修改后的遠程分支