У нас есть несколько баз данных, в которых создается и удаляется большое количество таблиц. Из того, что мы можем сказать, SQL Server не выполняет никакого внутреннего обслуживания системных базовых таблиц , что означает, что они могут со временем стать очень фрагментированными и раздутыми по размеру. Это создает ненужное давление на буферный пул, а также отрицательно влияет на производительность таких операций, как вычисление размера всех таблиц в базе данных.
У кого-нибудь есть предложения по минимизации фрагментации этих основных внутренних таблиц? Одно очевидное решение могло бы избежать создания такого количества таблиц (или создания всех временных таблиц в базе данных tempdb), но для целей этого вопроса давайте скажем, что приложение не обладает такой гибкостью.
Изменить: Дальнейшие исследования показывают этот вопрос без ответа , который выглядит тесно связанным и указывает, что некоторая форма ручного обслуживания с помощью ALTER INDEX...REORGANIZE
может быть вариантом.
Начальное исследование
Метаданные об этих таблицах можно посмотреть в sys.dm_db_partition_stats
:
-- The system base table that contains one row for every column in the system
SELECT row_count,
(reserved_page_count * 8 * 1024.0) / row_count AS bytes_per_row,
reserved_page_count/128. AS space_mb
FROM sys.dm_db_partition_stats
WHERE object_id = OBJECT_ID('sys.syscolpars')
AND index_id = 1
-- row_count: 15,600,859
-- bytes_per_row: 278.08
-- space_mb: 4,136
Однако, sys.dm_db_index_physical_stats
кажется, не поддерживает просмотр фрагментации этих таблиц:
-- No fragmentation data is returned by sys.dm_db_index_physical_stats
SELECT *
FROM sys.dm_db_index_physical_stats(
DB_ID(),
OBJECT_ID('sys.syscolpars'),
NULL,
NULL,
'DETAILED'
)
Скрипты Олы Хелленгрена также содержат параметр для учета дефрагментации is_ms_shipped = 1
объектов, но процедура молча игнорирует системные базовые таблицы, даже если этот параметр включен. Ола пояснил, что это ожидаемое поведение; msdb.dbo.backupset
рассматриваются только пользовательские таблицы (не системные таблицы), которые имеют ms_shipped (например ).
-- Returns code 0 (successful), but does not do any work for system base tables.
-- Instead of the expected commands to update statistics and reorganize indexes,
-- no commands are generated. The script seems to assume the target tables will
-- appear in sys.tables, but this does not appear to be a valid assumption for
-- system tables like sys.sysrowsets or sys.syscolpars.
DECLARE @result int;
EXEC @result = IndexOptimize @Databases = 'Test',
@FragmentationLow = 'INDEX_REORGANIZE',
@FragmentationMedium = 'INDEX_REORGANIZE',
@FragmentationHigh = 'INDEX_REORGANIZE',
@PageCountLevel = 0,
@UpdateStatistics = 'ALL',
@Indexes = '%Test.sys.sysrowsets.%',
-- Proc works properly if targeting a non-system table instead
--@Indexes = '%Test.dbo.Numbers.%',
@MSShippedObjects = 'Y',
@Execute = 'N';
PRINT(@result);
Дополнительная запрашиваемая информация
Я использовал адаптацию запроса Aaron ниже использования пула буферов для проверки системных таблиц, и это показало, что в пуле буферов есть десятки ГБ системных таблиц только для одной базы данных, причем в некоторых случаях ~ 80% этого пространства занимает свободное пространство ,
-- Compute buffer pool usage by system table
SELECT OBJECT_NAME(p.object_id),
COUNT(b.page_id) pages,
SUM(b.free_space_in_bytes/8192.0) free_pages
FROM sys.dm_os_buffer_descriptors b
JOIN sys.allocation_units a
ON a.allocation_unit_id = b.allocation_unit_id
JOIN sys.partitions p
ON p.partition_id = a.container_id
AND p.object_id < 1000 -- A loose proxy for system tables
WHERE b.database_id = DB_ID()
GROUP BY p.object_id
ORDER BY pages DESC
источник
Основываясь на рекомендациях из ответа Аарона, а также на дополнительных исследованиях, вот краткое описание подхода, который я выбрал.
Из того, что я могу сказать, возможности проверки фрагментации системных базовых таблиц ограничены. Я пошел дальше и подал проблему Connect, чтобы обеспечить лучшую видимость, но в то же время кажется, что варианты включают такие вещи, как проверка пула буферов или проверка среднего количества байтов на строку.
Затем я создал процедуру для выполнения `ALTER INDEX ... REORGANIZE для всех системных базовых таблиц . Выполнение этой процедуры на некоторых из наших наиболее (ab) используемых серверов разработки показало, что совокупный размер системных базовых таблиц был урезан до 50 ГБ (с ~ 5 ММ пользовательскими таблицами в системе, что явно является крайним случаем).
Одна из наших задач по ночному обслуживанию, которая помогает очистить многие пользовательские таблицы, созданные различными модульными тестами и разработками, ранее занимала ~ 50 минут. Сочетание
sp_whoisactive
,sys.dm_os_waiting_tasks
иDBCC PAGE
показало , что ждет преобладал ввод / вывод на системной базовые таблицах.После реорганизации всех системных базовых таблиц задача обслуживания сократилась до ~ 15 минут. Были некоторые ожидания ввода-вывода, но они были значительно уменьшены, возможно, из-за большего объема данных, оставшихся в кеше, и / или большего количества операций чтения из-за меньшей фрагментации.
Поэтому я пришел к выводу, что добавление
ALTER INDEX...REORGANIZE
системных базовых таблиц в план обслуживания может оказаться полезным для рассмотрения, но, вероятно, только в том случае, если у вас есть сценарий, когда в базе данных создается необычное количество объектов.источник