[Перевод] Исследуем базы данных с помощью T-SQL
Как dba и консультант по оптимизации производительности SQL Server в Ambient Consulting, я часто сталкиваюсь с необходимостью анализа узких мест производительности на экземплярах SQL Server, которые вижу первый раз в жизни. Это может быть сложной задачей. Как правило, у большинства компаний нет документации по их базам данных. А если есть, то она устарела, или же её поиск занимает несколько дней.В этой статье я поделюсь базовым набором скриптов, раскапывающим информацию о метаданных с помощью системных функций, хранимых процедур, таблиц, dmv. Вместе они раскрывают все секреты баз данных на нужном экземпляре — их размер, расположение файлов, их дизайн, включая столбцы, типы данных, значения по умолчанию, ключи и индексы.
Если вы когда-нибудь пытались получить часть этой информации, с помощью GUI, я думаю вы будете приятно удивлены количеством той информации, которая, с помощью этих скриптов, получается мнгновенно.
Как и с любыми скриптами, сначала проверьте их в тестовом окружении, прежде чем запускать в продакшене. Я бы рекомендовал вам погонять их на тестовых базах MS, таких как AdventureWorks или pubs.
Ну, хватит слов, давайте я покажу скрипты!
Начнём с запросов, предоставляющих информацию о ваших серверах.Базовая информацияВо-первых, несколько простых @@Функций, которые предоставят нам базовую информацию. — Имена сервера и экземпляра Select @@SERVERNAME as [Server\Instance];
-- версия SQL Server Select @@VERSION as SQLServerVersion;
-- экземпляр SQL Server Select @@ServiceName AS ServiceInstance;
— Текущая БД (БД, в контексте которой выполняется запрос) Select DB_NAME () AS CurrentDB_Name; Как долго ваш SQL Server работает после последнего перезапуска? Помните, что системная база данных tempdb пересоздаётся при каждом перезапуске SQL Server. Вот один из методов определения времени последнего перезапуска сервера. SELECT @@Servername AS ServerName, create_date AS ServerStarted, DATEDIFF (s, create_date, GETDATE ()) / 86400.0 AS DaysRunning, DATEDIFF (s, create_date, GETDATE ()) AS SecondsRunnig FROM sys.databases WHERE name = 'tempdb';
GO Связанные сервера Связанные сервера — это соединения, позволяющие SQL Server«у обращаться к другим серверам с данными. Распределённые запросы могут быть запущенны на разных связанных серверах. Полезно знать — является ли ваш сервер баз данных изолированным от других, или он связан с другими серверами. EXEC sp_helpserver;
--OR
EXEC sp_linkedservers;
--OR
SELECT @@SERVERNAME AS Server, Server_Id AS LinkedServerID, name AS LinkedServer, Product, Provider, Data_Source, Modify_Date FROM sys.servers ORDER BY name;
GO Список всех баз данных Во-первых, получим список всех баз данных на сервере. Помните, что на любом сервере есть четыре или пять системных баз данных (master, model, msdb, tempdb и distribution, если вы пользуетесь репликацией). Вы, вероятно, захотите исключить эти базы в следующих запросах. Очень просто увидеть список баз данных в SSMS, но, эти запросы будут нашими «строительными блоками» для более сложных запросов.Есть несколько путей для получения списка всех БД на T-SQL и ниже вы увидите некоторые из них. Каждый метод возвращает похожий результат, но с некоторыми отличиями.
EXEC sp_helpdb;
--OR
EXEC sp_Databases;
--OR
SELECT @@SERVERNAME AS Server, name AS DBName, recovery_model_Desc AS RecoveryModel, Compatibility_level AS CompatiblityLevel, create_date, state_desc FROM sys.databases ORDER BY Name;
--OR
SELECT @@SERVERNAME AS Server, d.name AS DBName, create_date, compatibility_level, m.physical_name AS FileName FROM sys.databases d JOIN sys.master_files m ON d.database_id = m.database_id WHERE m.[type] = 0 — data files only ORDER BY d.name;
GO Последний бэкап? Стоп! Прежде чем двигаться дальше, каждый хороший dba должен узнать есть ли у него свежий бэкап. SELECT @@Servername AS ServerName, d.Name AS DBName, MAX (b.backup_finish_date) AS LastBackupCompleted FROM sys.databases d LEFT OUTER JOIN msdb…backupset b ON b.database_name = d.name AND b.[type] = 'D' GROUP BY d.Name ORDER BY d.Name; Будет лучше, если вы сразу узнаете путь к файлу с последним бэкапом. SELECT @@Servername AS ServerName, d.Name AS DBName, b.Backup_finish_date, bmf.Physical_Device_name FROM sys.databases d INNER JOIN msdb…backupset b ON b.database_name = d.name AND b.[type] = 'D' INNER JOIN msdb.dbo.backupmediafamily bmf ON b.media_set_id = bmf.media_set_id ORDER BY d.NAME, b.Backup_finish_date DESC;
GO Активные пользовательские соединения Хорошо было бы понимать какие БД сейчас используются, особенно, если вы собираетесь разбираться с проблемами производительности.Примечание переводчика: это будет работать только в SQL Server 2012 и выше, в предыдущих редакциях, в dmv sys.dm_exec_sessions отсутствовал столбец database_id. Чтобы узнать в каких БД в данный момент работают пользователи, можно воспользоваться sp_who.
— Похожая информация, может быть получена с помощью sp_who
SELECT @@Servername AS Server, DB_NAME (database_id) AS DatabaseName, COUNT (database_id) AS Connections, Login_name AS LoginName, MIN (Login_Time) AS Login_Time, MIN (COALESCE (last_request_end_time, last_request_start_time)) AS Last_Batch FROM sys.dm_exec_sessions WHERE database_id > 0 AND DB_NAME (database_id) NOT IN ('master', 'msdb') GROUP BY database_id, login_name ORDER BY DatabaseName; Давайте заглянем поглубже и посмотрим, как мы можем собрать информацию об объектах во всех ваших БД, используя различные представления каталога и dmv. Большинство из запросов, представленных в этом разделе, смотрят «внутрь» только одной БД, поэтому не забывайте выбирать нужную БД в SSMS или с помощью команды use database. Также помните, что вы всегда можете посмотреть в контексте какой БД будет выполнен запрос, с помощью select db_name ().Системная таблица sys.objects одна из ключевых для сбора информации об объектах, составляющих вашу модель данных.
— В примере U — таблицы — Попробуйте подставить другие значения type в WHERE
USE MyDatabase; GO
SELECT * FROM sys.objects WHERE type = 'U'; Ниже представлен список типов объектов, информацию о которых мы можем получить (смотрите документацию на sys.objects в MSDN)sys.objects.type AF = статистическая функция (среда CLR); C = ограничение CHECK; D = DEFAULT (ограничение или изолированный); F = ограничение FOREIGN KEY; PK = ограничение PRIMARY KEY; P = хранимая процедура SQL; PC = хранимая процедура сборки (среда CLR); FN = скалярная функция SQL; FS = скалярная функция сборки (среда CLR); FT = возвращающая табличное значение функция сборки (среда CLR); R = правило (старый стиль, изолированный); RF = процедура фильтра репликации; S = системная базовая таблица; SN = синоним; SQ = очередь обслуживания; TA = триггер DML сборки (среда CLR); TR = триггер DML SQL; IF = встроенная возвращающая табличное значение функция SQL; TF = возвращающая табличное значение функция SQL; U = таблица (пользовательская); UQ = ограничение UNIQUE; V = представление; X = расширенная хранимая процедура; IT = внутренняя таблица.
Другие представления каталога, такие как sys.tables и sys.views, обращаются к sys.objects и предоставляют информацию о конкретном типе объектов. С этими представлениями, плюс функцией OBJECTPROPERTY, мы можем получить огромное количество информации по каждому из объектов, составляющих нашу схему БД.Расположение файлов баз данных Физическое расположение выбранной БД, включая основной файл данных (mdf), и файл журнала транзакций (ldf), могут быть получены с помощью этих запросов. EXEC sp_Helpfile;
--OR
SELECT @@Servername AS Server, DB_NAME () AS DB_Name, File_id, Type_desc, Name, LEFT (Physical_Name, 1) AS Drive, Physical_Name, RIGHT (physical_name, 3) AS Ext, Size, Growth FROM sys.database_files ORDER BY File_id;
GO Таблицы Конечно, Object Explorer в SSMS показывает полный список таблиц в выбранной БД, но часть информации с помощью GUI получить сложнее, чем с помощью скриптов. Стандарт ANSI предполагает обращение к представлениям INFORMATION_SCHEMA, но они не предоставят информацию об объектах, которые не являются частью стандарта (такие как триггеры, extended procedures и т.д.), поэтому лучше использовать представления каталога SQL Server. EXEC sp_tables; — Помните, что этот метод вернёт и таблицы, и представления
--OR
SELECT @@Servername AS ServerName, TABLE_CATALOG, TABLE_SCHEMA, TABLE_NAME FROM INFORMATION_SCHEMA.TABLES WHERE TABLE_TYPE = 'BASE TABLE' ORDER BY TABLE_NAME;
--OR
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, o.name AS 'TableName' , o.[Type] , o.create_date FROM sys.objects o WHERE o.Type = 'U' — User table ORDER BY o.name;
--OR
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, t.Name AS TableName, t.[Type], t.create_date FROM sys.tables t ORDER BY t.Name;
GO Количество записей в таблице Если вы ничего не знаете о таблице, то все таблицы одинаково важны. Чем больше вы узнаёте о таблицах, тем больше вы их разделяете на условно более важные и условно менее важные. В целом, таблицы с огромным количеством записей чаще оказывают серьёзное влияние на производительность.В SSMS мы можем нажать правой кнопкой мыши на любую таблицу, открыть свойства на вкладке Storage и увидеть количество записей в таблице.
Довольно тяжело собрать вручную эту информацию обо всех таблицах. Опять же, если мы будем писать SELECT COUNT (*) FROM TABLENAME для каждой таблицы, нам придётся очень много печатать.
Намного удобнее использовать T-SQL для генерирования скрипта. Скрипт, приведённый ниже, сгенерирует набор инструкций T-SQL для получения количества строк в каждой таблице текущей базы данных. Просто выполните его, скопируйте результат в новое окно и запустите.
SELECT 'Select ''' + DB_NAME () + '.' + SCHEMA_NAME (SCHEMA_ID) + '.' + LEFT (o.name, 128) + ''' as DBName, count (*) as Count From ' + o.name + ';' AS ' Script generator to get counts for all tables' FROM sys.objects o WHERE o.[type] = 'U' ORDER BY o.name;
GO
Примечание переводчика: у меня запрос не работал, добавил схему к имени таблицы.
SELECT 'Select ''' + DB_NAME () + '.' + SCHEMA_NAME (SCHEMA_ID) + '.' + LEFT (o.name, 128) + ''' as DBName, count (*) as Count From ' + SCHEMA_NAME (SCHEMA_ID) + '.' + o.name + ';' AS ' Script generator to get counts for all tables' FROM sys.objects o WHERE o.[type] = 'U' ORDER BY o.name; sp_msForEachTable Sp_msforeachtable — это недокументированная функция, которая «проходит» по всем таблицам в БД и выполняет запрос, подставляя вместо »?» имя текущей таблицы. Так же существует похожая функция sp_msforeachdb, работающая на уровне баз данных.Известно несколько проблем с этой недокументированной функцией, например, использование спецсимволов в именах объектов. Т.е. если имя таблицы или базы данных содержит знак »-», хранимая процедура, листинг которой ниже, завершится с ошибкой.
CREATE TABLE #rowcount (Tablename VARCHAR (128) , Rowcnt INT);
EXEC sp_MSforeachtable 'insert into #rowcount select ''?'', count (*) from?'
SELECT * FROM #rowcount ORDER BY Tablename, Rowcnt;
DROP TABLE #rowcount; Самый быстрый способ получения количества записей — кластерный индекс Все предыдущие метода использовали COUNT (*), который медленно отрабатывает, если в таблице больше чем 500K записей.Самый быстрый способ получения количества записей в таблице — получать количество записей в кластерном индексе или куче. Помните, что хоть этот метод и самый быстрый, MS говорит, что информация о количестве записей индекса и реальное количество строк в таблице может не совпадать, из-за того, что на обновление информации требуется хоть и небольшое, но время. В большинстве же случаев, эти значения или одинаковы, или очень-очень близки и вскоре станут одинаковыми.
— Самый быстрый путь получения количества записей — Hint: получайте из индекса, а не таблицы
SELECT @@ServerName AS Server, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (p.object_id) AS SchemaName, OBJECT_NAME (p.object_id) AS TableName, i.Type_Desc, i.Name AS IndexUsedForCounts, SUM (p.Rows) AS Rows FROM sys.partitions p JOIN sys.indexes i ON i.object_id = p.object_id AND i.index_id = p.index_id WHERE i.type_desc IN ('CLUSTERED', 'HEAP') — This is key (1 index per table) AND OBJECT_SCHEMA_NAME (p.object_id) <> 'sys' GROUP BY p.object_id, i.type_desc, i.Name ORDER BY SchemaName, TableName;
-- OR
-- Похожий метод получения количества записей, но с использованием DMV dm_db_partition_stats SELECT @@ServerName AS ServerName, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (ddps.object_id) AS SchemaName, OBJECT_NAME (ddps.object_id) AS TableName, i.Type_Desc, i.Name AS IndexUsedForCounts, SUM (ddps.row_count) AS Rows FROM sys.dm_db_partition_stats ddps JOIN sys.indexes i ON i.object_id = ddps.object_id AND i.index_id = ddps.index_id WHERE i.type_desc IN ('CLUSTERED', 'HEAP') — This is key (1 index per table) AND OBJECT_SCHEMA_NAME (ddps.object_id) <> 'sys' GROUP BY ddps.object_id, i.type_desc, i.Name ORDER BY SchemaName, TableName;
GO Поиск куч (таблиц без кластерных индексов) Работа с кучами — это как работа с плоским файлом, вместо базы данных. Если вы хотите гарантированно получать полное сканирование таблицы при выполнении любого запроса, используйте кучи. Обычно я рекомендую добавлять primary key ко всем таблицам-кучам. — Кучи (метод 1)
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, t.Name AS HeapTable, t.Create_Date FROM sys.tables t INNER JOIN sys.indexes i ON t.object_id = i.object_id AND i.type_desc = 'HEAP' ORDER BY t.Name
--OR — Кучи (Метод 2)
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, t.Name AS HeapTable, t.Create_Date FROM sys.tables t WHERE OBJECTPROPERTY (OBJECT_ID, 'TableHasClustIndex') = 0 ORDER BY t.Name;
--OR — Кучи (Метод 3) + количество записей
SELECT @@ServerName AS Server, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (ddps.object_id) AS SchemaName, OBJECT_NAME (ddps.object_id) AS TableName, i.Type_Desc, SUM (ddps.row_count) AS Rows FROM sys.dm_db_partition_stats AS ddps JOIN sys.indexes i ON i.object_id = ddps.object_id AND i.index_id = ddps.index_id WHERE i.type_desc = 'HEAP' AND OBJECT_SCHEMA_NAME (ddps.object_id) <> 'sys' GROUP BY ddps.object_id, i.type_desc ORDER BY TableName; Разбираемся с активностью в таблице При работах по оптимизации производительности, очень важно знать какие таблицы активно читаются, а в какие идёт активная запись. Ранее мы узнали сколько записей в наших таблицах, сейчас посмотрим как часто в них пишут и читают.Помните, что эта информация из dmv, очищается при каждом перезапуске SQL Server. Чем дольше сервер работает, тем более надёжна статистика. Я чувствую себя намного более уверенно со статистикой, собранной за 30 дней, чем со статистикой, собранной за неделю.
— Чтение/запись таблицы — Кучи не рассматриваются, у них нет индексов — Только те таблицы, к которым обращались после запуска SQL Server
SELECT @@ServerName AS ServerName, DB_NAME () AS DBName, OBJECT_NAME (ddius.object_id) AS TableName, SUM (ddius.user_seeks + ddius.user_scans + ddius.user_lookups) AS Reads, SUM (ddius.user_updates) AS Writes, SUM (ddius.user_seeks + ddius.user_scans + ddius.user_lookups + ddius.user_updates) AS [Reads&Writes] , (SELECT DATEDIFF (s, create_date, GETDATE ()) / 86400.0 FROM master.sys.databases WHERE name = 'tempdb' ) AS SampleDays, (SELECT DATEDIFF (s, create_date, GETDATE ()) AS SecoundsRunnig FROM master.sys.databases WHERE name = 'tempdb' ) AS SampleSeconds FROM sys.dm_db_index_usage_stats ddius INNER JOIN sys.indexes i ON ddius.object_id = i.object_id AND i.index_id = ddius.index_id WHERE OBJECTPROPERTY (ddius.object_id, 'IsUserTable') = 1 AND ddius.database_id = DB_ID () GROUP BY OBJECT_NAME (ddius.object_id) ORDER BY [Reads&Writes] DESC;
GO Намного более продвинутая версия этого запроса представлена курсором, собирающим информацию по всем таблицам всех баз данных на сервере. Вообще, я не фанат курсоров из-за их невысокой производительности, но перемещение по разным базам данных — это отличное применение для них. — Операции чтения и записи — Кучи пропущены, у них нет индексов — Только таблицы, использовавшиеся после перезапуска SQL Server — В запросе используется курсор для получения информации во всех БД — Единый отчёт, хранится в tempdb
DECLARE DBNameCursor CURSOR FOR SELECT Name FROM sys.databases WHERE Name NOT IN ('master', 'model', 'msdb', 'tempdb', 'distribution') ORDER BY Name;
DECLARE @DBName NVARCHAR (128)
DECLARE @cmd VARCHAR (4000)
IF OBJECT_ID (N’tempdb…TempResults') IS NOT NULL BEGIN DROP TABLE tempdb…TempResults END
CREATE TABLE tempdb…TempResults ( ServerName NVARCHAR (128) , DBName NVARCHAR (128) , TableName NVARCHAR (128) , Reads INT, Writes INT, ReadsWrites INT, SampleDays DECIMAL (18, 8) , SampleSeconds INT )
OPEN DBNameCursor
FETCH NEXT FROM DBNameCursor INTO @DBName WHILE @@fetch_status = 0 BEGIN
---------------------------------------------------- — Print @DBName
SELECT @cmd = 'Use ' + @DBName + '; ' SELECT @cmd = @cmd + ' Insert Into tempdb…TempResults SELECT @@ServerName AS ServerName, DB_NAME () AS DBName, object_name (ddius.object_id) AS TableName, SUM (ddius.user_seeks + ddius.user_scans + ddius.user_lookups) AS Reads, SUM (ddius.user_updates) as Writes, SUM (ddius.user_seeks + ddius.user_scans + ddius.user_lookups + ddius.user_updates) as ReadsWrites, (SELECT datediff (s, create_date, GETDATE ()) / 86400.0 FROM sys.databases WHERE name = ''tempdb'') AS SampleDays, (SELECT datediff (s, create_date, GETDATE ()) FROM sys.databases WHERE name = ''tempdb'') as SampleSeconds FROM sys.dm_db_index_usage_stats ddius INNER JOIN sys.indexes i ON ddius.object_id = i.object_id AND i.index_id = ddius.index_id WHERE objectproperty (ddius.object_id,''IsUserTable'') = 1 --True AND ddius.database_id = db_id () GROUP BY object_name (ddius.object_id) ORDER BY ReadsWrites DESC;'
--PRINT @cmd EXECUTE (@cmd)
-----------------------------------------------------
FETCH NEXT FROM DBNameCursor INTO @DBName END
CLOSE DBNameCursor
DEALLOCATE DBNameCursor
SELECT * FROM tempdb…TempResults ORDER BY DBName, TableName; --DROP TABLE tempdb…TempResults; Примечание переводчика: курсор не отработает, если у вас в списке есть базы данных с состоянием, отличным от ONLINE.Представления Представления — это, условно говоря, запросы, хранящиеся в БД. Вы можете думать о них, как о виртуальных таблицах. Данные не хранятся в представлениях, но в наших запросах мы ссылаемся на них точно так же, как и на таблицы.В SQL Server, в некоторых случаях, мы можем обновлять данные с использованием представления. Чтобы получить представление «только для чтения», можно использовать SELECT DISTINCT при его создании. Данные «через» представление можно менять только в том случае, если каждой строке представления соответствует только одна строка в «базовой» таблице. Любое представление, не отвечающее этому критерию, т.е. построенное на нескольких таблицах, или с использованием группировок, агрегатных функций и вычислений, будет доступно только для чтения.
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, o.name AS ViewName, o.[Type] , o.create_date FROM sys.objects o WHERE o.[Type] = 'V' — View ORDER BY o.NAME
--OR
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, Name AS ViewName, create_date FROM sys.Views ORDER BY Name
--OR
SELECT @@Servername AS ServerName, TABLE_CATALOG, TABLE_SCHEMA, TABLE_NAME, TABLE_TYPE FROM INFORMATION_SCHEMA.TABLES WHERE TABLE_TYPE = 'VIEW' ORDER BY TABLE_NAME
--OR
-- CREATE VIEW Code SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, o.name AS 'ViewName' , o.Type, o.create_date, sm.[DEFINITION] AS 'View script' FROM sys.objects o INNER JOIN sys.sql_modules sm ON o.object_id = sm.OBJECT_ID WHERE o.Type = 'V' — View ORDER BY o.NAME;
GO Синонимы Несколько раз в моей карьере я сталкивался с ситуацией, когда не мог понять к какой же таблице обращается запрос. Представьте простой запрос SELECT * FROM Client. Я ищу таблицу под именем Client, но я не могу найти её. Хорошо, думаю я, должно быть это представление, ищу представление с именем Client и всё равно не могу найти. Может быть я ошибся базой данных? В итоге выясняется, что Client — это синоним для покупателей и таблица, на самом деле, называется Customer. Отдел маркетинга хотел обращаться к этой таблице как к Client и из-за этого был создан синоним. К счастью, использование синонимов — это редкость, но разбирательства могут вызвать определённые затруднения, если вы к ним не готовы. SELECT @@Servername AS ServerName, DB_NAME () AS DBName, o.name AS ViewName, o.Type, o.create_date FROM sys.objects o WHERE o.[Type] = 'SN' — Synonym ORDER BY o.NAME;
--OR — дополнительная информация о синонимах
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, s.name AS synonyms, s.create_date, s.base_object_name FROM sys.synonyms s ORDER BY s.name;
GO Хранимые процедуры Хранимые процедуры — это группа скриптов, которые компилируются в единственный план выполнения. Мы можем использовать представления каталога, чтобы определить какие ХП созданы, какие действия они выполняют и над какими таблицами. — Хранимые процедуры SELECT @@Servername AS ServerName, DB_NAME () AS DBName, o.name AS StoredProcedureName, o.[Type] , o.create_date FROM sys.objects o WHERE o.[Type] = 'P' — Stored Procedures ORDER BY o.name
--OR — Дополнительная информация о ХП
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, o.name AS 'ViewName' , o.[type] , o.Create_date, sm.[definition] AS 'Stored Procedure script' FROM sys.objects o INNER JOIN sys.sql_modules sm ON o.object_id = sm.object_id WHERE o.[type] = 'P' — Stored Procedures — AND sm.[definition] LIKE '%insert%' — AND sm.[definition] LIKE '%update%' — AND sm.[definition] LIKE '%delete%' — AND sm.[definition] LIKE '%tablename%' ORDER BY o.name;
GO Добавив простое условие в WHERE мы можем получить информацию только о тех хранимых процедурах, которые, например, выполняют операции INSERT. WHERE o.[type] = 'P' — Stored Procedures AND sm.definition LIKE '%insert%' ORDER BY o.name … Немного модифицировав условие в WHERE, мы можем собрать информацию о ХП, производящих обновление, удаление или же обращающихся к определённым таблицам.Функции Функции хранятся в SQL Server, принимают какие-либо параметры и выполняют определённые действия, либо вычисления, после чего возвращают результат. — Функции
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, o.name AS 'Functions' , o.[Type] , o.create_date FROM sys.objects o WHERE o.Type = 'FN' — Function ORDER BY o.NAME;
--OR — Дополнительная информация о функциях
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, o.name AS 'FunctionName' , o.[type] , o.create_date, sm.[DEFINITION] AS 'Function script' FROM sys.objects o INNER JOIN sys.sql_modules sm ON o.object_id = sm.OBJECT_ID WHERE o.[Type] = 'FN' — Function ORDER BY o.NAME;
GO Триггеры Триггер — это что-то вроде хранимой процедуры, которая выполняется в ответ на определённые действия с той таблицей, которой этот триггер принадлежит. Например, мы можем создать INSERT, UPDATE и DELETE триггеры. — Триггеры
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, parent.name AS TableName, o.name AS TriggerName, o.[Type] , o.create_date FROM sys.objects o INNER JOIN sys.objects parent ON o.parent_object_id = parent.object_id WHERE o.Type = 'TR' — Triggers ORDER BY parent.name, o.NAME
--OR
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, Parent_id, name AS TriggerName, create_date FROM sys.triggers WHERE parent_class = 1 ORDER BY name;
--OR — Дополнительная информация о триггерах
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, OBJECT_NAME (Parent_object_id) AS TableName, o.name AS 'TriggerName' , o.Type, o.create_date, sm.[DEFINITION] AS 'Trigger script' FROM sys.objects o INNER JOIN sys.sql_modules sm ON o.object_id = sm.OBJECT_ID WHERE o.Type = 'TR' — Triggers ORDER BY o.NAME;
GO CHECK-ограничения CHECK-ограничения — это неплохое средство для реализации бизнес-логики в базе данных. Например, некоторые поля должны быть положительными, или отрицательными, или дата в одном столбце должна быть больше даты в другом. — Check Constraints
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, parent.name AS 'TableName' , o.name AS 'Constraints' , o.[Type] , o.create_date FROM sys.objects o INNER JOIN sys.objects parent ON o.parent_object_id = parent.object_id WHERE o.Type = 'C' — Check Constraints ORDER BY parent.name, o.name
--OR --CHECK constriant definitions
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (parent_object_id) AS SchemaName, OBJECT_NAME (parent_object_id) AS TableName, parent_column_id AS Column_NBR, Name AS CheckConstraintName, type, type_desc, create_date, OBJECT_DEFINITION (object_id) AS CheckConstraintDefinition FROM sys.Check_constraints ORDER BY TableName, SchemaName, Column_NBR
GO Ранее, мы использовали скрипты, которые дали нам представление о «верхнем уровне» объектов, составляющих нашу базу данных. Иногда нам нужно получить больше данных о таблице, включая столбцы, их типы данных, какие значения по умолчанию заданы, какие ключи и индексы существуют (или должны существовать) и т.д. Запросы, представленные в этом разделе, предоставляют средства почти что реверс-инжиниринга существующей модели данных.
Столбцы Следующий скрипт описывает таблицы и столбцы из всей базы данных. Результат этого запроса, можно скопировать в Excel, где можно настроить фильтры и сортировку и хорошо разобраться с типами данных, использующимися в БД. Так же, обратите внимание на столбцы с одинаковыми именами, но разными типами данных. SELECT @@Servername AS Server, DB_NAME () AS DBName, isc.Table_Name AS TableName, isc.Table_Schema AS SchemaName, Ordinal_Position AS Ord, Column_Name, Data_Type, Numeric_Precision AS Prec, Numeric_Scale AS Scale, Character_Maximum_Length AS LEN, — -1 means MAX like Varchar (MAX) Is_Nullable, Column_Default, Table_Type FROM INFORMATION_SCHEMA.COLUMNS isc INNER JOIN information_schema.tables ist ON isc.table_name = ist.table_name — WHERE Table_Type = 'BASE TABLE' — 'Base Table' or 'View' ORDER BY DBName, TableName, SchemaName, Ordinal_position;
-- Имена столбцов и количество повторов — Используется для поиска одноимённых столбцов с разными типами данных/длиной
SELECT @@Servername AS Server, DB_NAME () AS DBName, Column_Name, Data_Type, Numeric_Precision AS Prec, Numeric_Scale AS Scale, Character_Maximum_Length, COUNT (*) AS Count FROM information_schema.columns isc INNER JOIN information_schema.tables ist ON isc.table_name = ist.table_name WHERE Table_type = 'BASE TABLE' GROUP BY Column_Name, Data_Type, Numeric_Precision, Numeric_Scale, Character_Maximum_Length;
-- Информация по используемым типам данных
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, Data_Type, Numeric_Precision AS Prec, Numeric_Scale AS Scale, Character_Maximum_Length AS [Length] , COUNT (*) AS COUNT FROM information_schema.columns isc INNER JOIN information_schema.tables ist ON isc.table_name = ist.table_name WHERE Table_type = 'BASE TABLE' GROUP BY Data_Type, Numeric_Precision, Numeric_Scale, Character_Maximum_Length ORDER BY Data_Type, Numeric_Precision, Numeric_Scale, Character_Maximum_Length
-- Large object data types or Binary Large Objects (BLOBs) — Помните, что индексы по этим таблицам не могут быть перестроены в режиме «online»
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, isc.Table_Name, Ordinal_Position AS Ord, Column_Name, Data_Type AS BLOB_Data_Type, Numeric_Precision AS Prec, Numeric_Scale AS Scale, Character_Maximum_Length AS [Length] FROM information_schema.columns isc INNER JOIN information_schema.tables ist ON isc.table_name = ist.table_name WHERE Table_type = 'BASE TABLE' AND (Data_Type IN ('text', 'ntext', 'image', 'XML') OR (Data_Type IN ('varchar', 'nvarchar', 'varbinary') AND Character_Maximum_Length = -1 ) ) — varchar (max), nvarchar (max), varbinary (max) ORDER BY isc.Table_Name, Ordinal_position; Значения по умолчанию Значение по умолчанию — это значение, которое будет сохранено, если никакого значения для столбца не будет задано при вставке. Зачастую, для столбцов хранящих дату ставят get_date (). Также, значения по умолчанию используются для аудита — вставляется system_user для определения учётной записи пользователя, совершившего определённое действие. — Table Defaults
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, parent.name AS TableName, o.name AS Defaults, o.[Type] , o.Create_date FROM sys.objects o INNER JOIN sys.objects parent ON o.parent_object_id = parent.object_id WHERE o.[Type] = 'D' — Defaults ORDER BY parent.name, o.NAME
--OR — Column Defaults
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, OBJECT_SCHEMA_NAME (parent_object_id) AS SchemaName, OBJECT_NAME (parent_object_id) AS TableName, parent_column_id AS Column_NBR, Name AS DefaultName, [type] , type_desc, create_date, OBJECT_DEFINITION (object_id) AS Defaults FROM sys.default_constraints ORDER BY TableName, Column_NBR
--OR — Column Defaults
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, OBJECT_SCHEMA_NAME (t.object_id) AS SchemaName, t.Name AS TableName, c.Column_ID AS Ord, c.Name AS Column_Name, OBJECT_NAME (default_object_id) AS DefaultName, OBJECT_DEFINITION (default_object_id) AS Defaults FROM sys.Tables t INNER JOIN sys.columns c ON t.object_id = c.object_id WHERE default_object_id <> 0 ORDER BY TableName, SchemaName, c.Column_ID
GO Вычисляемые столбцы Вычисляемые столбцы — это столбцы, значения в которых вычисляются на основании, как правило, значений в других столбцах таблицы. — Вычисляемые столбцы
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (object_id) AS SchemaName, OBJECT_NAME (object_id) AS Tablename, Column_id, Name AS Computed_Column, [Definition] , is_persisted FROM sys.computed_columns ORDER BY SchemaName, Tablename, [Definition];
--Or — Computed Columns
SELECT @@Servername AS ServerName, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (t.object_id) AS SchemaName, t.Name AS TableName, c.Column_ID AS Ord, c.Name AS Computed_Column FROM sys.Tables t INNER JOIN sys.Columns c ON t.object_id = c.object_id WHERE is_computed = 1 ORDER BY t.Name, SchemaName, c.Column_ID
GO Столбцы identity Столбцы IDENTITY автоматически заполняются системой уникальными значениями. Обычно используются для хранения порядкового номера записи в таблице. SELECT @@Servername AS ServerName, DB_NAME () AS DBName, OBJECT_SCHEMA_NAME (object_id) AS SchemaName, OBJECT_NAME (object_id) AS TableName, Column_id, Name AS IdentityColumn, Seed_Value, Last_Value FROM sys.identity_columns ORDER BY SchemaName, TableName, Column_id;
GO Ключи и индексы Как я писал ранее, наличие первичного ключа и соответствующего индекса у таблицы — это одна из best practice. Ещё одна best practice заключается в том, что внешние ключи так же должны иметь индекс, построенный по столбцам, входящим во внешний ключ. Индексы, построенные «по внешним ключам» отлично подходят для соединения таблиц. Эти индексы так же хорошо сказываются на производительности при удалении записей.Какие индексы у нас есть? Скрипт для поиска всех индексов во всех таблицах текущей БД. SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, o.Name AS TableName, i.Name AS IndexName FROM sys.objects o INNER JOIN sys.indexes i ON o.object_id = i.object_id WHERE o.Type = 'U' — User table AND LEFT (i.Name, 1) <> '_' — Remove hypothetical indexes ORDER BY o.NAME, i.name;
GO Каких индексов не хватает? На основании ранее исполнявшихся запросов, SQL Server предоставляет информацию об отсутствующих индексах в БД, создание которых может увеличить производительность.Не добавляйте эти индексы вслепую. Я бы подумал о каждом из предложенных индексов. Использование включенных столбцов, например, может аукнуться серьёзным увеличением объёмов.
— Отсутствующие индексы из DMV
SELECT @@ServerName AS ServerName, DB_NAME () AS DBName, t.name AS 'Affected_table' , (LEN (ISNULL (ddmid.equality_columns, N'') + CASE WHEN ddmid.equality_columns IS NOT NULL AND ddmid.inequality_columns IS NOT NULL THEN ',' ELSE '' END) — LEN (REPLACE (ISNULL (ddmid.equality_columns, N'') + CASE WHEN ddmid.equality_columns IS NOT NULL AND ddmid.inequality_columns IS NOT NULL THEN ',' ELSE '' END, ',', ''))) + 1 AS K, COALESCE (ddmid.equality_columns, '') + CASE WHEN ddmid.equality_columns IS NOT NULL AND ddmid.inequality_columns IS NOT NULL THEN ',' ELSE '' END + COALESCE (ddmid.inequality_columns, '') AS Keys, COALESCE (ddmid.included_columns, '') AS [include] , 'Create NonClustered Index IX_' + t.name + '_missing_' + CAST (ddmid.index_handle AS VARCHAR (20)) + ' On ' + ddmid.[statement] COLLATE database_default + ' (' + ISNULL (ddmid.equality_columns, '') + CASE WHEN ddmid.equality_columns IS NOT NULL AND ddmid.inequality_columns IS NOT NULL THEN ',' ELSE '' END + ISNULL (ddmid.inequality_columns, '') + ')' + ISNULL (' Include (' + ddmid.included_columns + ');', ';') AS sql_statement, ddmigs.user_seeks, ddmigs.user_scans, CAST ((ddmigs.user_seeks + ddmigs.user_scans) * ddmigs.avg_user_impact AS BIGINT) AS 'est_impact' , avg_user_impact, ddmigs.last_user_seek, (SELECT DATEDIFF (Second, create_date, GETDATE ()) Seconds FROM sys.databases WHERE name = 'tempdb' ) SecondsUptime FROM sys.dm_db_missing_index_groups ddmig INNER JOIN sys.dm_db_missing_index_group_stats ddmigs ON ddmigs.group_handle = ddmig.index_group_handle INNER JOIN sys.dm_db_missing_index_details ddmid ON ddmig.index_handle = ddmid.index_handle INNER JOIN sys.tables t ON ddmid.OBJECT_ID = t.OBJECT_ID WHERE ddmid.database_id = DB_ID () ORDER BY est_impact DESC;
GO Внешние ключи Внешние ключи определяют связь между таблицами и используются для контроля ссылочной целостности. На диаграмме сущность-связь линии между таблицами обозначают внешние ключи. — Foreign Keys
SELECT @@Servername AS ServerName, DB_NAME () AS DB_Name, parent.name AS 'TableName' , o.name AS 'ForeignKey' , o.[Type] , o.Create_date FROM sys.objects o INNER JOIN sys.objects parent ON o.parent_object_id = parent.object_id WHERE o.[Type] = 'F' — Foreign Keys ORDER BY parent.name, o.name
--OR
SELECT f.name AS ForeignKey, SCHEMA_NAME (f.SCHEMA_ID) AS SchemaName, OBJECT_NAME (f.parent_object_id) AS TableName, COL_NAME (fc.parent_object_id, fc.parent_column_id) AS ColumnName, SCHEMA_NAME (o.SCHEMA_ID) ReferenceSchemaName, OBJECT_NAME (f.referenced_object_id) AS ReferenceTableName, COL_NAME (fc.referenced_object_id, fc.referenced_column_id) AS ReferenceColumnName FROM sys.foreign_keys AS f INNER JOIN sys.foreign_key_columns AS fc ON f.OBJECT_ID = fc.constraint_object_id INNER JOIN sys.objects AS o ON o.OBJECT_ID = fc.referenced_object_id ORDER BY TableName, ReferenceTableName;
GO Пропущенные индексы по внешним ключам Как я уже говорил, желательно иметь индекс, построенный по столбцам, входящим во внешний ключ. Это значительно ускоряет соединения таблиц, которые, обычно, всё равно соединяются по внешнему ключу. Эти индексы так же значительно ускоряют операции удаления. Если такого индекса нет, SQL Server будет производить table scan связанной таблицы, при каждом удалении записи из «первой» таблицы. — Foreign Keys missing indexes — Помните, что этот скрипт работает только для создания индексов по одному столбцу — Внешние ключи, состоящие более чем из одного столбца, не отслеживаются
SELECT DB_NAME () AS DBName, rc.Constraint_Name AS FK_Constraint, — rc.Constraint_Catalog AS FK_Database, — rc.Constraint_Schema AS FKSch, ccu.Table_Name AS FK_Table, ccu.Column_Name AS FK_Column, ccu2.Table_Name AS ParentTable, ccu2.Column_Name AS ParentColumn, I.Name AS IndexName, CASE WHEN I.Name IS NULL THEN 'IF NOT EXISTS (SELECT * FROM sys.indexes WHERE object_id = OBJECT_ID (N''' + RC.Constraint_Schema + '.' + ccu.Table_Name + ''') AND name = N''IX_' + ccu.Table_Name + '_' + ccu.Column_Name + ''') ' + 'CREATE NONCLUSTERED INDEX IX_' + ccu.Table_Name + '_' + ccu.Column_Name + ' ON ' + rc.Constraint_Schema + '.' + ccu.Table_Name + '(' + ccu.Column_Name + ' ASC) WITH (PAD_INDEX = OFF, STATISTICS_NORECOMPUTE = OFF, SORT_IN_TEMPDB = ON, IGNORE_DUP_KEY = OFF, DROP_EXISTING = OFF, ONLINE = ON);' ELSE '' END AS SQL FROM information_schema.referential_constraints RC JOIN INFORMATION_SCHEMA.CONSTRAINT_COLUMN_USAGE ccu ON rc.CONSTRAINT_NAME = ccu.CONSTRAINT_NAME JOIN INFORMATION_SCHEMA.CONSTRAINT_COLUMN_USAGE ccu2 ON rc.UNIQUE_CONSTRAINT_NAME = ccu2.CONSTRAINT_NAME LEFT JOIN sys.columns c ON ccu.Column_Name = C.name AND ccu.Table_Name = OBJECT_NAME (C.OBJECT_ID) LEFT JOIN sys.index_columns ic ON C.OBJECT_ID = IC.OBJECT_ID AND c.column_id = ic.column_id AND index_column_id = 1
— index found has the foreign key — as the first column
LEFT JOIN sys.indexes i ON IC.OBJECT_ID = i.OBJECT_ID AND ic.index_Id = i.index_Id WHERE I.name IS NULL ORDER BY FK_table, ParentTable, ParentColumn;
GO Зависимости Это зависит… Я уверен, вы слышали это выражение раньше. Я рассмотрю три разных метода для «реверс-инжиниринга» зависимостей в БД. Первый метода — использовать хранимую процедуру sp_msdependecies. Второй — системные таблицы, связанные со внешними ключами. Третий метод — использовать CTE.sp_msdependencies Sp_msdependencies — это недокументированная хранимая процедура, которая может быть очень полезна для разбора сложных взаимозависимостей таблиц. EXEC sp_msdependencies '?' — Displays Help
sp_MSobject_dependencies name = NULL, type = NULL, flags = 0×01fd name: name or null (all objects of type) type: type number (see below) or null if both null, get all objects in database flags is a bitmask of the following values: 0×10000 = return multiple parent/child rows per object 0×20000 = descending return order 0×40000 = return children instead of parents 0×80000 = Include input object in output result set 0×100000 = return only firstlevel (immediate) parents/children 0×200000 = return only DRI dependencies power (2, object type number (s)) to return in results set: 0 (1 — 0×0001) — UDF 1 (2 — 0×0002) — system tables or MS-internal objects 2 (4 — 0×0004) — view 3 (8 — 0×0008) — user table 4 (16 — 0×0010) — procedure 5 (32 — 0×0020) — log 6 (64 — 0×0040) — default 7 (128 — 0×0080) — rule 8 (256 — 0×0100) — trigger 12 (1024 — 0×0400) — uddt shortcuts: 29 (0×011c) — trig, view, user table, procedure 448 (0×00c1) — rule, default, datatype 4606 (0×11fd) — all but systables/objects 4607 (0×11ff) — all Если мы выведем все зависимости, используя sp_msdependencies, мы получим четыре столбца: Type, ObjName, Owner (Schema), Sequence.Обратите внимание на номер последовательности (Sequence) — он начинается с 1 и последовательно увеличивается. Sequence — это «порядковый номер» зависимости.
Я несколько раз использовал этот метод, когда мне нужно было выполнить архивирование или удаление на очень большой БД. Если вы знаете зависимости таблицы, значит у вас есть «дорожная карта» — в каком порядке вам нужно архивировать или удалять данные. Начните с таблицы с самым большим значение в столбце Sequence и двигайтесь от него в обратном порядке — от большего к меньшему. Таблицы с одинаковым значением Sequence могут быть удалены одновременно. Этот метод не нарушает ни одного из ограничений внешних ключей и позволяет перенести/удалить записи без временного удаления и перестроения ограничений (constraints).
EXEC sp_msdependencies NULL — Все зависимости в БД
EXEC sp_msdependencies NULL, 3 — Зависимости определённой таблицы
В SSMS, если вы нажмёте правой кнопкой мыши на имя таблицы, вы сможете выбрать «View Dependencies» и «Объекты, которые зависят от TABLENAME»:
Мы также можем получить эту информацию следующим способом:
— sp_MSdependencies — Только верхний уровень — Объекты, которые зависят от указанного объекта
EXEC sp_msdependencies N’Sales.Customer', null, 1315327 — Change Table Name
Если в SSMS, в окне просмотра зависимостей, выбрать «Объекты которые зависят от TABLENAME», а затем раскрыть все уровни, мы увидим следующее:
Ту же самую информацию вернёт sp_msdependencies.
— sp_MSdependencies — Все уровни — Объекты, которые зависят от указанного объекта
EXEC sp_MSdependencies N’Sales.Customer', NULL, 266751 — Change Table Name
Так же, в SSMS, мы можем увидеть от каких объектов зависит выбранная таблица.
Следующий запрос, с использованием msdependencies, вернёт ту же самую информацию.
— Объекты, от которых зависит указанный объект
EXEC sp_MSdependencies N’Sales.Customer', null, 1053183 — Change Table
Если вы хотите получить список зависимостей таблиц, вы можете использовать временную таблицу, чтобы отфильтровать зависимости по типу.
CREATE TABLE #TempTable1 ( Type INT, ObjName VARCHAR (256) , Owner VARCHAR (25) , Sequence INT );
INSERT INTO #TempTable1 EXEC sp_MSdependencies NULL
SELECT * FROM #TempTable1 WHERE Type = 8 --Tables ORDER BY Sequence, ObjName
DROP TABLE #TempTable1; Запросы к системным представлениям каталога Второй метод «реверс-инжиниринга» зависимостей в вашей БД — это запросы к системным представлениям каталога, связанным со внешними ключами. --Independent tables
SELECT Name AS InDependentTables FROM sys.tables WHERE object_id NOT IN (SELECT referenced_object_id FROM sys.foreign_key_columns) — Check for parents AND object_id NOT IN (SELECT parent_object_id FROM sys.foreign_key_columns) — Check for Dependents ORDER BY Name
-- Tables with dependencies.
SELECT DISTINCT OBJECT_NAME (referenced_object_id) AS ParentTable, OBJECT_NAME (parent_object_id) AS DependentTable, OBJECT_NAME (constraint_object_id) AS ForeignKeyName FROM sys.foreign_key_columns ORDER BY ParentTable, DependentTable
-- Top level of the pyramid tables. Tables with no parents.
SELECT DISTINCT OBJECT_NAME (referenced_object_id) AS TablesWithNoParent FROM sys.foreign_key_columns WHERE referenced_object_id NOT IN (SELECT parent_object_id FROM sys.foreign_key_columns) ORDER BY 1
-- Bottom level of the pyramid tables. — Tables with no dependents. (These are the leaves on a tree.)
SELECT DISTINCT OBJECT_NAME (parent_object_id) AS TablesWithNoDependents FROM sys.foreign_key_columns WHERE parent_object_id NOT IN (SELECT referenced_object_id FROM sys.foreign_key_columns) ORDER BY 1
-- Tables with both parents and dependents. — Tables in the middle of the hierarchy
SELECT DISTINCT OBJECT_NAME (referenced_object_id) AS MiddleTables FROM sys.foreign_key_columns WHERE referenced_object_id IN (SELECT parent_object_id FROM sys.foreign_key_columns) AND parent_object_id NOT IN (SELECT referenced_object_id FROM sys.foreign_key_columns) ORDER BY 1;
-- in rare cases, you might find a self-referencing dependent table. — Recursive (self) referencing table dependencies.
SELECT DISTINCT OBJECT_NAME (referenced_object_id) AS ParentTable, OBJECT_NAME (parent_object_id) AS ChildTable, OBJECT_NAME (constraint_object_id) AS ForeignKeyName FROM sys.foreign_key_columns WHERE referenced_object_id = parent_object_id ORDER BY 1, 2; Использование CTE Третий метод, для получения иерархии зависимостей — использование рекурсивного CTE. — How to find the hierarchical dependencies — Solve recursive queries using Common Table Expressions (CTE)
WITH TableHierarchy (ParentTable, DependentTable, Level) AS (
-- Anchor member definition (First level group to start the process) SELECT DISTINCT CAST (NULL AS INT) AS ParentTable, e.referenced_object_id AS DependentTable, 0 AS Level FROM sys.foreign_key_columns AS e WHERE e.referenced_object_id NOT IN ( SELECT parent_object_id FROM sys.foreign_key_columns)
-- Add filter dependents of only one parent table — AND Object_Name (e.referenced_object_id) = 'User'
UNION ALL
-- Rec
