Überwachen von SQL Server Machine Learning Services mithilfe dynamischer Verwaltungssichten

Gilt für: SQL Server 2016 (13.x) und höhere Versionen von Azure SQL Managed Instance

Verwenden Sie dynamische Verwaltungssichten (DMVs), um die externe Skriptausführung (Python und R) und Ressourcennutzung zu überwachen, Probleme zu diagnostizieren und die Leistung in SQL Server Machine Learning Services zu optimieren.

In diesem Artikel finden Sie DMVs, die spezifisch für SQL Server Machine Learning Services vorgesehen sind. Außerdem finden Sie Beispielabfragen, die Folgendes veranschaulichen:

• Einstellungs- und Konfigurationsoptionen für maschinelles Lernen
• Aktive Sitzungen mit Ausführung externer Python- oder R-Skripts
• Ausführungsstatistiken für die externe Runtime von Python und R
• Leistungsindikatoren für externe Skripts
• Arbeitsspeicherauslastung für das Betriebssystem, SQL Server und externe Ressourcenpools
• Arbeitsspeicherkonfiguration für SQL Server und externe Ressourcenpools
• Resource Governor-Ressourcenpools, einschließlich externer Ressourcenpools
• Installierte Pakete für Python und R

Weitere allgemeine Informationen über DMVs finden Sie unter Dynamische Systemverwaltungssichten.

Dynamische Verwaltungssichten

Die folgenden dynamischen Verwaltungssichten können bei der Überwachung von Machine Learning-Workloads in SQL Server verwendet werden. Zum Abfragen der DMVs benötigen Sie die VIEW SERVER STATE-Berechtigung für die Instanz.

Informationen zum Überwachen von SQL Server-Instanzen finden Sie unter Katalogsichten und Dynamische Verwaltungssichten in Verbindung mit dem Resource Governor.

Einstellungen und Konfiguration

Zeigen Sie die Installationseinstellungen und Konfigurationsoptionen von Machine Learning Services an.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zu verwendeten Sichten und Funktionen finden Sie unter sys.dm_server_registry, sys.configurations und SERVERPROPERTY.

SELECT CAST(SERVERPROPERTY('IsAdvancedAnalyticsInstalled') AS INT) AS IsMLServicesInstalled
    , CAST(value_in_use AS INT) AS ExternalScriptsEnabled
    , COALESCE(SIGN(SUSER_ID(CONCAT (
                    CAST(SERVERPROPERTY('MachineName') AS NVARCHAR(128))
                    , '\SQLRUserGroup'
                    , CAST(serverproperty('InstanceName') AS NVARCHAR(128))
                    ))), 0) AS ImpliedAuthenticationEnabled
    , COALESCE((
            SELECT CAST(r.value_data AS INT)
            FROM sys.dm_server_registry AS r
            WHERE r.registry_key LIKE 'HKLM\Software\Microsoft\Microsoft SQL Server\%\SuperSocketNetLib\Tcp'
            AND r.value_name = 'Enabled'
            ), - 1) AS IsTcpEnabled
FROM sys.configurations
WHERE name = 'external scripts enabled';

Die Abfrage gibt die folgenden Spalten zurück:

Aktive Sitzungen

Zeigen Sie die aktiven Sitzungen an, die externe Skripts ausführen.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zu den verwendeten DMVs finden Sie unter sys.dm_exec_requests, sys.dm_external_script_requests und sys.dm_exec_sessions.

SELECT r.session_id, r.blocking_session_id, r.status, DB_NAME(s.database_id) AS database_name
    , s.login_name, r.wait_time, r.wait_type, r.last_wait_type, r.total_elapsed_time, r.cpu_time
    , r.reads, r.logical_reads, r.writes, er.language, er.degree_of_parallelism, er.external_user_name
FROM sys.dm_exec_requests AS r
INNER JOIN sys.dm_external_script_requests AS er
ON r.external_script_request_id = er.external_script_request_id
INNER JOIN sys.dm_exec_sessions AS s
ON s.session_id = r.session_id;

Die Abfrage gibt die folgenden Spalten zurück:

Ausführungsstatistiken

Zeigen Sie die Ausführungsstatistiken für die externe Runtime von Python und R an. Derzeit sind nur Statistiken der Paketfunktionen RevoScaleR, revoscalepy und MicrosoftML verfügbar.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zur verwendeten dynamischen Verwaltungssicht finden Sie unter sys.dm_external_script_execution_stats. Die Abfrage gibt nur Funktionen zurück, die mehr als einmal ausgeführt wurden.

SELECT language, counter_name, counter_value
FROM sys.dm_external_script_execution_stats
WHERE counter_value > 0
ORDER BY language, counter_name;

Die Abfrage gibt die folgenden Spalten zurück:

Leistungsindikatoren

Zeigen Sie die Leistungsindikatoren für die Ausführung externer Skripts an.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zu der verwendeten dynamischen Verwaltungssicht finden Sie unter sys.dm_os_performance_counters.

SELECT counter_name, cntr_value
FROM sys.dm_os_performance_counters 
WHERE object_name LIKE '%External Scripts%'

sys.dm_os_performance_counters gibt die folgenden Leistungsindikatoren für externe Skripts aus:

Speicherauslastung

Zeigen Sie Informationen zum vom Betriebssystem, von SQL Server und von den externen Pools verwendeten Arbeitsspeicher an.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zu den verwendeten dynamischen Verwaltungssichten finden Sie unter sys.dm_resource_governor_external_resource_pools und sys.dm_os_sys_info.

SELECT physical_memory_kb, committed_kb
    , (SELECT SUM(peak_memory_kb)
        FROM sys.dm_resource_governor_external_resource_pools AS ep
        ) AS external_pool_peak_memory_kb
FROM sys.dm_os_sys_info;

Die Abfrage gibt die folgenden Spalten zurück:

Konfiguration des Arbeitsspeichers

Zeigen Sie Informationen zur maximalen Arbeitsspeicherkonfiguration von SQL Server und externen Ressourcenpools in Prozent an. Wenn SQL Server mit dem Standardwert max server memory (MB) ausgeführt wird, wird dieser als 100 % des Betriebssystemspeichers betrachtet.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zu den verwendeten Sichten finden Sie unter sys.configurations und sys.dm_resource_governor_external_resource_pools.

SELECT 'SQL Server' AS name
    , CASE CAST(c.value AS BIGINT)
        WHEN 2147483647 THEN 100
        ELSE (SELECT CAST(c.value AS BIGINT) / (physical_memory_kb / 1024.0) * 100 FROM sys.dm_os_sys_info)
        END AS max_memory_percent
FROM sys.configurations AS c
WHERE c.name LIKE 'max server memory (MB)'
UNION ALL
SELECT CONCAT ('External Pool - ', ep.name) AS pool_name, ep.max_memory_percent
FROM sys.dm_resource_governor_external_resource_pools AS ep;

Die Abfrage gibt die folgenden Spalten zurück:

Ressourcenpools

Im SQL Server-Resource Governor stellt ein Ressourcenpool eine Teilmenge der physischen Ressourcen einer Instanz dar. Sie können Grenzwerte dafür festlegen, wie viel CPU, physische E/A und Arbeitsspeicher eingehende Anwendungsanforderungen, einschließlich der Ausführung externer Skripts, innerhalb des Ressourcenpools verwenden dürfen. Zeigen Sie die für SQL Server und externe Skripts verwendeten Ressourcenpools an.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Weitere Informationen zu den verwendeten dynamischen Verwaltungssichten finden Sie unter sys.dm_resource_governor_resource_pools und sys.dm_resource_governor_external_resource_pools.

SELECT CONCAT ('SQL Server - ', p.name) AS pool_name
    , p.total_cpu_usage_ms, p.read_io_completed_total, p.write_io_completed_total
FROM sys.dm_resource_governor_resource_pools AS p
UNION ALL
SELECT CONCAT ('External Pool - ', ep.name) AS pool_name
    , ep.total_cpu_user_ms, ep.read_io_count, ep.write_io_count
FROM sys.dm_resource_governor_external_resource_pools AS ep;

Die Abfrage gibt die folgenden Spalten zurück:

Installierte Pakete

Sie können die in SQL Server Machine Learning Services installierten R- und Python-Pakete anzeigen, indem Sie ein R- oder Python-Skript ausführen, das diese ausgibt.

Installierte R-Pakete

Zeigen Sie die in SQL Server Machine Learning Services installierten R-Pakete an.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Die Abfrage nutzt ein R-Skript, um die auf der SQL Server-Instanz installierten R-Pakete zu ermitteln.

EXECUTE sp_execute_external_script @language = N'R'
, @script = N'
OutputDataSet <- data.frame(installed.packages()[,c("Package", "Version", "Depends", "License", "LibPath")]);'
WITH result sets((Package NVARCHAR(255), Version NVARCHAR(100), Depends NVARCHAR(4000)
    , License NVARCHAR(1000), LibPath NVARCHAR(2000)));

Die folgenden Spalten werden zurückgegeben:

Installierte Python-Pakete

Zeigen Sie die in SQL Server Machine Learning Services installierten Python-Pakete an.

Führen Sie die folgende Abfrage aus, um diese Ausgabe zu erhalten. Die Abfrage nutzt ein Python-Skript, um die auf der SQL Server-Instanz installierten Python-Pakete zu ermitteln.

EXECUTE sp_execute_external_script @language = N'Python'
, @script = N'
import pkg_resources
import pandas
OutputDataSet = pandas.DataFrame(sorted([(i.key, i.version, i.location) for i in pkg_resources.working_set]))'
WITH result sets((Package NVARCHAR(128), Version NVARCHAR(128), Location NVARCHAR(1000)));

Die folgenden Spalten werden zurückgegeben:

Verwandte Inhalte

• Überwachen von Python- und R-Skripts mit erweiterten Ereignissen in SQL Server Machine Learning Services
• Dynamische Managementansichten zu Ressourcen-Governors (Transact-SQL)
• Systemdynamische Verwaltungsansichten und -funktionen
• Überwachen der Python- und R-Skriptausführung mithilfe von benutzerdefinierten Berichten in SQL Server Management Studio