sql server中的任務(wù)調(diào)度與CPU深入講解

一. 概述

我們知道在操作系統(tǒng)看來， sql server產(chǎn)品與其它應(yīng)用程序一樣，沒有特別對待。但內(nèi)存，硬盤，cpu又是數(shù)據(jù)庫系統(tǒng)最重要的核心資源，所以在sql server 2005及以后出現(xiàn)了SQLOS，這個組件是sqlserver和windows的中間層，用于CPU的任務(wù)調(diào)度，解決I/O的資源爭用，協(xié)調(diào)內(nèi)存管理等其它的資源協(xié)調(diào)工作。下面我來試著講講SQLOS下的Scheduler調(diào)度管理。話不多說了，來一起看看詳細(xì)的介紹吧。

二. CPU 的配置

在Sql server 里點擊數(shù)據(jù)庫實例右鍵到屬性，選擇處理器進(jìn)行配置。最大工作線程數(shù)的默認(rèn)值是0 （注意這里配置的是worker它是對CPU的真正封裝）。這使得SQL Server能夠在啟動時自動配置工作線程的數(shù)量。默認(rèn)設(shè)置對于大多數(shù)系統(tǒng)是最好的。但是，根據(jù)您的系統(tǒng)配置，將最大工作線程數(shù)設(shè)置為一個特定的值有時會提高性能。當(dāng)查詢請求的實際數(shù)量小于最大工作線程數(shù)時，一個線程處理一個查詢請求。但是，如果查詢請求的實際數(shù)量超過最大線程量時，SQLServer會將Worker Threads線程池化，以便下一個可用的工作線程可以處理請求。

配置如下圖所示:

也可以通過T-sql配置，下例通過sp_configure將max worker線程選項配置為900

USE AdventureWorks2012 ; 
GO 
EXEC sp_configure 'show advanced options', 1; 
GO 
RECONFIGURE ; 
GO 
EXEC sp_configure 'max worker threads', 900 ; 
GO 
RECONFIGURE;

Max Worker Threads服務(wù)器配置選項不考慮的線程， 像高可用、Service Broker、 Lock 管理等其它。如果配置的線程數(shù)量超過了，下面的查詢將提供關(guān)于系統(tǒng)任務(wù)產(chǎn)生的額外線程信息

is_user_process = 0 表示系統(tǒng)任務(wù)，非用戶任務(wù)。

SELECT s.session_id, r.command, r.status, r.wait_type, r.scheduler_id, w.worker_address, 
w.is_preemptive, w.state, t.task_state, t.session_id, t.exec_context_id, t.request_id 
FROM sys.dm_exec_sessions AS s 
INNER JOIN sys.dm_exec_requests AS r 
ON s.session_id = r.session_id 
INNER JOIN sys.dm_os_tasks AS t 
ON r.task_address = t.task_address 
INNER JOIN sys.dm_os_workers AS w 
ON t.worker_address = w.worker_address 
WHERE s.is_user_process = 0;

下面顯示每個用戶的活動會話數(shù)

SELECT login_name ,COUNT(session_id) AS session_count 
FROM sys.dm_exec_sessions 
WHERE status<>'sleeping'
GROUP BY login_name; 

下表顯示了各種CPU和SQLServer組合的最大工作線程的自動配置數(shù)量。

根據(jù)微軟的建議：這個選項是一個高級選項，應(yīng)該只由經(jīng)驗豐富的數(shù)據(jù)庫管理員或經(jīng)過認(rèn)證的SQL Server專業(yè)人員更改。如果您懷疑存在性能問題，則可能不是工作線程的可用性。原因更像是I/O，這會導(dǎo)致工作線程等待。在更改最大工作線程設(shè)置之前，最好找到性能問題的根本原因。

二.調(diào)度原理

2.1 Scheduler任務(wù)調(diào)度

Sqlserver 的一個Scheduler對應(yīng)操作系統(tǒng)上的一個邏輯CPU用于任務(wù)分配。調(diào)度分配從NUMA節(jié)點級別開始?；舅惴ㄊ且粋€用于新連接的循環(huán)調(diào)度。當(dāng)每個新的連接到達(dá)時，它被分配給基于循環(huán)的調(diào)度器。在相同的NUMA節(jié)點內(nèi)，以最小的負(fù)載因子分配給調(diào)度器的新連接。

2.2  Worker

Worker又稱為WorkerThread，每個Worker跟一個線程，是Sql server任務(wù)的執(zhí)行單位。 多個Worker對應(yīng)一個Scheduler，公式Workers=max worker threads/onlines scheduler。在一個Scheduler上，同一時間只能有一個Worker運行。例如4個處理器的64位操作系統(tǒng)，它的每個Scheduler的Worker是512/4=128。

2.3  Task

在Worker上運行的最小任務(wù)單元。最簡單的Task就是一個簡單的Batch，當(dāng)一個會話發(fā)出一個請求時，Sql server會把這個請求拆分一個或多個任務(wù)(Tasks),然后關(guān)聯(lián)對應(yīng)個數(shù)的工作者線程(worker thread)。

例如下面是二個Task ,二個Task可能不是同一個Worker。二個Worker也可能不是同一個Scheduler.           

select @@servername
Go
select getdate()
GO

每個Task線程都有3個狀態(tài):

• Running: 一個處理器在某個時間只能做一件事情，當(dāng)一個線程正在一個處理器上運行時，這個線程的狀態(tài)就是running。
• Suspended: 沒有足夠資源時，當(dāng)前線程放棄占有處理器，變成掛起狀態(tài)。
• Runnable: 一個線程已完成了等待，但還沒有輪到它運行，就會變成runnable狀態(tài)，這種信號等待(signal wait)

2.4 Yielding

Yelding就是所有邏輯scheduler上運行的Worker都是非搶占式的, 在 Scheduler上Worker由于資源等待,讓出給其它Worker就叫Yielding。

下面講述幾種發(fā)生的狀態(tài)：

　　1. 當(dāng)Woker在Scheduler上運行了超過4ms,就做Yielding。

　　2. 每做64k的結(jié)果集的排序，就會做一次Yielding。

　　3. 做語句Complie編譯的過程中,這個過程比較占CPU資源時，經(jīng)常會有Yielding等。

2.5 調(diào)度關(guān)系圖如下：

2.5  Task在調(diào)度運行圖如下：

1. 當(dāng) Task 是Runnig時，它是Schedler的活動Worker。

2. 當(dāng) Task只等待CPU運行時，它被放入Schedler可運行的隊列中。

3. 當(dāng) Task 在等待某個資源時（比如鎖、磁盤輸入/輸出等）時，它處于“Suspended掛起狀態(tài)” 狀態(tài)。

4. 如果Task Scheduler掛起狀態(tài)完成了等待，那么它就會被放到Scheduler 的Runnable隊列的末尾。

5. 如果運行線程自動Yidlding讓步，則將其放回Scheduler 的Runnable隊列的末尾。

6. 如果運行的線程需要等待某個資源，它將被調(diào)出Scheduler調(diào)度器并進(jìn)入掛起狀態(tài)Waiter list。

7. 如果正在運行的線程完成它的工作，那么Runnable隊列的頂部的第一個線程就變成了“運行”線程。

三. 使用dmv任務(wù)查看

3.1.  通過sys.dm_os_sys_info 查看scheduler與cpu的關(guān)系如下:

　SELECT cpu_count,max_workers_count,scheduler_count FROM sys.dm_os_sys_info

3.2  查看最大Worker數(shù)　　

select max_workers_count from sys.dm_os_sys_info　　

3.3  查看Task與Worker關(guān)系

--在每一個連接里，我們可能會有很多batch,分解成多個task以支持如并行查詢
 select task_address,task_state,scheduler_id,session_id,worker_address 
 from sys.dm_os_tasks where session_id>50

select state,last_wait_type,tasks_processed_count,task_address, worker_address, scheduler_address
 from sys.dm_os_workers where worker_address =0x00000000043621A0

3.4 查看Scheduler

--scheduler_id<255 代表用戶CPU,相反代表SYSTEM SCHEDULER
SELECT
 scheduler_id,
 cpu_id,
 is_online,
 current_tasks_count,
 runnable_tasks_count,
 current_workers_count,
 active_workers_count,
 work_queue_count
 FROM sys.dm_os_schedulers
 WHERE scheduler_id < 255

cpu_id:關(guān)聯(lián)的cpu 。 CPU ID  >=255 這類Scheduler都用于系統(tǒng)內(nèi)部使用。比如說資源管理、DAC、備份還原操作等。

 　　is_online: 0 調(diào)度器離線，1 在線。

　　current_tasks_count:當(dāng)前任務(wù)數(shù)，狀態(tài)包括：(等待，運行，已完成)。

　　runnable_tasks_count:以分配任務(wù)，并在可運行隊列中等待被調(diào)度的任務(wù)數(shù)，使用率不高的情況下，這個值會是0。

　　current_workers_count:此scheduler關(guān)聯(lián)的線程數(shù)。包括處于空閑狀態(tài)的線程work。

　　active_workers_count:當(dāng)前處理活動的線程數(shù),它必須關(guān)聯(lián)任務(wù)task,包括running,runnable,suspend。

　　work_queue_count:隊列中的任務(wù)task等待數(shù)，如果不為0，意味著線程用盡的壓力。

講到這里，后面講講CPUf過高的分析...

參考文獻(xiàn)：

　　Troubleshooting SQL Server Scheduling and Yielding

　　Microsoft SQL Server企業(yè)級平臺管理實踐

　　How It Works: SQL Server 2012 Database Engine Task Scheduling

總結(jié)

以上就是這篇文章的全部內(nèi)容了，希望本文的內(nèi)容對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，如果有疑問大家可以留言交流，謝謝大家對億速云的支持。