這篇文章將為大家詳細(xì)講解有關(guān)sql server中內(nèi)存的示例分析,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
創(chuàng)新互聯(lián)憑借在網(wǎng)站建設(shè)、網(wǎng)站推廣領(lǐng)域領(lǐng)先的技術(shù)能力和多年的行業(yè)經(jīng)驗,為客戶提供超值的營銷型網(wǎng)站建設(shè)服務(wù),我們始終認(rèn)為:好的營銷型網(wǎng)站就是好的業(yè)務(wù)員。我們已成功為企業(yè)單位、個人等客戶提供了網(wǎng)站設(shè)計、做網(wǎng)站服務(wù),以良好的商業(yè)信譽,完善的服務(wù)及深厚的技術(shù)力量處于同行領(lǐng)先地位。一. 前言
對于sql server 這個產(chǎn)品來說,內(nèi)存這塊是最重要的一個資源, 當(dāng)我們新建一個會話,相同的sql語句查詢第二次查詢時間往往會比第一次快,特別是在sql統(tǒng)計或大量查詢數(shù)據(jù)輸出時,會有這么感覺。除了第一次要編譯生成執(zhí)行計劃, 在CPU,I/O 的影響外,最主要的是第二次查詢是從內(nèi)存緩存中讀出,為什么是這樣,sql server 內(nèi)存里存儲了什么,它與windows內(nèi)存又有什么區(qū)別?
二. 內(nèi)存和硬盤
為什么內(nèi)存是寶貴的,在每個系統(tǒng)上都是有限的,就像你看到的1 tb的硬盤,但是你通常看到的是50-200 G的內(nèi)存, 物理內(nèi)存的訪問速度非???,不能超過一定的限制。在內(nèi)存有限的情況下,如果所有的進程都使用了有限的內(nèi)存,并且新的進程將無法為他們找到任何內(nèi)存,這就出現(xiàn)了虛擬地址空間的概念(也稱為VAS)。
Virtual Address Space(虛擬地址空間)
是指一個應(yīng)用程序能夠申請訪問的大地址空間。32位尋址空間大是4G, 64位尋址空間大是8TB。
VAS作為中間的抽象層的, 不是所有的請求都直接映射到物理內(nèi)存,它首先映射到VAS然后映射到物理內(nèi)存。因此,它可以更協(xié)調(diào)的方式管理對內(nèi)存的請求,而不是讓進程去做,如果不是這樣,它很快就會導(dǎo)致內(nèi)存崩潰。
在Windows操作系統(tǒng)中,VAS 的內(nèi)核進程與用戶進程之間的劃分是相同的。對于32位系統(tǒng),大的VAS 是4 G的內(nèi)核/ 2 G到應(yīng)用程序的中,在這里,SQL Server是應(yīng)用程序進程,當(dāng)我使用word進程時,它意味SQL Server進程差不多一樣,將得到2 G的VAS。因此,從理論上講,這意味著任何應(yīng)用程序進程在32位上運行的都將擁有大限度的2 G。
三 sql server 內(nèi)存 架構(gòu)
sql server 內(nèi)存管理,在sql server 2012發(fā)生了重大改變,對內(nèi)存重新實現(xiàn)了一遍。 先看下版本之間內(nèi)存管理圖的區(qū)別
名詞術(shù)語
3.1 BufferPool
SQL Server使用BufferPool緩沖池來有效地管理SQL Server進程的內(nèi)存請求。它是SQL Server的大內(nèi)存消耗者。緩沖區(qū)是內(nèi)存中的一個8 KB的頁面,與數(shù)據(jù)或索引頁面大小相同,您可以將緩沖區(qū)看作是一個框架,它在從磁盤到內(nèi)存的時候保存數(shù)據(jù)和索引頁。
SQL Server緩沖區(qū)管理器管理將數(shù)據(jù)頁讀入緩沖池的任務(wù),并將其寫入磁盤。它是SQL Server的預(yù)留內(nèi)存存儲,如果您不為它設(shè)置值,它將占用盡可能多的內(nèi)存。因此,在spconfigure中為max server內(nèi)存設(shè)置最佳值總是被推薦為一種良好的實踐。緩沖池只將內(nèi)存分配給需要少于8 KB頁面的請求。
對于大于8 KB內(nèi)存的所有請求,都是由windows API直接分配的。所有緩存存儲計劃、數(shù)據(jù)和索引頁都存儲在這個緩沖池中。當(dāng)用戶請求row/rows時,如果緩沖區(qū)池中沒有,則使該頁面從磁盤進入內(nèi)存。這種輸入/輸出可能在繁忙的系統(tǒng)上特別昂貴,因此盡可能減少SQL服務(wù)器緩存的大小,這可能會被用戶看作是內(nèi)存泄漏或SQL Server占用大量內(nèi)存,但實際上它提高了性能,實際上這個特性是通過設(shè)計實現(xiàn)的。
下面這些內(nèi)存不是來自緩沖池:
SQL LCR
擴展存儲過程
鏈接服務(wù)器分配的內(nèi)存
內(nèi)存管理器完成的大頁面分配(大頁面為任意頁面>8 KB)
COM對象
3.2 single-page
這塊內(nèi)存是<=8kb 的存儲,適用于sql server 2008及以前, 屬于buffer pool 緩沖池來分配。有存儲數(shù)據(jù)頁面,Consumer功能組件。
3.3 multi- page
這塊內(nèi)存是>8kb的 存儲,適用于sql server 2008及以前, 不屬于buffer pool 緩沖池來分配, 有存儲Consumer功能組件, 第三方代碼, Threads線程。
3.4 any size page
這個適用于sql server 2012及以上,整合了single-page,multi-page 統(tǒng)稱pages。
四. sql server 2008 內(nèi)存
從內(nèi)存圖我們可以看到有 page reservation 需預(yù)先申請的內(nèi)存, 有momory objects 從windows api申請的內(nèi)存, 有clr第三方申請的內(nèi)存。
內(nèi)存的分類方式有很多,下面介紹三種方式:
1. 按用途分類
1.1 Database Cache(數(shù)據(jù)頁面緩沖區(qū))
當(dāng)用戶修改了某個頁面上的數(shù)據(jù)時,sql server會在頁存中將這個頁修改。但不會立刻將這個頁面寫回硬盤,而是等后面的checkpoint 或lazy write集中處理。
1.2 各類Consumer功能組件
Connection 連接:包括輸入緩沖池和輸出緩沖池, 用來存儲用戶指令和返回結(jié)果。
General :一組大雜燴: 語句,語句編譯,范式化,鎖數(shù)據(jù)結(jié)構(gòu),事務(wù)上下文,表格,索引的元數(shù)據(jù)等。
Query paln:語句和存儲過程的執(zhí)行計劃。
Optimizer:sql server在生成執(zhí)行計劃的過程中需要消耗的內(nèi)存。
Utilities:像BCP, Log Manager,Parallel Queries,Backup
1.3 線程內(nèi)存
為每個線程分配0.5MB的內(nèi)存
1.4 第三方代碼申請的內(nèi)存
如用戶定義的CLR,Linked Server分布式查詢從遠(yuǎn)程數(shù)據(jù)庫取回大量數(shù)據(jù)。
2. 按申請方式分類
申請方式是指要先預(yù)先Reserve一塊大的內(nèi)存,然后再一小塊一小塊的commit。對Database Cache是會先Reserve,再commit。
其他所有內(nèi)存使用,基本都是直接commit,都叫Stolen。
3. 按申請大小分類(上面的內(nèi)存圖就是這種分類)
有二種內(nèi)存申請單位: 一種是小于或等于8KB的,稱為Buffer Pool,一次一個頁面的這種分配,被稱為single page allocation.
一種是大于8kb的,稱為Multi-page(以前叫MemToLeave),這種分配,被稱為 Multiple Page Allocation.
注意這里的很大一部分內(nèi)存不受 sql server本身控制.因為第三方代碼申請的內(nèi)存都放在Multi-page里.
內(nèi)存分類方法之間的關(guān)系
類型 | Database cache 數(shù)據(jù)頁面緩沖區(qū) | Consumer 功能組件 | 3 Party code 第三方代碼 | Threads 線程 |
Reserved/Commit | 是 | 一般不是 | 一般不是 | 不是 |
Stolen | 不是 | 是 | 是 | 是 |
Buffer Pool (single- page) | 所有 | 絕大部分 | 沒有 | 沒有 |
MemToLeave (Multi -page) | 沒有 | 一小部分 | 所有 | 所有 |
五.sql server 2012 內(nèi)存
在 sql server 2012里,single page allocator 和multi page allocator 統(tǒng)一起來了,叫做any size page allocator。max server memory 不再像以前的版本那樣,只控制buffer pool的大小,也包括那些大于8kb 的內(nèi)存請求。也就是max server memory 能夠更準(zhǔn)確地控制SQL Server 的內(nèi)存使用了。
如下圖所示:
使用dmv 來查看當(dāng)前實例的總內(nèi)存空間,以及占用內(nèi)存空間
--Target Server Memory (KB)最多能申請的內(nèi)存量
--Total Server Memory (KB) 目前使用了多少內(nèi)存量
從下面的空間占用也可以看出來, 給sql server有分配多少內(nèi)存, 它就會占用多少內(nèi)存,以達(dá)到性能的最優(yōu)。
select counter_name, ltrim(cntr_value*1.0/1024.0/1024.0)+'G' as memoryGB from master.sys.dm_os_performance_counters where counter_name like '%target%server%memory%'or counter_name like '%total%memory%'
六 總結(jié)
當(dāng)您啟動Microsoft SQL Server時,SQL Server內(nèi)存使用量可能會繼續(xù)穩(wěn)步增長,而不是減少,即使服務(wù)器上的活動很低。此外,任務(wù)管理器和性能監(jiān)視器可能顯示,計算機上可用的物理內(nèi)存會逐漸減少,直到可用內(nèi)存在4 MB到10 MB之間。這種行為本身并不表示內(nèi)存泄漏。這種行為是典型的,并且是SQL Server緩沖池的預(yù)期行為。
默認(rèn)情況下,SQL Server根據(jù)操作系統(tǒng)報告的物理內(nèi)存負(fù)載動態(tài)地增長和縮小緩沖池(緩存)的大小。只要有足夠的內(nèi)存(4 MB和10 MB)可以防止分頁,那么SQL Server緩沖池就會繼續(xù)增長。當(dāng)與SQL Server在同一臺計算機上分配內(nèi)存時,SQL Server緩沖管理器將根據(jù)需要釋放內(nèi)存。SQL Server可以每秒釋放數(shù)兆字節(jié)的內(nèi)存。這允許SQL Server快速地適應(yīng)內(nèi)存分配更改。
您可以為SQL Server數(shù)據(jù)庫引擎使用最小服務(wù)器內(nèi)存和大服務(wù)器內(nèi)存配置選項使用多少內(nèi)存(緩沖池)設(shè)置上限和下限
請注意,通過上圖設(shè)置內(nèi)存大 max 只限制SQL Server緩沖池的大小。不限制SQL Server為其他組件分配的剩余未保留內(nèi)存區(qū)域,如擴展存儲過程、COM對象、非共享dll、EXEs和MAPI組件。由于之前的分配,SQL Server私有字節(jié)的數(shù)量超過了大服務(wù)器內(nèi)存配置。
關(guān)于“sql server中內(nèi)存的示例分析”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,使各位可以學(xué)到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。