加入星計(jì)劃,您可以享受以下權(quán)益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴(kuò)散
  • 作品版權(quán)保護(hù)
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長(zhǎng)期合作伙伴
立即加入
  • 正文
  • 相關(guān)推薦
  • 電子產(chǎn)業(yè)圖譜
申請(qǐng)入駐 產(chǎn)業(yè)圖譜

至強(qiáng)秘笈 | 英特爾? 傲騰? 持久內(nèi)存:重構(gòu)計(jì)算系統(tǒng)的“社區(qū)圖書館”

2021/03/05
258
閱讀需 9 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

與DRAM內(nèi)存相比,英特爾® 傲騰™ 持久內(nèi)存不但提供相近的性能,還具備更高的容量和性價(jià)比,且有非易失性、按字節(jié)尋址等獨(dú)到優(yōu)勢(shì);

快手在推薦系統(tǒng)存儲(chǔ)升級(jí)中借它降低TCO達(dá)30%,將故障恢復(fù)用時(shí)縮短達(dá)百倍;

寧德時(shí)代MES系統(tǒng)利用它將落盤速度提升到原來(lái)的6.2倍,將系統(tǒng)重啟耗時(shí)從數(shù)十分鐘縮短至5-10分鐘。

傳統(tǒng)上,在一個(gè)計(jì)算系統(tǒng)中,貼近計(jì)算的數(shù)據(jù)(熱數(shù)據(jù))和遠(yuǎn)離計(jì)算的數(shù)據(jù)(溫、冷數(shù)據(jù))被分別“安置”在易失性的處理器緩存和DRAM內(nèi)存,以及擁有數(shù)據(jù)持久性的固態(tài)盤和硬盤中。在全球數(shù)據(jù)規(guī)模呈幾何級(jí)增長(zhǎng)的背景下,在所有用戶都急切盼望重構(gòu)存儲(chǔ)介質(zhì)或設(shè)備之間的層級(jí)關(guān)系,以提升數(shù)據(jù)處理效率之際,這個(gè)傳統(tǒng)的內(nèi)存-存儲(chǔ)架構(gòu)正變得十分脆弱。

問(wèn)題到底出在哪里了呢?如圖一所示,如果我們把系統(tǒng)讀寫、處理數(shù)據(jù)的過(guò)程比作資料書籍的查詢或調(diào)閱,處理器內(nèi)的寄存器和高速緩存就像是家中的書桌和書柜,書桌上擺著的數(shù)據(jù)無(wú)疑唾手可得,可只有幾頁(yè)紙或幾本書的容納量;書柜里的資料書籍?dāng)?shù)量更多些,但取用的耗時(shí)也略長(zhǎng)一些。

圖一 用書的存放和查找做例子,來(lái)理解不同存儲(chǔ)層級(jí)的特點(diǎn)

到了DRAM內(nèi)存這一級(jí),情況就會(huì)發(fā)生一些變化,因?yàn)樗巡辉偈翘幚砥?a class="article-link" target="_blank" href="/baike/521485.html">硅片上集成的存儲(chǔ)部件了,但又是其他存儲(chǔ)部件或設(shè)備中距離處理器最近的,因此更像是離家較近的社區(qū)圖書館,收藏的書籍或資料要比家里豐富得多,但要去找書查資料,就得出家門(延時(shí)更長(zhǎng))、攜帶量也受限(數(shù)據(jù)傳輸性能也低一些)。

轉(zhuǎn)遍了社區(qū)圖書館,所需的書或資料還沒(méi)找到的話,就不得不長(zhǎng)途跋涉前往固態(tài)盤和硬盤了。這兩種存儲(chǔ)設(shè)備或介質(zhì)與處理器內(nèi)的寄存器、緩存,還有剛剛提及的內(nèi)存更加不同,它們就好比大型的城市級(jí)甚至是國(guó)家級(jí)的圖書館,存放的數(shù)據(jù)資料可謂浩如煙海,但更傾向于容量的設(shè)計(jì)目標(biāo)也使得它們?cè)谛阅鼙憩F(xiàn)上有更多犧牲,因此拜訪一次的耗時(shí)不菲且能取回的數(shù)據(jù)量更為受限。

上述的類比,就是傳統(tǒng)內(nèi)存-存儲(chǔ)架構(gòu)的形象體現(xiàn),如果要有更精確的印象,不妨看看表一基于不同存儲(chǔ)層級(jí)的真實(shí)性能和延時(shí)數(shù)據(jù)所做的比較。從中我們不難發(fā)現(xiàn),醒目的性能鴻溝或者說(shuō)缺口正夾在DRAM內(nèi)存和固態(tài)盤/硬盤之間,其差距足有千倍以上。

表一 不同存儲(chǔ)介質(zhì)的延時(shí)速度類比

由此,要理解內(nèi)存計(jì)算或內(nèi)存數(shù)據(jù)庫(kù)技術(shù)的緣起,也就是件自然而然的事兒了——畢竟處理器硅片上寸土寸金,功耗上也有更多限制,因此大幅擴(kuò)展緩存容量的設(shè)計(jì),往往會(huì)因此讓步給增添全新計(jì)算單元或集成更多周邊組件的想法,而盡可能擴(kuò)展內(nèi)存容量,并將更多熱數(shù)據(jù)存入其中就成了加速數(shù)據(jù)分析和處理的有效途徑,同時(shí)也是在成本上更容易讓人承受的法子。這就像自家的房子不可能為了容納超大的書桌和書房而動(dòng)輒蓋成數(shù)百或上千平米之大,但把離家最近的社區(qū)圖書館擴(kuò)建一下,則是更加實(shí)惠、也利人利已的做法。

然而,計(jì)劃再好,也經(jīng)常趕不上變化。隨著移動(dòng)互聯(lián)網(wǎng)和互聯(lián)網(wǎng)時(shí)代的到來(lái),也隨著海量數(shù)據(jù)處理技術(shù)的成熟,DRAM內(nèi)存在容量和成本上也開始不敷應(yīng)用。以現(xiàn)在很多APP背后常用的推薦系統(tǒng)為例:其核心的分布式索引系統(tǒng)為了應(yīng)對(duì)高并發(fā)需求,通常需要基于內(nèi)存數(shù)據(jù)庫(kù)構(gòu)建,而且對(duì)于承載這個(gè)數(shù)據(jù)庫(kù)的內(nèi)存的容量要求也越來(lái)越高,過(guò)去上百或幾百GB就能滿足,現(xiàn)在則恨不能以TB起步。然而要構(gòu)建這樣的內(nèi)存系統(tǒng),DRAM內(nèi)存普遍單條128GB的容量是很難實(shí)現(xiàn)的,而且即使計(jì)算系統(tǒng)提供了更多內(nèi)存通道和更多內(nèi)存插槽,DRAM內(nèi)存高昂的價(jià)格,也會(huì)讓人望而卻步。

因此,不論是最終用戶,還是IT廠商,都認(rèn)為在DRAM內(nèi)存和固態(tài)盤/硬盤之間亟需開發(fā)一種全新的存儲(chǔ)部件或設(shè)備,來(lái)解決DRAM內(nèi)存在容量和成本上面臨的兩難局面,并滿足更大內(nèi)存數(shù)據(jù)庫(kù)的構(gòu)建需求。

英特爾® 傲騰™ 持久內(nèi)存就是英特爾針對(duì)上述需求推出的創(chuàng)新產(chǎn)品,其創(chuàng)新的3D XPoint™ 存儲(chǔ)介質(zhì),與先進(jìn)的內(nèi)存控制器和其它軟硬件技術(shù)相結(jié)合,使其在性能上接近DRAM內(nèi)存,在容量上又能有數(shù)倍的提升。它的出現(xiàn),如圖三所示,填補(bǔ)了內(nèi)存與傳統(tǒng)存儲(chǔ)間的缺口,也顛覆了傳統(tǒng)的內(nèi)存-存儲(chǔ)架構(gòu)。用它來(lái)擴(kuò)建扮演社區(qū)圖書館角色的內(nèi)存系統(tǒng),不但容量上更易達(dá)標(biāo)(單條容量可達(dá)512GB),造價(jià)也能較易承受。

圖三 英特爾® 傲騰™ 持久內(nèi)存填補(bǔ)DRAM內(nèi)存與固態(tài)盤/硬盤之間的缺口

選用英特爾® 傲騰™ 持久內(nèi)存,還有兩個(gè)附帶收獲,即可按字節(jié)尋址和數(shù)據(jù)持久性。前者針對(duì)的是固態(tài)盤和硬盤常用的按塊讀寫機(jī)制,這種機(jī)制就如同去圖書館借書時(shí),必須要把放置著目標(biāo)書籍的書架上的所有書都背回家再做分揀,而按字節(jié)尋址則能精準(zhǔn)定位目標(biāo)書籍的位置,并僅僅將其借出拿走。數(shù)據(jù)持久性則是對(duì)DRAM內(nèi)存先天不足的補(bǔ)全,即在斷電后依然能保留數(shù)據(jù),這就讓大體量的內(nèi)存數(shù)據(jù)庫(kù)在計(jì)算系統(tǒng)出現(xiàn)計(jì)劃內(nèi)或計(jì)劃外停機(jī)時(shí),重啟及恢復(fù)服務(wù)的速度大大加快,畢竟中間節(jié)省了把數(shù)百GB,甚至是TB級(jí)數(shù)據(jù)從固態(tài)盤或硬盤上讀回內(nèi)存的耗時(shí)。

英特爾® 傲騰™ 持久內(nèi)存這種種應(yīng)用優(yōu)勢(shì),絕非紙上談兵。以互聯(lián)網(wǎng)行業(yè)的快手為例,它就用英特爾® 傲騰™ 持久內(nèi)存升級(jí)了推薦系統(tǒng)的存儲(chǔ)系統(tǒng),在滿足性能要求之余,使其TCO降低了30%,故障恢復(fù)用時(shí)也獲得高達(dá)百倍的縮短[1]。

再以正積極推進(jìn)制造業(yè)數(shù)字化和智能化轉(zhuǎn)型的寧德時(shí)代為例,其基于內(nèi)存數(shù)據(jù)庫(kù)的制造執(zhí)行系統(tǒng)(MES)導(dǎo)入英特爾® 傲騰™ 持久內(nèi)存后,數(shù)據(jù)落盤速度提升到原來(lái)的6.2倍,系統(tǒng)重啟的耗時(shí)也從原來(lái)的數(shù)十分鐘縮短至5-10分鐘[2],這就讓該系統(tǒng)能夠以更優(yōu)的效率響應(yīng)生產(chǎn)的實(shí)時(shí)數(shù)據(jù)處理需求,并為產(chǎn)能的快速擴(kuò)展提供更可靠的保障。

圖四 寧德時(shí)代MES Data Merge性能

 

在采用英特爾® 傲騰™ 持久內(nèi)存前后的性能對(duì)比

[1]  如欲了解快手案例的更多細(xì)節(jié),請(qǐng)?jiān)L問(wèn):

https://www.intel.cn/content/www/cn/zh/architecture-and-technology/kuaishou-recommendation-system-and-redis-services-storage-upgrade.html

[2]  如欲了解寧德時(shí)代案例的更多細(xì)節(jié),請(qǐng)?jiān)L問(wèn):

https://www.intel.cn/content/www/cn/zh/customer-spotlight/stories/catl-customer-story.html

英特爾

英特爾

英特爾在云計(jì)算、數(shù)據(jù)中心、物聯(lián)網(wǎng)和電腦解決方案方面的創(chuàng)新,為我們所生活的智能互連的數(shù)字世界提供支持。

英特爾在云計(jì)算、數(shù)據(jù)中心、物聯(lián)網(wǎng)和電腦解決方案方面的創(chuàng)新,為我們所生活的智能互連的數(shù)字世界提供支持。收起

查看更多

相關(guān)推薦

電子產(chǎn)業(yè)圖譜

英特爾企業(yè)級(jí)官方公眾號(hào),分享英特爾在大數(shù)據(jù)、云計(jì)算、人工智能、5G等領(lǐng)域的前沿技術(shù)、產(chǎn)品信息、解決方案及成功案例。關(guān)注我們,實(shí)時(shí)獲悉英特爾企業(yè)級(jí)資訊。