挖礦的現(xiàn)在連硬盤都不放過了。
一塊大容量硬盤漲價超過了100%,做視頻的朋友現(xiàn)在是叫苦不迭。
u1s1(有一說一),云存儲現(xiàn)在好像有點性價比那意思了。
這時候一定又有人說,云存儲的讀寫速度拿來剪視頻,真的不是開玩笑嗎?
以前不一定,現(xiàn)在沒準(zhǔn)還真的可以。
我發(fā)四,這是我一動畫渲染師朋友告訴我的。
“云渲染”是一種什么體驗?
所謂渲染,作為模型到動畫的一個關(guān)鍵步驟,需要大量算力來計算。
有這樣一組數(shù)據(jù)。
CG動畫經(jīng)典《阿麗塔:戰(zhàn)斗天使》,就需要600天、30000臺服務(wù)器全天不停歇的渲染,才制成了這部122分鐘的電影。
一個傳統(tǒng)的渲染廠商,首先你得自建一個機房,也就是所謂的“渲染農(nóng)場”。
大一點的,有5000-10000臺服務(wù)器不等。中小規(guī)模也要到1000臺這一數(shù)量上。針對一個企業(yè)來說,一次性投入十分龐大,動輒上千萬。
采購之后,電費、運維成本也都無法忽視。因此有的廠商,選擇在廣西、新疆等這些電費上有補貼政策的區(qū)域來運轉(zhuǎn)。以及服務(wù)器的機型,也會定期迭代淘汰。
除了成本高昂以外,渲染本身還有一定的規(guī)律性。年期以及年初的時候是市場淡季,但在節(jié)假日那段時間,需求就會爆發(fā)性增長。
這時候企業(yè)無法應(yīng)對如此大的需求,客戶也只能排隊……
如今這兩大痛點,在云上就可以得到解決——云化部署+高性能文件存儲。
我朋友這家企業(yè)——秦渲云就采用了騰訊云turbo(高性能文件存儲)的方法來實現(xiàn)。
云化部署,就可以讓算力得到高效、彈性的使用。
需要多少,就用多少,減少了資源的浪費。與此同時,還具備快速上線的功能。
傳統(tǒng)廠房通常會有一個熱身時間,靠人上去部署,現(xiàn)在在云上就可以完成,運維管理效率提升50%。
高性能文件存儲,海量并發(fā)、低延時、以及大吞吐量的特點。
以吞吐量為例,騰訊云Turbo文件存儲可以提供百GB/s的吞吐量,結(jié)合動態(tài)擴(kuò)展的計算資源,實現(xiàn)隨用隨取,在實際的渲染場景下,渲染效率提升30%。
大概是這樣一個場景:
客戶在平臺上發(fā)任務(wù),將本地的文件上傳到平臺上,企業(yè)根據(jù)客戶的不同場景需求,在云上選擇不同機型。
對于企業(yè)來說,成本就是一個很大的優(yōu)勢。
機器渲染的成本是非常高的,一般來講,一百臺服務(wù)器,他渲染一部電影需要一個月的時間。通過云渲染提供資源可以提供一千臺服務(wù)器,時間會縮短到十分之一。
講到這里,似乎還不能證明云存儲就是新的生產(chǎn)力工具。
別著急,來康康騰訊云的三個新產(chǎn)品。
云存儲,新的生產(chǎn)力工具
說到云存儲,很多人第一反應(yīng)就是速度慢。至少云存儲和本地存儲是很難無縫銜接的。
如果我把本地資源都上傳到網(wǎng)上,那么云存儲能滿足我的要求嗎?數(shù)據(jù)傳輸延時和讀寫速度能達(dá)到多少?
騰訊云的極速型云硬盤打消了用戶的顧慮。
經(jīng)過對數(shù)據(jù)存儲鏈路上各項技術(shù)的優(yōu)化,實現(xiàn)了時延的行業(yè)突破。數(shù)據(jù)顯示,騰訊云極速型云硬盤時延僅有40微秒,是行業(yè)首款實現(xiàn)10微秒級時延的云硬盤產(chǎn)品。
另外,騰訊云全新發(fā)布的最新一代文件存儲 Turbo系列,在業(yè)內(nèi)首次實現(xiàn)了實現(xiàn)了百GB級吞吐的產(chǎn)品化,最高性能可以做到千萬級IOPS和微秒級的時延,高性能業(yè)務(wù)讀寫效率提升10倍,達(dá)到業(yè)內(nèi)最高水平。
這樣的性能表現(xiàn),不僅可以滿足云端剪片子這種負(fù)載,甚至在大數(shù)據(jù)分析、AI訓(xùn)練與推理這類高負(fù)載應(yīng)用中,也能更好地發(fā)揮出存儲性能優(yōu)勢。
甚至在數(shù)據(jù)庫場景中,騰訊云的極速云硬盤相比本地NVMe SSD還能提升1.3倍。
針對當(dāng)前數(shù)據(jù)湖技術(shù)演進(jìn)趨勢,騰訊云推出了業(yè)界首個基于對象存儲的三級加速器,包括數(shù)據(jù)湖加速器GooseFS、元數(shù)據(jù)加速器和AZ加速器。
其中,數(shù)據(jù)湖加速器GooseFS可以提升10倍的數(shù)據(jù)IO性能,元數(shù)據(jù)加速器則能夠為大數(shù)據(jù)業(yè)務(wù)提供高達(dá)10W QPS的元數(shù)據(jù)操作能力,AZ加速器可以為大數(shù)據(jù)業(yè)務(wù)提供Tb級別的帶寬和毫秒級的延遲。
從QQ空間到存儲生態(tài)
看起來,確實是有點香。
實際上,這三個產(chǎn)品,恰好代表了騰訊云存儲在云硬盤、對象存儲、文件存儲上的三大核心競爭力:
高可靠、低成本、高性能。
涵蓋大數(shù)據(jù)分析、HPC高性能計算、內(nèi)容分發(fā)、AI訓(xùn)練與推理、視頻渲染在內(nèi)的十類方案。
目前,騰訊云存儲規(guī)模已突破10EB,文件數(shù)突破20萬億,服務(wù)的客戶超過180萬家。
今年,正好是騰訊云存儲的第十年。
十年之際,他們提出了全新的發(fā)展思路——三維生態(tài)戰(zhàn)略。
哪三維?
技術(shù)生態(tài)、開源生態(tài)、商業(yè)生態(tài)。
從這三個維度出發(fā),聯(lián)合上下游的合作伙伴,為各行各業(yè)數(shù)字化轉(zhuǎn)型加速。
拆開來看,技術(shù)生態(tài)方面,騰訊云聯(lián)合技術(shù)伙伴,朝著軟硬件相結(jié)合的方向深耕。
比如,聯(lián)合Intel打造極速型云盤方案,在時延、IOPS等關(guān)鍵指標(biāo)上實現(xiàn)行業(yè)第一。
開源,也是騰訊云看中的生態(tài)建設(shè)之路。
騰訊云積極連接開源應(yīng)用、業(yè)界主流開源軟件,如Spark、Presto、Tensorflow、Hive、Flink等大數(shù)據(jù)分析引擎、開源計算框架和組件,為客戶提供基于開源理念的開放型數(shù)據(jù)存儲方案。
商業(yè)生態(tài)就不必說了,也就是充分利用騰訊自身的商業(yè)價值優(yōu)勢。
如此看重生態(tài)的價值,但不為大多數(shù)人所知的是,當(dāng)年騰訊云存儲的起點,是在自身業(yè)務(wù)場景——
QQ空間。
當(dāng)時大量用戶涌入QQ空間,上傳海量的照片、文件,這給騰訊的存儲帶來了很大的考驗。若不及時解決,造成的直接后果就是,開啟速度越來越慢、用戶體驗也就越來越差。
爆款產(chǎn)品,就將不再“爆款”。
為了應(yīng)對QQ空間云相冊的海量數(shù)據(jù)存儲,存儲技術(shù)團(tuán)隊就此成立,一年之后自研了一套底層的存儲引擎TFS。
此后,包括整個QQ、騰訊視頻,都落入到TFS中去。2010年,騰訊開放平臺接入首批應(yīng)用。
2012年,隨著騰訊在存儲系統(tǒng)的不斷成熟,以及外部的云計算趨勢,騰訊云存儲業(yè)務(wù)開始面向外部開放。
2015年,存儲規(guī)模突破EB級。
2019年,整個存儲引擎進(jìn)行一次大升級,新一代自研百EB級對象存儲專用引擎YottaStore上線,同年客戶數(shù)突破了100萬。
2020年,云硬盤IOPS業(yè)界首個突破110萬。
十年后的騰訊云,已經(jīng)跟生態(tài)里的合作伙伴保持著密不可分的關(guān)系。
比如,結(jié)合金山的文檔優(yōu)勢,面向在線協(xié)同辦公業(yè)務(wù)系統(tǒng),打造了在線實時文檔預(yù)覽方案;
與IBM共同打造了面向數(shù)據(jù)湖、自動駕駛、機器學(xué)習(xí)、基因計算等高性能計算業(yè)務(wù)系統(tǒng),提供了一體化高性能并行存儲方案。
騰訊云存儲的產(chǎn)品矩陣
除了生態(tài),數(shù)字經(jīng)濟(jì)時代下的存儲,還要關(guān)注性能與安全。
隨著各個企業(yè)數(shù)字化轉(zhuǎn)型的提速,數(shù)據(jù)呈現(xiàn)出爆發(fā)式增長,并正在成為企業(yè)的核心資產(chǎn),企業(yè)的存儲基礎(chǔ)設(shè)施面臨著“翻天覆地”的變化。
而這種挑戰(zhàn),也同樣映射到像騰訊云這樣存儲產(chǎn)品供應(yīng)商身上。
如何在面對保證性能不但提升的同時,持續(xù)降低成本,提升服務(wù)質(zhì)量,滿足各行各業(yè)的需求;還能確保數(shù)據(jù)的安全性。
性能方面,騰訊云存儲的產(chǎn)品矩陣就是答案。
騰訊云存儲產(chǎn)品副總經(jīng)理馬文霜,就舉了這次發(fā)布塊存儲的例子。
“塊”的兩個新品,其實是豐富了我們產(chǎn)品的矩陣,一個新品是強調(diào)性能,另外一個新品是強調(diào)的是一個性價比,從一個整體來看,就是性能和性價比更高。
很多入門級的用戶,吞吐型云盤,對在意成本的中小客戶的話,其實是有比較大的幫助。
一個合作伙伴上海電氣風(fēng)電,正是基于騰訊云新一代文件存儲產(chǎn)品Turbo系列,其風(fēng)力發(fā)電仿真計算系統(tǒng)計算速度相比以往提升2倍,TCO(總擁有成本)也降低了40%。
上海電氣風(fēng)電系統(tǒng)與網(wǎng)絡(luò)副主任黃海表示,
方案同時實現(xiàn)更高的效率和更低的價格,正是電氣風(fēng)電選擇騰訊云存儲的最重要原因。
而在安全方面,騰訊云也做了不少功課,以自身設(shè)計+合作的方式來保障數(shù)據(jù)安全。
騰訊云存儲產(chǎn)品副總經(jīng)理陳崢就談到了很多細(xì)節(jié)。
比如,用戶上傳的時候,加密也支持像KMS的加密,客戶端和服務(wù)端的加密,保證客戶的數(shù)據(jù)是脫敏的,傳到客戶上來。
分布式存儲體系里會去做一些分塊和分片,存儲在不同的服務(wù)器上。
還有一些針對服務(wù)器的舉措,過保之后磁盤壞掉也會做一個消磁。
另外,就是跟合作伙伴鼎甲,打造了一體化混合云備份方案,在用戶安全方面提高到了更高等級。
騰訊云副總裁劉穎表示,
安全可靠、性能、成本仍然會是存儲產(chǎn)品的基石,這也將是騰訊云存儲始終精進(jìn)的技術(shù)方向。
其實,不只是騰訊云,也是更多云存儲服務(wù)商需要一以貫之的技術(shù)理念,未來也正如騰訊云的愿景一樣:
向著無縫上云、智能化、場景化三個方向發(fā)展。
云存儲,已經(jīng)在以生產(chǎn)力工具的姿態(tài),穿梭于各行各業(yè)之間。