• 正文
    • “云渲染”是一種什么體驗?
    •  
    • 云存儲,新的生產力工具
    •  
    • 從QQ空間到存儲生態(tài)
    •  
    • 騰訊云存儲的產品矩陣
  • 相關推薦
申請入駐 產業(yè)圖譜

硬盤大漲價?CG動畫渲染師:云存儲更香了

2021/05/13
194
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點資訊討論

挖礦的現(xiàn)在連硬盤都不放過了。

一塊大容量硬盤漲價超過了100%,做視頻的朋友現(xiàn)在是叫苦不迭。

 

u1s1(有一說一),云存儲現(xiàn)在好像有點性價比那意思了。

這時候一定又有人說,云存儲的讀寫速度拿來剪視頻,真的不是開玩笑嗎?

以前不一定,現(xiàn)在沒準還真的可以。

我發(fā)四,這是我一動畫渲染師朋友告訴我的。

 

“云渲染”是一種什么體驗?

所謂渲染,作為模型到動畫的一個關鍵步驟,需要大量算力來計算。

有這樣一組數(shù)據(jù)。

CG動畫經典《阿麗塔:戰(zhàn)斗天使》,就需要600天、30000臺服務器全天不停歇的渲染,才制成了這部122分鐘的電影。

一個傳統(tǒng)的渲染廠商,首先你得自建一個機房,也就是所謂的“渲染農場”。

大一點的,有5000-10000臺服務器不等。中小規(guī)模也要到1000臺這一數(shù)量上。針對一個企業(yè)來說,一次性投入十分龐大,動輒上千萬。

采購之后,電費、運維成本也都無法忽視。因此有的廠商,選擇在廣西、新疆等這些電費上有補貼政策的區(qū)域來運轉。以及服務器的機型,也會定期迭代淘汰。

除了成本高昂以外,渲染本身還有一定的規(guī)律性。年期以及年初的時候是市場淡季,但在節(jié)假日那段時間,需求就會爆發(fā)性增長。

這時候企業(yè)無法應對如此大的需求,客戶也只能排隊……

如今這兩大痛點,在云上就可以得到解決——云化部署+高性能文件存儲。

我朋友這家企業(yè)——秦渲云就采用了騰訊云turbo(高性能文件存儲)的方法來實現(xiàn)。

云化部署,就可以讓算力得到高效、彈性的使用。

需要多少,就用多少,減少了資源的浪費。與此同時,還具備快速上線的功能。

傳統(tǒng)廠房通常會有一個熱身時間,靠人上去部署,現(xiàn)在在云上就可以完成,運維管理效率提升50%。

高性能文件存儲,海量并發(fā)、低延時、以及大吞吐量的特點。

以吞吐量為例,騰訊云Turbo文件存儲可以提供百GB/s的吞吐量,結合動態(tài)擴展的計算資源,實現(xiàn)隨用隨取,在實際的渲染場景下,渲染效率提升30%。

大概是這樣一個場景:

客戶在平臺上發(fā)任務,將本地的文件上傳到平臺上,企業(yè)根據(jù)客戶的不同場景需求,在云上選擇不同機型。

對于企業(yè)來說,成本就是一個很大的優(yōu)勢。

機器渲染的成本是非常高的,一般來講,一百臺服務器,他渲染一部電影需要一個月的時間。通過云渲染提供資源可以提供一千臺服務器,時間會縮短到十分之一。

講到這里,似乎還不能證明云存儲就是新的生產力工具。

別著急,來康康騰訊云的三個新產品。

 

云存儲,新的生產力工具

說到云存儲,很多人第一反應就是速度慢。至少云存儲和本地存儲是很難無縫銜接的。

如果我把本地資源都上傳到網上,那么云存儲能滿足我的要求嗎?數(shù)據(jù)傳輸延時和讀寫速度能達到多少?

騰訊云的極速型云硬盤打消了用戶的顧慮。

經過對數(shù)據(jù)存儲鏈路上各項技術的優(yōu)化,實現(xiàn)了時延的行業(yè)突破。數(shù)據(jù)顯示,騰訊云極速型云硬盤時延僅有40微秒,是行業(yè)首款實現(xiàn)10微秒級時延的云硬盤產品。

 

另外,騰訊云全新發(fā)布的最新一代文件存儲 Turbo系列,在業(yè)內首次實現(xiàn)了實現(xiàn)了百GB級吞吐的產品化,最高性能可以做到千萬級IOPS和微秒級的時延,高性能業(yè)務讀寫效率提升10倍,達到業(yè)內最高水平。

這樣的性能表現(xiàn),不僅可以滿足云端剪片子這種負載,甚至在大數(shù)據(jù)分析、AI訓練與推理這類高負載應用中,也能更好地發(fā)揮出存儲性能優(yōu)勢。

甚至在數(shù)據(jù)庫場景中,騰訊云的極速云硬盤相比本地NVMe SSD還能提升1.3倍。

針對當前數(shù)據(jù)湖技術演進趨勢,騰訊云推出了業(yè)界首個基于對象存儲的三級加速器,包括數(shù)據(jù)湖加速器GooseFS、元數(shù)據(jù)加速器和AZ加速器。

 

其中,數(shù)據(jù)湖加速器GooseFS可以提升10倍的數(shù)據(jù)IO性能,元數(shù)據(jù)加速器則能夠為大數(shù)據(jù)業(yè)務提供高達10W QPS的元數(shù)據(jù)操作能力,AZ加速器可以為大數(shù)據(jù)業(yè)務提供Tb級別的帶寬和毫秒級的延遲。

 

從QQ空間到存儲生態(tài)

看起來,確實是有點香。

實際上,這三個產品,恰好代表了騰訊云存儲在云硬盤、對象存儲、文件存儲上的三大核心競爭力:

高可靠、低成本、高性能。

涵蓋大數(shù)據(jù)分析、HPC高性能計算、內容分發(fā)、AI訓練與推理、視頻渲染在內的十類方案。

目前,騰訊云存儲規(guī)模已突破10EB,文件數(shù)突破20萬億,服務的客戶超過180萬家。

今年,正好是騰訊云存儲的第十年。

十年之際,他們提出了全新的發(fā)展思路——三維生態(tài)戰(zhàn)略。

哪三維?

技術生態(tài)、開源生態(tài)、商業(yè)生態(tài)。

從這三個維度出發(fā),聯(lián)合上下游的合作伙伴,為各行各業(yè)數(shù)字化轉型加速。

拆開來看,技術生態(tài)方面,騰訊云聯(lián)合技術伙伴,朝著軟硬件相結合的方向深耕。

比如,聯(lián)合Intel打造極速型云盤方案,在時延、IOPS等關鍵指標上實現(xiàn)行業(yè)第一。

開源,也是騰訊云看中的生態(tài)建設之路。

騰訊云積極連接開源應用、業(yè)界主流開源軟件,如Spark、Presto、Tensorflow、Hive、Flink等大數(shù)據(jù)分析引擎、開源計算框架和組件,為客戶提供基于開源理念的開放型數(shù)據(jù)存儲方案。

商業(yè)生態(tài)就不必說了,也就是充分利用騰訊自身的商業(yè)價值優(yōu)勢。

 

如此看重生態(tài)的價值,但不為大多數(shù)人所知的是,當年騰訊云存儲的起點,是在自身業(yè)務場景——

QQ空間。

當時大量用戶涌入QQ空間,上傳海量的照片、文件,這給騰訊的存儲帶來了很大的考驗。若不及時解決,造成的直接后果就是,開啟速度越來越慢、用戶體驗也就越來越差。

爆款產品,就將不再“爆款”。

 

為了應對QQ空間云相冊的海量數(shù)據(jù)存儲,存儲技術團隊就此成立,一年之后自研了一套底層的存儲引擎TFS。

此后,包括整個QQ、騰訊視頻,都落入到TFS中去。2010年,騰訊開放平臺接入首批應用。

2012年,隨著騰訊在存儲系統(tǒng)的不斷成熟,以及外部的云計算趨勢,騰訊云存儲業(yè)務開始面向外部開放。

2015年,存儲規(guī)模突破EB級。

2019年,整個存儲引擎進行一次大升級,新一代自研百EB級對象存儲專用引擎YottaStore上線,同年客戶數(shù)突破了100萬。

2020年,云硬盤IOPS業(yè)界首個突破110萬。

十年后的騰訊云,已經跟生態(tài)里的合作伙伴保持著密不可分的關系。

比如,結合金山的文檔優(yōu)勢,面向在線協(xié)同辦公業(yè)務系統(tǒng),打造了在線實時文檔預覽方案;

與IBM共同打造了面向數(shù)據(jù)湖、自動駕駛機器學習、基因計算等高性能計算業(yè)務系統(tǒng),提供了一體化高性能并行存儲方案。

 

騰訊云存儲的產品矩陣

除了生態(tài),數(shù)字經濟時代下的存儲,還要關注性能與安全。

隨著各個企業(yè)數(shù)字化轉型的提速,數(shù)據(jù)呈現(xiàn)出爆發(fā)式增長,并正在成為企業(yè)的核心資產,企業(yè)的存儲基礎設施面臨著“翻天覆地”的變化。

而這種挑戰(zhàn),也同樣映射到像騰訊云這樣存儲產品供應商身上。

如何在面對保證性能不但提升的同時,持續(xù)降低成本,提升服務質量,滿足各行各業(yè)的需求;還能確保數(shù)據(jù)的安全性。

性能方面,騰訊云存儲的產品矩陣就是答案。

騰訊云存儲產品副總經理馬文霜,就舉了這次發(fā)布塊存儲的例子。

“塊”的兩個新品,其實是豐富了我們產品的矩陣,一個新品是強調性能,另外一個新品是強調的是一個性價比,從一個整體來看,就是性能和性價比更高。

很多入門級的用戶,吞吐型云盤,對在意成本的中小客戶的話,其實是有比較大的幫助。

一個合作伙伴上海電氣風電,正是基于騰訊云新一代文件存儲產品Turbo系列,其風力發(fā)電仿真計算系統(tǒng)計算速度相比以往提升2倍,TCO(總擁有成本)也降低了40%。

上海電氣風電系統(tǒng)與網絡副主任黃海表示,

方案同時實現(xiàn)更高的效率和更低的價格,正是電氣風電選擇騰訊云存儲的最重要原因。

而在安全方面,騰訊云也做了不少功課,以自身設計+合作的方式來保障數(shù)據(jù)安全

騰訊云存儲產品副總經理陳崢就談到了很多細節(jié)。

比如,用戶上傳的時候,加密也支持像KMS的加密,客戶端和服務端的加密,保證客戶的數(shù)據(jù)是脫敏的,傳到客戶上來。

分布式存儲體系里會去做一些分塊和分片,存儲在不同的服務器上。

還有一些針對服務器的舉措,過保之后磁盤壞掉也會做一個消磁。

另外,就是跟合作伙伴鼎甲,打造了一體化混合云備份方案,在用戶安全方面提高到了更高等級。

騰訊云副總裁劉穎表示,

安全可靠、性能、成本仍然會是存儲產品的基石,這也將是騰訊云存儲始終精進的技術方向。

其實,不只是騰訊云,也是更多云存儲服務商需要一以貫之的技術理念,未來也正如騰訊云的愿景一樣:

向著無縫上云、智能化、場景化三個方向發(fā)展。

云存儲,已經在以生產力工具的姿態(tài),穿梭于各行各業(yè)之間。

騰訊

騰訊

騰訊于1998年11月成立,是一家互聯(lián)網公司,通過技術豐富互聯(lián)網用戶的生活,助力企業(yè)數(shù)字化升級。我們的使命是“用戶為本 科技向善”。Founded in 1998, Tencent is an Internet-based platform company using technology to enrich the lives of Internet users and assist the digital upgrade of enterprises. Our mission is "Value for Users, Tech for Good".

騰訊于1998年11月成立,是一家互聯(lián)網公司,通過技術豐富互聯(lián)網用戶的生活,助力企業(yè)數(shù)字化升級。我們的使命是“用戶為本 科技向善”。Founded in 1998, Tencent is an Internet-based platform company using technology to enrich the lives of Internet users and assist the digital upgrade of enterprises. Our mission is "Value for Users, Tech for Good".收起

查看更多

相關推薦