魚(yú)羊起源于奧飛寺
量子位報(bào)告|公眾號(hào)
“現(xiàn)在不限速,以后也不限速。”
“不管你是不是會(huì)員,都不會(huì)限速。”
這樣一種“破壞和諧”的聲音,來(lái)自于阿里網(wǎng)盤(pán)。
內(nèi)測(cè)剛剛開(kāi)始,有用戶實(shí)測(cè)5G下傳輸速率可以跑50-100MB/s。
內(nèi)測(cè)期間,免費(fèi)存儲(chǔ)空間也相當(dāng)可觀——用戶最多可獲得2TB的免費(fèi)存儲(chǔ)空間。
國(guó)外用戶長(zhǎng)期以來(lái)一直飽受云盤(pán)限速之苦,但說(shuō)實(shí)話什么是物理帶寬,云盤(pán)的存儲(chǔ)和帶寬成本實(shí)在是承受不起。
阿里就這樣舉起了“速度不限”的大旗。 是不是開(kāi)放市場(chǎng)的權(quán)宜之計(jì)?
真的可靠嗎?
為什么阿里網(wǎng)盤(pán)指出不限速
自然,從網(wǎng)盤(pán)用戶的角度來(lái)看,上傳下載的流暢度是目前一大核心痛點(diǎn)。
過(guò)去的產(chǎn)品方并沒(méi)有意識(shí)到這一點(diǎn),而是在經(jīng)過(guò)十多年的市場(chǎng)探索后選擇了妥協(xié):作為商業(yè)產(chǎn)品,無(wú)論如何,帶寬和存儲(chǔ)的巨大成本都擺在那里。
正如阿里網(wǎng)盤(pán)團(tuán)隊(duì)所說(shuō),我們尊重過(guò)去的市場(chǎng)探索,但要走一條新的路。
想要堅(jiān)持不限速,資源的投入肯定是少不了的。
那么,阿里網(wǎng)盤(pán)為什么要點(diǎn)出“不限速”呢?
阿里巴巴網(wǎng)盤(pán)產(chǎn)品負(fù)責(zé)人祁俊元給出的答案是:
只做傳統(tǒng)云盤(pán)的單一機(jī)型很難開(kāi)發(fā)。
祁俊元直言,如果只按照傳統(tǒng)云盤(pán)的商業(yè)模式運(yùn)營(yíng),“實(shí)在是太貴了”。
如何另辟蹊徑? 公測(cè)階段用戶的反饋驗(yàn)證了阿里網(wǎng)盤(pán)團(tuán)隊(duì)的愿景:在保證最基本的不限速用戶體驗(yàn)后,更多的玩法出現(xiàn)了。
阿里巴巴網(wǎng)盤(pán)團(tuán)隊(duì)名為“你的數(shù)字世界”。 無(wú)法證明的是,此時(shí)此刻,化學(xué)世界和數(shù)字世界正在越來(lái)越深入地融合。
隨著數(shù)字化變革的不斷變革,越來(lái)越多的數(shù)據(jù)被存儲(chǔ)在云端,越來(lái)越多的用戶行為也會(huì)發(fā)生在云端。
就像明天一樣,你似乎習(xí)慣于使用在線協(xié)作文檔而不是 word 進(jìn)行文本編輯,所以如果數(shù)字內(nèi)容觸手可及,沒(méi)有長(zhǎng)時(shí)間上傳和下載等待的折磨,基于云的圖像和視頻協(xié)同創(chuàng)作也將成為常態(tài)?
這有悖于以限速為中心的商業(yè)模式。
事實(shí)上,人類(lèi)歷史上存儲(chǔ)信息的媒介仍在不斷變化,而變化的目的多半是為了更快的共享和使用。
使用分布式存儲(chǔ),但傳輸是撥號(hào)網(wǎng)絡(luò)的速度——起點(diǎn)似乎不對(duì),市場(chǎng)發(fā)展停滯不前。
從這個(gè)角度來(lái)看,不限速可以說(shuō)是進(jìn)入數(shù)字世界的入場(chǎng)券,并在其中創(chuàng)造了更多的可能性。
這也是為什么在公測(cè)階段,阿里網(wǎng)盤(pán)率先推出了可以一鍵同步圖片的相冊(cè)功能。 齊俊元還進(jìn)一步透露,下一步將不僅推出基于文本的協(xié)作模塊。
未來(lái)五年,我們將這樣看待網(wǎng)盤(pán)的衰落:
第一,我們認(rèn)為用戶會(huì)真正投入內(nèi)容,可能是別人分享的,也可能是自己創(chuàng)作的。 而且我們認(rèn)為會(huì)有更多的創(chuàng)作元素。
第二,我們認(rèn)為網(wǎng)盤(pán)將從個(gè)人消費(fèi)走向多人消費(fèi)場(chǎng)景,比如家庭、工作場(chǎng)景。
其實(shí),從阿里網(wǎng)盤(pán)主要開(kāi)發(fā)成員的構(gòu)成,我們也可以窺見(jiàn)未來(lái)個(gè)人云的布局:不僅是智能存儲(chǔ),還有聯(lián)通協(xié)同、云網(wǎng)、視覺(jué)智能……
數(shù)字資產(chǎn)的存儲(chǔ)和傳輸只是阿里巴巴網(wǎng)盤(pán)乃至“個(gè)人云”的第一步。
不限速不靠譜的阿里網(wǎng)盤(pán)
意見(jiàn)是這樣的,那么從技術(shù)層面來(lái)說(shuō),阿里網(wǎng)盤(pán)能做出什么保證來(lái)證明它的可持續(xù)性呢?
(雖然沒(méi)人想在內(nèi)測(cè)結(jié)束后開(kāi)始遷移數(shù)據(jù)~)
和往常一樣,讓我們??來(lái)看看產(chǎn)品背后的這些東西。
行業(yè)領(lǐng)先的對(duì)象存儲(chǔ)
簡(jiǎn)單來(lái)說(shuō),用戶存儲(chǔ)在阿里網(wǎng)盤(pán)的數(shù)據(jù),會(huì)經(jīng)過(guò)哈希函數(shù)打散,分布到阿里云對(duì)象存儲(chǔ)(OSS)和表存儲(chǔ)(OTS)中。
下載時(shí),通過(guò)5層數(shù)據(jù)一致性校準(zhǔn)和就近多地存儲(chǔ)能力,可以快速合成。
而這個(gè)阿里云對(duì)象存儲(chǔ)技術(shù)值得細(xì)說(shuō)。
根據(jù)《阿里云??存儲(chǔ)藍(lán)皮書(shū)》,基于分布式存儲(chǔ)文件系統(tǒng)盤(pán)古,阿里云的對(duì)象存儲(chǔ)還可以提供99.%(12個(gè)9)的數(shù)據(jù)可靠性和99.995%的可用性SLA。
這個(gè)數(shù)據(jù)已經(jīng)超過(guò)了云服務(wù)領(lǐng)域老大AWS的11個(gè)9。
△來(lái)源:云棲社區(qū)
怎么做? 以多重冗余架構(gòu)設(shè)計(jì)為例:
OSS中存儲(chǔ)的每個(gè)文件每5MB部分進(jìn)行分片,分別存儲(chǔ)在數(shù)據(jù)中心的不同c盤(pán)中,以降低硬件故障導(dǎo)致數(shù)據(jù)丟失的概率,防止數(shù)據(jù)泄露風(fēng)險(xiǎn)。
值得一提的是,盤(pán)古系統(tǒng)采用了糾刪碼技術(shù)()。
簡(jiǎn)單理解,為了保證數(shù)據(jù)的可靠性,原本需要三份備份,這顯然對(duì)網(wǎng)絡(luò)和c盤(pán)空間造成了沉重的負(fù)擔(dān),同時(shí)在維護(hù)副本間數(shù)據(jù)一致性時(shí)也會(huì)造成較大的資源消耗。
使用冗余糾刪碼算法,如Reed,假設(shè)原始數(shù)據(jù)為8個(gè)大小相同的數(shù)據(jù)塊,通過(guò)編碼生成4個(gè)冗余塊。 只要整體數(shù)據(jù)丟失不超過(guò)4個(gè)block,就可以恢復(fù)所有數(shù)據(jù)。 . 也就是說(shuō),只需要150%的存儲(chǔ)空間,4個(gè)c盤(pán)就可??以容忍死掉了。
這樣,在保證可靠性的同時(shí),可以大大減少所需的存儲(chǔ)空間。
此外,據(jù)阿里云智能存儲(chǔ)產(chǎn)品經(jīng)理余家偉介紹,阿里云OSS提供的存儲(chǔ)是分層的,可以分為標(biāo)準(zhǔn)存儲(chǔ)、低頻存儲(chǔ)和歸檔存儲(chǔ)。
其實(shí)很多歸檔數(shù)據(jù)在很長(zhǎng)時(shí)間內(nèi)都不會(huì)被調(diào)用,所以可以放在最底層的冷備份之前。 對(duì)于這樣的數(shù)據(jù),存儲(chǔ)的大部分成本來(lái)自電費(fèi)。
對(duì)此,阿里云自主設(shè)計(jì)了瓦片式萊州C盤(pán)柜,結(jié)合智能開(kāi)關(guān)機(jī)算法,平衡存儲(chǔ)性能和煤耗,進(jìn)一步降低成本。
云、邊、端同步做大,力求“極速”
說(shuō)完在保證穩(wěn)定可靠的前提下增加存儲(chǔ)成本的技術(shù)思路,我們還是回到“速度”本身。
“不限速”的潛臺(tái)詞其實(shí)就是跑多快就跑多快。
為了在技術(shù)上實(shí)現(xiàn)快速傳輸什么是物理帶寬,接入過(guò)程分為端(如手機(jī)端)、云端(數(shù)據(jù)中心)和中間傳輸網(wǎng)絡(luò)三部分。
那么阿里云在這三點(diǎn)上有什么樣的技術(shù)積累呢?
在傳輸網(wǎng)絡(luò)方面,阿里巴巴自身?yè)碛袊?guó)外最大的CDN內(nèi)容分發(fā)網(wǎng)絡(luò),以及全球加速的虛擬云網(wǎng)絡(luò)——阿里云擁有21個(gè)區(qū)域、63個(gè)可用區(qū)、120多個(gè)POP點(diǎn)、2800多個(gè)Edge節(jié)點(diǎn)提供全球網(wǎng)絡(luò)服務(wù)。
阿里云盤(pán)可以集成阿里云VPC、全球加速、未來(lái)5G邊緣節(jié)點(diǎn)優(yōu)化等一系列特性。
用戶大量分享的內(nèi)容將智能存儲(chǔ)在最近的內(nèi)容分發(fā)網(wǎng)絡(luò)(CDN)節(jié)點(diǎn)中。
在服務(wù)器端,阿里云存儲(chǔ)在混合存儲(chǔ)和QoS能力的項(xiàng)目上積累了很多經(jīng)驗(yàn):可以保證數(shù)據(jù)存儲(chǔ)和讀取訪問(wèn)的低延遲,以及訪問(wèn)延遲的穩(wěn)定性。 同時(shí),可以復(fù)用阿里云公有云的大規(guī)模能力,在高并發(fā)、海量數(shù)據(jù)訪問(wèn)的情況下提供穩(wěn)定的服務(wù)能力。
借助阿里云多區(qū)域部署和分布式機(jī)房架構(gòu)的優(yōu)勢(shì),阿里網(wǎng)盤(pán)可以就近存儲(chǔ)數(shù)據(jù),縮短用戶與數(shù)據(jù)存儲(chǔ)中心的距離,縮短數(shù)據(jù)傳輸時(shí)延。
此外,對(duì)于圖片、視頻等數(shù)據(jù),阿里網(wǎng)盤(pán)優(yōu)化了轉(zhuǎn)碼能力,通過(guò)FPGA服務(wù)器進(jìn)行編解碼。 在不增加圖像質(zhì)量的情況下,可以提高圖像的壓縮率,從而減少數(shù)據(jù)傳輸量,減少帶寬,也減少傳輸時(shí)間。
最后,在手機(jī)端,阿里網(wǎng)盤(pán)通過(guò)分片傳輸、斷點(diǎn)續(xù)傳等方式提高傳輸效率,降低傳輸時(shí)延。 例如,通過(guò)將照片進(jìn)一步切分,可以加速更多相鄰的數(shù)據(jù)。
同時(shí)在本地優(yōu)化緩存,讓用戶體驗(yàn)更加“極速”。
據(jù)媒體報(bào)道,在公測(cè)中,部分用戶在5G條件下下載時(shí)可以跑滿1Gbps帶寬。
事實(shí)上,雖然阿里巴巴網(wǎng)盤(pán)的內(nèi)測(cè)才剛剛開(kāi)始,但其背后的技術(shù)基礎(chǔ)早已在實(shí)戰(zhàn)中得到檢驗(yàn)。
不僅在內(nèi)部,阿里云的智能存儲(chǔ)技術(shù)體系已廣泛應(yīng)用于生物基因、自動(dòng)駕駛、天文觀測(cè)、智能交互等大數(shù)據(jù)存儲(chǔ)前沿領(lǐng)域。
例如,基因數(shù)據(jù)分析需要每晚產(chǎn)生數(shù)百TB的數(shù)據(jù),需要TB級(jí)的數(shù)據(jù)處理能力。
在傳統(tǒng)的估計(jì)方法下,需要3-5天的時(shí)間才能輸出一個(gè)人的基因分析結(jié)果。
而引入基于阿里云平臺(tái)設(shè)計(jì)的云平臺(tái)架構(gòu),包括估算資源彈性伸縮、多級(jí)存儲(chǔ)、海量存儲(chǔ)估算、數(shù)據(jù)安全等,可以在22小時(shí)內(nèi)完成100人的基因組分析。 .
中國(guó)天眼 (FAST) 也使用阿里云的存儲(chǔ)服務(wù)。
在射電望遠(yuǎn)鏡的應(yīng)用場(chǎng)景中,每晚都會(huì)產(chǎn)生極其大量的數(shù)據(jù),需要實(shí)時(shí)處理。 更大的困難在于,射電望遠(yuǎn)鏡地處偏遠(yuǎn),受地域限制,無(wú)法就地建設(shè)數(shù)據(jù)中心。
因此,阿里云提供了專(zhuān)線架構(gòu)服務(wù)來(lái)保證其帶寬。 同時(shí),通過(guò)集成帶寬技術(shù)和TBS處理能力,為FAST實(shí)現(xiàn)了端到端的估計(jì)和存儲(chǔ)解決方案。
說(shuō)了這么多,看來(lái)阿里網(wǎng)盤(pán)有“純不限速”的魄力,在技術(shù)層面也是相當(dāng)有魄力。
阿里網(wǎng)盤(pán)模式的通過(guò),無(wú)疑將為個(gè)人云的發(fā)展開(kāi)辟一條新的道路,為基于云的數(shù)字生態(tài)拓展toC的可能性。
而這樣的發(fā)展規(guī)劃,也指向了一個(gè)真正的數(shù)字時(shí)代,不再受數(shù)據(jù)存儲(chǔ)和傳輸?shù)南拗啤?span style="display:none">mqL物理好資源網(wǎng)(原物理ok網(wǎng))
這也是齊俊元說(shuō)的原因:“過(guò)去,這個(gè)行業(yè)有很多陷阱,但我們很高興能做這件事。”
目前,阿里網(wǎng)盤(pán)在2.0.5版本中,對(duì)相冊(cè)手動(dòng)備份、文件保險(xiǎn)箱、影音播放等功能進(jìn)行了優(yōu)化升級(jí),分享功能也正式開(kāi)放。
內(nèi)測(cè)第一步已經(jīng)邁出,你看好嗎?