當前位置: 妍妍網 > 碼農

抖音伺服器頻寬有多大,才能供上億人同時刷?

2024-03-11碼農

來源:互聯網

大家好,這裏是頂尖架構師棧!點選上方關註, 添加 星標 」, 一起學習大廠前沿架構!

最近看到一個有意思的提問:抖音伺服器頻寬有多大,為什麽能夠供那麽多人同時刷?今天來給大家科普一下。

圖片來自 Pexels

抖音,百度,阿裏雲,騰訊都是自建的數據中心,都是 T 級別出口頻寬(總出口頻寬),也就是達到 1T=1024G/s 的出口頻寬,伺服器總署基本都在 20 萬台以上,甚至阿裏雲都超過了 100 萬台。

字節跳動的數據中心總頻寬,可能在 10TB 級別左右,預期突破 15TB 級別不遠了。

一般情況下:總出口頻寬 1TB,實際機房出口頻寬可能只有 100G 上下,這是采用雙(多)鏈路設計,雙出口實作動態流量分擔,總的出口頻寬可以達到 T 級別。

大型數據中心

想要同一時間有數億人線上,TB 級別頻寬,CDN 加速和多節點,負載均衡等等技術缺一不可。(這個設計技術過於復雜,有相關專業朋友,可以評論簡要概述)

CDN 加速

字節跳動有多少台伺服器?

根據網路數據整理,2017 年 2-3 萬台伺服器,這個時候主要是租用伺服器為主。

2018 年,字節跳動自己建設了數據中心,最大的數據中心在河北懷來官廳湖新媒體產業園,一期 5 萬台伺服器,二期 9 萬台伺服器。

2018 年,租用+自建的伺服器數量達到 17 萬台伺服器。

2020 年,根據字節跳動招聘公告的數據,顯示有 42 萬台伺服器。比 2018 年增長了 1.5 倍。(數據來自網路)

一個機櫃中 10-20 台伺服器

這部份伺服器都是給中國區域使用,主要套用國內的抖音,西瓜視訊,今日頭條,飛書等產品。

在美國的 TIKTOK 是獨立出來的營運,數據在美國當地儲存和分發。2020 年 Tiktok 在美國也租用了近 10 萬台伺服器

據 Business Insider 公布數據,2020 年上半年,字節跳動在美國維吉尼亞州北部租用了能耗達 53 百萬瓦的數據中心。可以容納數十萬台伺服器,占地面積可達數十萬平方英尺。

Tiktok在印度,新加坡都在投資建設數據中心。

字節跳動大型的數據中心出口頻寬是多少?

聊完了伺服器數量,那麽咱們來點硬核的東西:字節跳動大型的數據中心出口頻寬是多少?

知識點:所謂的出口頻寬,其實就是咱們普通人所說的下載頻寬。就是伺服器給每一個手機分發數據總速度。

一般情況下,小型的 IDC 公司自建機房,比如一些網站公司,租用聯通,移動,電信的機房,可能總體出口頻寬只有 5G。超過 30G 那都是具備一定規模的企業。網路公司營收少說也是幾千萬的企業。

所以,經常能夠看到,一些規模還不錯的企業,基本上都不再自建機房,都是使用雲主機。例如阿裏雲的 ECS,騰訊雲,百度雲,AWS(亞馬遜)。

一般一個企業網站(企業官網),20M 頻寬,4G 記憶體,100G 硬碟,一年價格也就 4000-5000 塊錢就足夠了,趕上做活動價格可能更便宜。

這裏面就是頻寬最貴,當然增加頻寬,達到一定等級,例如存取量增大,必須要增加記憶體和硬碟。

相比來說,頻寬增加的話,費用更貴一些。這裏就跟你說明一下:頻寬比較昂貴,屬於稀缺資源。

我們來看中國移動的一個機房,中國移動(河北石家莊)數據中心的數據:占地面積 174 畝,總建築面積 13 萬平方米,規劃 10 棟單體建築,全部建成後可提供約 3 萬個機架的裝機能力。

3 個 IDC 機房共可提供 3.1 萬架機櫃,15T 頻寬資源。一個機櫃,全 1U 裝置部署數量一般不超過 16 台,全 2U 裝置一般不超過 12 台,全 4U 裝置一般 4 到 7 台。

我們取高效能的 2U 和 4U 伺服器進行平均折中,各算一半(畢竟移動也算是有錢的大戶,不能買低端的 1U 裝置)。

那麽 3.1 萬架機櫃就可以安裝,最多 21-36 萬台伺服器。這裏粗略取一個平均值:30 萬台伺服器。

享受 15T 的出口頻寬資源。當然作為電信的幹路網,移動拿頻寬資源肯定是要比字節跳動更有優勢的。

所以,我們粗略地估計字節跳動自建的 17 萬台伺服器的數據中心。總出口頻寬可能在 7Tb-10TB 上下。

基本上肯定會采用雙出口流量設計,再加上多鏈路的部署方式:可以做到實際出口頻寬在 800G-1TG 就可以實作 10T 左右的總出口頻寬。【這是技術方式】

字節跳動 2018 年河北懷化數據中心

T 級別出口頻寬是什麽概念,如果我告訴你 2009 年,整個上海的出口頻寬才 1140G,也就是剛剛達到 1TB。

在短短的 10 年後,一個企業的數據中心的出口頻寬就超過 1TB,這個速度真的不可想象。

要知道 2009 年,雖然智慧型手機不發達,但是個人 PC 銷量已經非常龐大了。

CDN 加速,讓大眾刷抖音,看視訊都不再卡。

知識點:CDN(Content Delivery Network,內容分發網路)。

將伺服端的內容釋出到最接近使用者的邊緣節點,使使用者可以就近取得所需的內容。

解決 Internet 網路擁塞狀況,提高使用者存取網站的響應速度。多種加速的方案集合。

用通俗的話解釋 CDN 就是: 會把一些頁面,專門壓縮,有的壓縮為靜態頁面,靜態頁面直接分發速度快。使用者可以在 2s 內看到內容,體驗感更好。【這是靜態傳輸】

對於動態視訊,首先透過智慧路由,尋找最佳路徑,然後協定最佳化將長連線,內容進行壓縮,去除冗余。【這就是動態壓縮】

給你們看一下 2015 年騰訊 5 億日活,集合了音樂,即時通訊等等產品的 CDN 的級別,達到了 10TB 頻寬。每天請求萬億次。

2015 年騰訊 CDN 的級別

因此,我這裏說字節跳動整體伺服器有 10TB 應該只少不多。畢竟抖音日活有 6 億,西瓜視訊+今日頭條我們粗略算是 2 億,總計有 8 億的日活。

就是這麽大的頻寬和技術實力,才能讓我們看視訊這麽順暢。

·END·

如喜歡本文,請點選右上角,把文章分享到朋友圈

因公眾號更改推播規則,請點「在看」並加「星標」 第一時間獲取精彩技術分享

IT一線從業者抱團群

致力於幫助廣大開發者提供高效合適的工具,讓大家能夠騰出手做更多創造性的工作,也歡迎大家分享自己公司的內推資訊,相互幫助,一起進步!

組建了程式設計師,架構師,IT從業者交流群,以 交流技術 職位內推 行業探討 為主

加大佬 好友 ,備註"加群"