先進的Google技術核心GFS

 

 cmplabs  2007/1/10

 

 

台灣恆春大地震引發的網絡大災難中，只有Google能在短時間內恢復服務，估計與其全球分散儲存系統Google File System〔GFS〕有關。

Google在全球設有17萬台伺服器〔2005年數字〕 採用自行研製的分散式檔案系統Google File System，這是一套能快速穩定及安全的資料儲存系統。

Google中國區總裁李開復說：「Google最厲害的技術是其檔案儲存系統，我認為電腦系的學生都應該看看GFS，Google的搜尋器、Gmail、Video、Blog等都是用這個技術做的。」

以Gmail系統為例，使用GFS，資料被分散至全球多個地方，每個用戶的電郵分三處備份，當一處的資料損毀時，另外兩處的備份則自動補上。數萬台伺服器同時運作，壞了一台，對系統沒有影響，只要換進一台，電腦便會自動取得Linux OS，自動安裝並起機，自動取回失去的資料備份，又變成網絡的一部分了。這種環球分散式檔案系統，才是Google的技術核心。

Google這套由十多萬台電腦組成的集群，每日自動搜尋新網頁、處理電郵、播放影片、提供衛星地圖、搜尋服務，並會自動分析網頁內容，自動刊出相關的文字廣告。在電纜中斷時，其他入門網站只能望天打卦、空等電纜修復，但Google就可轉存資料，自我逐步回復正常，GFS技術先進可見一斑。 ■

相關鏈接

Google GFS的技術論文

維基Google File System

 

查看原文