為實現更強大的人工智能,Facebook 母公司 Meta 昨日宣布,旗下研究團隊已經設計並建造一台名為 AI Research SuperCluster(RSC)的人工智能超級電腦。目前已用於自然語言處理、視覺運算等模型訓練。Meta 強調,RSC 是現今運算最快的超級電腦之一,在今年中期完全組建後,將成為世上最快的超級電腦。
Meta 表示,RSC 在昨日已經啟動並運行,但同時仍在開發中,一旦完成第二階段的構建,預計 RSC 將成為全世界最快的人工智能超級計算機,並預計於今年年中完成組建。Meta 亦指,該超級為研究人員建立「新的、更好的」人工智能模型,可以從「數萬億」的例子中學習,同時跨數百種不同的語言工作,並一起分析文本、圖像和影片,例如為群眾提供不同語言,實時的語音翻譯,這樣便就可以在研究項目上無縫協作。RSC 亦將會協助支援 Meta 未來的 AR 硬件,亦會用以設計元宇宙的體驗,從虛擬辦公室至到網上廣場,把無數虛擬空間組合起來。
RSC 與普遍超級電腦的測量方式不同,因其依賴圖形處理晶片的性能,能夠理解圖像中的內容、分析文本並在語言之間進行翻譯,因此將應用於檢測 Facebook 和 Instagram 上的仇恨言論內容。
RSC 共有 760 個 NVIDIA DGX A100 系統作為其運算節點,總共有 6,080 個 GPU,使得 SRC 的運算效能大增。在 2022 年,研發團隊計劃將 RSC 的 GPU 總數由6080 個增加至 16000 個,可以令人工智能的訓練效果較之前增加 2.5 倍。而根據初期測試顯示,其在進行視覺運算時,工作速度較之前的 AI 運算系統提升 20 倍,運行 NVIDIA NCCL 的速度則提升 9 倍以上,且在訓練大規模的語言模型上則提升三倍,意味著 RSC 可在 3 星期內完成擁有數百億參數的模型,而之前的系統需花費 9 星期的時間。
資料來源:The Verge
—
unwire.hk Mewe 專頁: https://mewe.com/p/unwirehk