Meta 承諾,下一代強大人工智能芯片將更加強大
他們的目標是最終擴大芯片的功能,開始訓練生成式人工智能
最近更新時間 2024-04-11 10:08:54
Meta 承諾其下一代定製人工智能芯片將更加強大,能夠更快地訓練排名模型。這些芯片旨在與 Meta 的排名和推薦模型配合使用,提高訓練效率並簡化推理任務。Meta 表示,MTIA 是其長期計劃中關於如何在服務中使用人工智能構建基礎設施的重要組成部分。
在一篇博文中,Meta 表示:“實現我們對定製芯片的雄心意味著不僅要投資於計算芯片,還要投資於內存帶寬、網絡和容量以及其他下一代硬件系統。”他們於 2023 年 5 月發佈了 MTIA v1,主要面向數據中心提供這些芯片,而下一代芯片也可能會針對數據中心。儘管 MTIA v1 預計要到 2025 年才會發佈,但 Meta 表示這兩款芯片目前都已投入生產。
目前,MTIA 主要用於訓練排名和推薦算法,不過 Meta 表示,他們的目標是最終擴大芯片的功能,開始訓練生成式人工智能,比如他們的 Llama 語言模型。
新的 MTIA 芯片“從根本上側重於提供計算、內存帶寬和內存容量的適當平衡”。這款芯片將擁有 256MB 的片上內存和 1.3GHz 的主頻,而 v1 芯片只有 128MB 和 800GHz。早期測試結果顯示,在四種型號中,新芯片的性能比第一代高出三倍。
Meta 公司已經有一段時間在開發 MTIA v2,該項目在內部被稱為 Artemis,之前有報道稱其專注於推理任務。其他人工智能公司也在研究製造自己的芯片,如谷歌的新 TPU 芯片、微軟的 Maia 100 芯片和亞馬遜的 Trainium 2 芯片。這些競爭表明了擁有定製芯片來運行人工智能模型的重要性。
隨著對計算能力的需求增長,目前在人工智能芯片市場占主導地位的英偉達(Nvidia)估值已達 2 萬億美元。這些信息凸顯了購買功能強大芯片的競爭,以及對芯片需求的迅速增長。