世界上最大的AI大模型：馬斯克的Grok-1正式開源

馬斯克是真男人啊，不僅SpaceX發射基地可以隨意參觀、連設計圖紙都公開了。SpaceX剛剛發射完沒幾天，連他的AI大模型Grok-1也正式開源了，文章結尾有下載地址。

Grok-1是當前世界上參數最大的、開源大語言模型。296GB的大小，3140億參數，遠超OpenAI GPT-3.5的1750億。基礎模型基于大量文本數據進行訓練，沒有針對任何具體任務進行微調;3140億參數的MoE模型，在給定token上的激活權重為25%;2023年10月，xAI使用JAX庫和Rust語言組成的自定義訓練堆棧從頭開始訓練。

開源就是開放源代碼，說白了就是開放專利，公開技術!但需要有足夠的GPU才能運行。可能需要一臺擁有628GB GPU內存的機器。英偉達Tesla A100 80G(原版PCIE)京東售價16萬，平民玩家根本玩不起，僅8塊GPU就接近百萬。其他硬件配置就更不用說了。

前幾年馬斯克公布了特斯拉的多項專利，中國的新能源汽車如雨后春筍迅猛發展。這次會有什么會爆炸式發展呢?

預計全球Ai企業將迎來快速發展，馬斯克開源Grok—1,將會同時造福中國Ai企業，助力中國Ai技術發展!

馬斯克之前說過：科技創新才是推動人類進步的關鍵，而專利保護只會阻礙這個進程。他希望通過公開這些專利設計，鼓勵更多人加入科技創新行列，共同推動人類社會進步。

國外地址：

GitHub - xai-org/grok-1: Grok open release

國內地址：

grok-1: synchronize from: https://github.com/xai-org/grok-1