特斯拉 Dojo 2 芯片正「魔改」以適應(yīng) AI 訓(xùn)練 xAI 公司將采用推特的公開推文訓(xùn)練
站長之家(ChinaZ.com) 7月17日消息:埃隆·馬斯克（Elon Musk）上周三宣布推出一家新的人工智能公司，名為xAI，旨在「了解宇宙的真實(shí)本質(zhì)」。
xAI 團(tuán)隊(duì)成員來自 DeepMind、OpenAI、Google Research、微軟研究院、Twitter 和特斯拉等公司，他們曾參與過 DeepMind 的 AlphaCode 和 OpenAI 的 GPT-3.5 和 GPT-4 聊天機(jī)器人等項(xiàng)目。馬斯克似乎將 xAI 定位為與 OpenAI、谷歌和 Anthropic 等公司競爭，這些公司背后的聊天機(jī)器人（如 ChatGPT、Bard 和Claude）處于領(lǐng)先地位。
xAI 的聯(lián)合創(chuàng)始人 Greg Yang 表示，該初創(chuàng)公司將深入研究人工智能中的「深度學(xué)習(xí)數(shù)學(xué)」，并「為大型神經(jīng)網(wǎng)絡(luò)開發(fā)『萬有理論』」，將人工智能推向「下一個水平」。
馬斯克在 Twitter Space 上的 xAI 討論會上表示，新成立的人工智能公司 xAI 將采用來自推特的公開推文訓(xùn)練。據(jù)悉，包括 OpenAI 聯(lián)合創(chuàng)始人 Greg Brockman、推特前 CEO Jack Dorsey 也作為觀眾收聽了此次直播。
馬斯克表示，人類創(chuàng)造的數(shù)據(jù)總有一天會用完，因此人工智能最終將生成內(nèi)容并訪問。另外，xAI 還將在開發(fā)人工智能軟件等多方面與特斯拉合作。
對于芯片的使用，馬斯克確認(rèn) xAI 團(tuán)隊(duì)已經(jīng)實(shí)現(xiàn)「人均 GPU」（gpu per person），也就是集齊了 2 萬張英偉達(dá) A100 加速卡。但問及特斯拉，他認(rèn)為更多是定制制造計(jì)算芯片，而不是 GPU（圖形處理器）。
「我不會把特斯拉生產(chǎn)的任何東西稱為 GPU，盡管我們可以用 GPU 等效或 100s 或 H100 等效來描述它。所有的特斯拉汽車都有高度能源優(yōu)化的推理計(jì)算機(jī)，我們稱之為 Hardware 3.0。」
馬斯克表示，特斯拉 Dojo 2 芯片正在采取很多措施來緩解內(nèi)存帶寬限制，使其能夠高效地運(yùn)行 LLM 以及其他形式的人工智能訓(xùn)練。他在思考芯片短缺、電力短缺是否未來幾年還會出現(xiàn)，因此希望用太陽能量完成更多有用的工作。
他認(rèn)為，最終只有一家在 AI 領(lǐng)域占據(jù)主導(dǎo)地位，因此一定會有競爭，而 xAI 和 OpenAI 絕對是競爭對手關(guān)系。
他還批評 OpenAI 現(xiàn)在其實(shí)是閉源的，稱他們貪圖利潤，他理解 OpenAI 是三年要達(dá)到 1000 億美元。而相比于谷歌、微軟，xAI 公司沒有上市、沒有公開交易，因此公司發(fā)展將更為靈活，不受市場激勵或非市場激勵的影響。
不過，馬斯克并沒有透露更多產(chǎn)品路線圖信息。
