OpenAI官宣將發(fā)布自GPT-2以來的首個開放權(quán)重語言模型,并具有推理功能快訊
我們計劃發(fā)布自 GPT-2 以來的首個開放權(quán)重語言模型,開放權(quán)重模型是不同的,鑒于我們知道這個模型將在發(fā)布后進行修改。
4 月 1 日消息,OpenAI CEO 薩姆?奧爾特曼今日官宣,將在未來幾個月發(fā)布一個“強大的新開放權(quán)重語言模型”,并具有推理功能。
我們計劃發(fā)布自 GPT-2 以來的首個開放權(quán)重語言模型。
我們考慮這件事已經(jīng)很久了,但其他優(yōu)先事項占了上風(fēng)。現(xiàn)在感覺做這件事很重要。
發(fā)布前,我們將根據(jù)準(zhǔn)備的框架評估這個模型,就像我們會對任何其他模型做的那樣。鑒于我們知道這個模型將在發(fā)布后進行修改,因此還會做額外的工作。
我們還有一些決定要做,所以將舉辦開發(fā)者活動來收集反饋,并在之后嘗試早期原型。我們將在幾周內(nèi)在舊金山開始(舉辦開發(fā)者活動),隨后在歐洲和亞太地區(qū)舉行會議。
我們很期待看到開發(fā)者們將如何構(gòu)建,以及大型公司和政府如何使用它,在他們更愿意自己運行模型的地方。
到目前為止,用戶只能通過 OpenAI 的界面或?qū)⑵?API 密鑰集成到他們的應(yīng)用中來使用其模型,這意味著模型本身保持秘密和專有。
然而,開放權(quán)重模型是不同的。這些模型中預(yù)訓(xùn)練的參數(shù)(定義模型如何響應(yīng)的“權(quán)重”)是向公眾公開共享的。開發(fā)人員和研究人員可以下載它們,在本地運行它們,針對特定用例進行微調(diào),或?qū)⑺鼈儾迦氲阶远x應(yīng)用中。僅僅因為權(quán)重是開放的并不意味著就是開源的,訓(xùn)練代碼、數(shù)據(jù)集和詳細(xì)日志可能仍然保持專有或未公開,因此可能并不是完全的開源。
Meta 和 Mistral 等公司已經(jīng)發(fā)布了 Llama 和 Mixtral 等強大模型,而 DeepSeek、阿里巴巴和百川等新玩家也在推出可以與其匹敵的開源模型。從學(xué)術(shù)研究人員到獨立開發(fā)者,許多人開始擁抱開放權(quán)重模型,OpenAI 也是時候做出改變了。(汪淼)
1.TMT觀察網(wǎng)遵循行業(yè)規(guī)范,任何轉(zhuǎn)載的稿件都會明確標(biāo)注作者和來源;
2.TMT觀察網(wǎng)的原創(chuàng)文章,請轉(zhuǎn)載時務(wù)必注明文章作者和"來源:TMT觀察網(wǎng)",不尊重原創(chuàng)的行為TMT觀察網(wǎng)或?qū)⒆肪控?zé)任;
3.作者投稿可能會經(jīng)TMT觀察網(wǎng)編輯修改或補充。