《電子技術應用》
您所在的位置:首頁 > 人工智能 > 業(yè)界動態(tài) > 零一萬物宣布開源 Yi-9B 模型

零一萬物宣布開源 Yi-9B 模型

號稱同系列代碼、數(shù)學能力最強
2024-03-07
來源:IT之家
關鍵詞: 零一萬物 Yi-9B模型

零一萬物 01AI”官方公眾號今晚發(fā)文宣布開源 Yi-9B 模型,官方稱其為 Yi 系列模型中的“理科狀元”——Yi-9B 是目前 Yi 系列模型中代碼和數(shù)學能力最強的模型,實際參數(shù)為 8.8B,默認上下文長度為 4K tokens。

0.png

該模型是在 Yi-6B (使用了 3.1T tokens 訓練)的基礎上,使用了 0.8T tokens 進行繼續(xù)訓練,數(shù)據(jù)截至 2023 年 6 月。

據(jù)介紹,在綜合能力方面(Mean-All),Yi-9B 的性能“在尺寸相近的開源模型中最好”,超越了 DeepSeek-Coder、DeepSeek-Math、Mistral-7B、SOLAR-10.7B 和 Gemma-7B。

代碼能力方面(Mean-Code),Yi-9B 的性能僅次于 DeepSeek-Coder-7B,超越了 Yi-34B、SOLAR-10.7B、Mistral-7B 和 Gemma-7B。

在數(shù)學能力方面(Mean-Math),Yi-9B 的性能僅次于 DeepSeek-Math-7B,超越了 SOLAR-10.7B、Mistral-7B 和 Gemma-7B。

在常識和推理能力方面(Mean-Text),Yi-9B 的性能與 Mistral-7B、SOLAR-10.7B 和 Gemma-7B 不相上下。

官方更稱,Yi-9B(BF 16) 和其量化版 Yi-9B(Int8)都能在消費級顯卡上輕松部署,使用成本較低,開發(fā)者友好。

1.png

據(jù)此前報道,該公司由李開復創(chuàng)新工場董事長兼 CEO 帶隊創(chuàng)辦,此前已已推出 Yi-34B 和 Yi-6B 兩個開源大模型,號稱對學術研究完全開放,同步開放免費商用申請。

2.png


weidian.jpg

本站內容除特別聲明的原創(chuàng)文章之外,轉載內容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創(chuàng)文章及圖片等內容無法一一聯(lián)系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經(jīng)濟損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。