微軟研究院日前推出了輕量級人工智能模型 Microsoft Phi 的微軟第三個迭代版本，新版本也就是推出 Phi-3 分成 3.8B、7B 和 14B 參數(shù)版本，輕量桂林外圍美女【電話微信192=1819=1410提供外圍女上門服務(wù)快速選照片快速安排不收定金面到付款30分鐘可到達名稱分別是微軟 Mini、Small 和 Medium。推出

與其他人工智能模型不同的輕量是，Phi 系列模型的微軟側(cè)重點是輕量級，其使用的推出資源要比同等規(guī)模的人工智能模型少得多，因此可以在智能手機等設(shè)備上本地運行。輕量桂林外圍美女【電話微信192=1819=1410提供外圍女上門服務(wù)快速選照片快速安排不收定金面到付款30分鐘可到達

根據(jù)微軟自己的微軟基準(zhǔn)測試，僅有 3.8B 參數(shù)的推出 Phi-3 Mini 版在性能上表現(xiàn)優(yōu)于 Meta 8B 參數(shù)的 Llama 和 OPENAI 3.5B 參數(shù)的 GPT-3。

微軟研究院在論文中表示：

我們引入了 phi-3-mini，輕量這是微軟一個在 3.3 萬億個 tokens 上訓(xùn)練的 3.8B 參數(shù)人工智能模型，從學(xué)術(shù)基準(zhǔn)和內(nèi)部測試來看，推出其整體性能可與 Mixtral 8x7B 和 OPENAI GPT-3.5 等模型媲美。輕量

例如 phi-3-mini 在 MMLU 測試中達到了 69%，在 MT-bench 上達到了 8.38，最重要的是這個模型足夠小，可以直接部署在手機上。

我們還提供了一些針對 4.8 萬億個 tokens 訓(xùn)練的 7B 和 14B 模型的初始參數(shù)縮放結(jié)果，即 phi-3-small 和 phi-3-medium，這兩個版本能力都要比 Mini 版更好。

其中 Small 版的 MMLU 為 75%、MT-bench 為 8.7；Medium 版 MMLU 為 78%、MT-bench 為 8.9。

微軟對 Phi-3 系列模型進行了優(yōu)化，在低功耗設(shè)備上例如智能手機和平板電腦上也可以運行，并且在實際使用過程中不會消耗太多的資源。

這意味著新模型能夠直接在智能手機上進行高級自然語言處理而不需要實時聯(lián)網(wǎng)進行計算，因此 Phi-3 Mini 等模型非常適合集成到一些需要人工智能參與的新穎應(yīng)用中。

當(dāng)然微軟也強調(diào) Phi-3 模型的訓(xùn)練數(shù)據(jù)集有限，它無法與互聯(lián)網(wǎng)上訓(xùn)練的大規(guī)模 AI 模型的知識廣度相匹配，但微軟也指出較小的高質(zhì)量模型往往表現(xiàn)更好。

論文地址：https://arxiv.org/abs/2404.14219

(責(zé)任編輯：綜合)