多項數據超越GPT-4    Google Gemini比 OpenAI 的 GPT-4 更聰明!

編譯/莊閔棻

根據數據,Google推出的 Gemini看起來已經像是 OpenAI 的 GPT-4 的可怕競爭對手。Gemini 由三種不同的型號組成,尺寸和功能各不相同。 Google在聲明中表示,從歷史和法律等學科知識到用Python 生成程式碼,最先進的Gemini Ultra在多個領域都比GPT-4 更聰明。

據外媒報導,Google表示,Gemini 在大規模多任務語言理解測驗(MMLU)上的表現優於 GPT-4。(圖/截取自 Insider)

大規模多任務語言理解測驗

據外媒報導,Google表示,Gemini 在大規模多任務語言理解測驗(MMLU)上的表現優於 GPT-4,MMLU 是衡量人工智慧模型知識和解決問題能力的最受歡迎方法之一,就像是「AI模型的大學入學測驗」一樣。不過,MMLU 比典型的大學考試更高級一些。 根據Google,它涵蓋了數學、物理、歷史、法律、醫學和倫理學等 57 個科目,以測試模型對世界的知識和解決問題的能力。

更多新聞:Gemini令人失望!X用戶實測頻出槌 比不過GPT 3.5

超越ChatGPT和人類

據Google稱,Gemini Ultra 在 MMLU 上的得分為 90%,而 GPT-4 的得分為 86.4%。但 Gemini Ultra 更令人印象深刻的壯舉是,它也是第一個在 MMLU 上超越人類專家的模型。 Google在一份關於 Gemini 的技術報告中表示,該模型的人類專家得分約為 89.8%。

本身就是「多模態」

雖然Google承認,在日常任務的常識推理能力評估中,GPT-4 確實以幾個百分點的優勢擊敗了 Gemini Ultra,但Google表示,Gemini 相對於其他模型的一個優勢是它「本身」就是多模態的,並可以處理多種類型的數據,包括文字、音訊、程式碼,以及圖像和視訊。

更好的設計

GoogleDeepMind 研究副總裁 Oriol Vinyals 在宣布Gemini 的影片中表示,其他多模態模型則是透過以「次優方式」將純文字、純視覺和純音訊模型「拼接」在一起創建的。因此, Gemini 的設計比現有的多模式模型更能理解輸入。SemiAnalysis 部落格背後的研究人員也表示,Gemini 可能會憑藉強大的運算能力「粉碎」GPT-4。

參考資料:Insider

瀏覽 758 次

覺得不錯的話就分享出去吧!

發佈留言

Back to top button