TODAY’S MENU

  • 🗞️|Google 推出開源模型 Gemma

  • 🚀|Adobe 推出自己的 Chat PDF

  • 📊|測試 LLM 各種編程任務的能力

  • 📚|如何在 Gemini 執行 Python?

  • 🔬|Google Gemma 技術報告

  • 🔍|Stratechery:Sora、Groq、VR

🗞️
NEWS

閱讀時間:3 分鐘

Google 在昨天晚上又在 AI 圈發布了重磅消息,才剛推出自己的閉源模型系列 Gemini 後,又推出了開源模型系列 Gemma

Gemma 模型是 Google 輕量化的開源模型,提供了兩種參數版本:2B、7B,能夠在筆電、手機上運行,上下文長度都支持到最多 8,192 個 token

在 Google 官方公布的 MMLU 測試中,Gemma 7B 的表現明顯超越目前最先進的開源模型,例如: Mistral AI 7BLLaMa 2,分數達到 64.3

Gemma 現在已經能在 KaggleVertex AIHugging Face 平台使用,最簡單的方式就是透過 Hugging Face,進入 HuggingChat 後就能直接使用(記得選擇 google/gemma-7b-it 模型)!

🚀
LAUNCH

閱讀時間:4 分鐘

很多人閱讀編輯 PDF 文件應該都是使用 Adobe Acrobat 吧!

但在之前其他公司都陸續推出能與 PDF 對話的 AI 工具時,發明 PDF 檔Adobe 卻遲遲沒有推出類似的 AI 工具。

終於 Adobe 前天宣布在 Acrobat 中推出 AI 助手(Beta 版本),讓使用者能直接在 Acrobat 中快速摘要 PDF 內容提出問題自動引用來源等等。

目前這個 AI 助手對 Acrobat 訂閱者免費試用,但目前只支援英文,未來才會開放其他語言。

🤝
PARTNERSHIP

合作夥伴:ALPHA Camp X ihower

想要掌握 Prompt Engineering OpenAI API 串接技巧,並建立 AI 應用的開發能力嗎?

ALPHA Campihower 共同推出了《Generative AI Engineer:LLM 應用開發工作坊》,深入探討 Prompt EngineeringOpenAI API 串接

透過將近 30 個 Colab Notebooks,搭配 1 週密集的線上直播和 30 天回放,讓你快速掌握完整 LLM 技術 AI 應用的多項案例。

  • 由 Generative AI Engineer 先行者 - ihower 親自帶領

  • 20+ 年軟體開發經驗

  • 率先發佈 LLM 應用開發 Roadmap

不再需要花費大量的時間搜尋學習資源,直接由專家引導帶領,讓你更精準且高效地掌握 Generative AI Engineer 必備技能

🤝 商業合作 PARTNERSHIP
與 13,000+ 位知識工作者分享您的產品與服務

《Brief AI 電子報》是繁體中文圈最具影響力且成長速度最快的「AI 電子報」。讀者多為企業家、經理人、投資人、高階主管、工程師、分析師、創作者…等專業知識工作者。PARTNERSHIP 欄位協助企業品牌推廣產品、服務、活動、工作職缺...等等 👉 了解更多

📊
CHART

閱讀時間:11 分鐘

Google DeepMind 的研究科學家 Nicholas Carlini 最近發佈了一個新的大型語言模型(LLM)基準測試

作者從各種 LLM 的實際對話歷史中提取了近 100 個測試案例,測試模型在處理各種編程任務時的能力,例如:將 Python 函數轉換為 C 函數解釋 JavaScript 功能等等。

以目前對 7 種主流模型進行的測試來看:

  • GPT-4:49% 通過

  • GPT-3.5:30% 通過

  • Claude 2.1:31% 通過

  • Claude Instant 1.2:23% 通過

  • Mistral Medium:25% 通過

  • Mistral Small:21% 通過

  • Gemini Pro:21% 通過

📚
TUTORIAL

如何在 Gemini Advanced 執行 Python 程式碼?

操作時間:5 分鐘

Google 的 AI 付費訂閱服務 Gemini Advanced 昨天新增了專屬功能:編輯和執行 Python 程式碼

現在也能像 ChatGPT Plus 一樣可以直接執行 Python 程式碼了,昨天的電子報有介紹要如何免費使用 Gemini Advanced 2 個月,大家可以在參考看看!

  1. 進入 Gemini Advanced 網頁(確保你已經訂閱)

  2. 直接跟它說明你的需求,請它提供 Python 程式碼;或是輸入你想要測試的 Python 程式碼

  3. 輸入後,它會直接執行 Python 程式碼,並在回答下方提供「執行」「編輯」按鈕。

  4. 你可以點擊「編輯」修改程式碼,然後再次點選「執行」來看更新後的結果。

這個功能學生可以反覆修改 Gemini 提供的程式碼範例,瞭解自己的操作如何影響輸出內容;開發人員也能先快速檢查 Gemini 生成的程式碼可否正確執行

🔬
RESEARCH

論文長度:16 頁

語言理解邏輯推理數學程式編寫等八大測試項目上,Gemma-7B 的表現都優於目前最受歡迎的開源模型 Llama-2 7B 13B

另外,無論是在數學科學領域,還是程式編寫的任務上,Gemma-7B 的表現都明顯優於 Mistral 7B 模型。

  • 架構和 Llama 相似,使用 Multi-head AttentionRotary Positional EmbeddingsGeLU 激活函數

  • 主要以英文的數據訓練,7B 模型使用了 6 兆個 tokens

  • 使用了 256k 詞彙量(vocab size)

  • 微調方法使用了 SFT RLHF

👨🏻‍🏫 AI 流行術語解釋
Multi-head Attention

Multi-head Attention 是一種機器學習機制,用於改善模型對序列數據(如文字或時間序列)的處理能力。它允許模型在處理一個序列時,能夠同時關注序列中的多個位置,這樣可以讓模型更好地捕捉到不同位置間的關聯性。

🔍
INSIGHT

閱讀時間:13 分鐘

最近 OpenAI 推出的 Sora,還有前天介紹過的 Groq,都讓我們快要追不上 AI 發展的速度了,Ben Thompson 也在他最新的電子報中提到這兩項技術,可能讓我們更接近真正的虛擬實境(Virtual Reality,VR)了。

OpenAI 稱 Sora 能夠生成出那麼逼真的畫面,是因為 Sora 擁有「理解和模擬現實世界」的能力,這讓創造虛擬世界變成了可能。

但真的要達到虛擬世界,還需要接近「即時」的生成速度。先前 AI 模型在 GPU 上運行根本無法接近這個速度,但 Groq 的晶片 LPU 加速了這件事的可能。

Ben Thompson 認為如果 Sora 在 Groq 上運行,可能就能即時生成畫面,那這樣是不是就是一個真正的虛擬世界了?

雖然 Sora 目前可能還不夠好,Groq 也可能還不夠便宜、快速,但這些技術必定會變得越來越好,當所有技術發展到位時,我們將能看到另一個劃時代的產品出現。

🙏

贊助者專屬方案 Br!ef+

成為 Br!ef 贊助者!解鎖「專注模式」電子報

  1. 「無推廣內容」版本的電子報

  2. 新增 TODAY'S MENU 快速跳轉功能

  3. 年度贊助者加入「Br!ef 年度贊助者專屬交流社群」

  4. 最低每日 12 元新台幣就能行動支持 Br!ef

  5. 未來將推出更多贊助者專屬福利..(Br!ef GPT..🤫