跳到正文

#多模態

RSS
今日 4 則
11月19日週四
  1. aihot73

    騰訊混元將舉辦 AMA,聊 Hy4 系列模型怎麼打造

    想了解 Hy4 系列模型怎麼打造,可以直接向研發團隊提問。騰訊混元宣佈,將在本週五 11 月 20 日於 Reddit 的 r/LocalLLaMA 舉辦 AMA,團隊成員和 Shunyu Yao 會一起談 Hy4 與 Hy4 flash。貼文也提到,Hy4 flash 已開放權重,包含 Hy4 flash-FP8 和 Hy4 flash-Base,並列出 224B 引數、12B 啟用引數、1M 上下文和原生多模態等資訊;Hy4 則預告之後推出。

    推薦理由:這場 AMA 讓讀者能直接向混元研發團隊提問,瞭解 Hy4 系列的設計思路與後續發布安排。

  2. Hacker News (official RSS)89

    Microsoft 發布 7 款 MAI 模型,主打企業工作所需的效能與價格

    企業想讓 AI 助理長時間處理工作,模型費用也會跟著增加。Microsoft 這次發布 7 款 MAI 模型,涵蓋資安、寫程式、圖片編修、語音、轉錄與模型挑選,並公佈多項效能和價格比較。例如 MAI Code 2 在日常企業程式工作測試中,達到 GPT-6.1 Sol 98% 的表現,價格約為 40%;Microsoft 也說明它還沒針對科學研究和需要長時間工作的任務調校。另有 MAI Licensed Weights,讓企業用自己的資料調整模型,並在自己的 Azure 環境中執行。

    推薦理由:這次發布把多種模型的表現與價格放在一起比較,也說明 Code 2 尚未針對科學研究和長時間 AI 助理工作調校。

11月18日週三
  1. SenseTime78

    SenseTime 開源了 SenseNova-Loop-9B,這款模型有 9B 引數,可接收文字和圖片,也能用來製作動態海報、互動網站和 3D 場景。原文表示,它在多項基準測試中可與 Qwen3.8-27B 相比,並列出三項成績從 Preview 提升的結果:NL2Repo 從 19.91 升至 41.36、AutomationBench 從 14.33 升至 36.67、GAIA 從 37.86 升至 69.90。模型支援最高 512K 上下文;使用 4-bit AWQ 權重時,64K 上下文的 VRAM 需求最低約 9 GiB。

    推薦理由:SenseNova-Loop-9B 的多項基準成績高於 Preview,原文也列出與 Qwen3.8-27B 的比較,可用來瞭解這款 9B 模型的表現與使用條件。

  2. Dev.to Top Tech44

    Unity XR 開發怎麼用 AI 助理從寫程式走到測試 VR 流程

    AI 助理能幫忙寫 Unity 程式碼、找錯誤,但程式能編譯,不代表 VR 場景設定正確,或操作真的能在頭戴裝置上使用。文章提到,Unity 在 2026 年 9 月宣佈推出給 OpenAI Codex 使用的官方外掛,Meta 也推出 XR Operator,讓符合 MCP 的 AI 助理能在 Meta XR Simulator 裡操作執行中的 VR App。 例如,抓取物件在 Unity 編輯器裡正常,到了獨立頭戴裝置卻失效,AI 助理可以協助檢查錯誤訊息、輸入設定和程式碼,再提出修正建議;但最後仍要在實際裝置上測試。AI 可能誤解專案或提出會讓程式執行出問題的修改,所以開發者仍得確認結果。

  3. Dev.to Top Tech52

    Moda 讓 Ray-Ban Meta 眼鏡依情境決定何時協助、何時安靜

    AI 眼鏡如果只會等人下指令,使用起來不夠順手;如果一直主動說話,也可能打擾人。作者做了 Moda,讓眼鏡依照工作、料理或開會等情境調整協助方式。工作時,它會留意分心或姿勢不佳等持續訊號;料理時能看食材推薦食譜並用語音帶著做;開會時則先詢問是否同意錄音,過程中保持安靜,會後整理決定和待辦事項。影像預設在手機上處理,雲端處理需使用者選擇開啟,設定和使用資料留在本機。

  4. 雷科技52

    華為 MateBook Fold S 加上外屏,筆電合起來也能做什麼?

    筆電合起來後通常就不能繼續操作,但華為 MateBook Fold S 加了一塊外屏,讓人不用展開電腦也能檢視日程、訊息、刷小紅書,還能啟動小藝慧記。過去微軟、華碩和聯想都試過筆電外屏,卻受限於功能、耗電、成本或使用體驗,始終沒有普及。作者認為,小折疊設計和鴻蒙可能讓外屏更容易融入電腦,AI 也可能幫忙處理較複雜的工作;但大家是否常有需要合著電腦辦事的情境,仍是這項設計能否派上用場的關鍵。

  5. Dev.to Top Tech78

    OpenAI 發布 GPT-6.2 Astra 和 Sol,調降 Astra API 價格

    AI 助理要處理長時間、多步驟的工作時,模型費用可能讓大規模使用變得困難。OpenAI 發布 GPT-6.2 Astra 和 GPT-6.2 Sol:Astra 面向複雜工作,Sol 面向大量日常任務。文章整理的 Artificial Analysis 測試中,Astra 得分 62,每項標準任務平均花費 $4.00;Sol 得分 57,約 $0.60。OpenAI 也把 Astra 的 API 輸入與輸出價格調降 20%,已快取輸入的費用調降 60%。文章建議依工作難度選用模型,並留意輸入超過 272K token 時,部分費用會提高。

    推薦理由:Artificial Analysis 的比較呈現 Astra、Sol 在測試分數與單項任務成本上的差異,可用來思考不同難度工作該如何分配模型。

  6. The Verge · AI65

    Suno 推出 Visuals,讓 AI 音樂搭配影片和封面圖

    Suno 的 AI 音樂現在也能搭配影片和圖片。新功能 Visuals 可把歌曲片段做成會跟著歌詞對嘴的影片,也能依文字描述生成圖片,拿來當縮圖或專輯封面。使用者可挑最多 15 秒的歌曲片段,選擇 Suno 提供的角色圖片、上傳自己的圖片,或用提示詞生成參考圖;影片還能加上歌詞文字,並用時間軸把片段接在一起。Visuals 使用另外計算的點數,和製作歌曲的點數分開。Suno 表示,功能加入文字與影像過濾措施,目的是阻擋生成特定藝人、公眾人物、受著作權保護作品及智慧財產的肖像或內容。

  7. MIT Technology Review · AI55

    Osmo訓練AI模型辨認氣味,並用來設計香水

    人聞到同一種氣味時,感受可能會受周遭情境影響,讓電腦學會辨認氣味並不簡單。新創公司 Osmo 找人聞各種物品、記錄氣味,再搭配化學分析訓練模型;公司表示,模型已用於香氛設計,也曾在一次測試中勝過大型消費品公司的內部調香師。它還能依文字描述提出香味配方。不過,文章也提到專家質疑公司部分說法缺少資料佐證,並指出同一種分子在不同情境下可能讓人聯想到不同氣味。若要用於疾病診斷或機場威脅偵測,感測器和模型仍有發展空間。

  8. Dev.to Top Tech42

    Curify 如何檢查 ASL 影片翻譯是否真的看懂手語

    英文翻譯得很順,不代表 AI 助理真的看懂了 ASL 手語。Curify 開發影片翻譯工具時,曾發現模型其實是讀到畫面上的字幕,才說出看似正確的英文;因此,他們會檢查模型實際收到哪些畫面,以及翻譯和參考答案是怎麼來的。在一項 12 段影片的測試中,加密取樣畫面、平均取樣和重疊分批都沒讓意思翻對。這提醒我們,英文看起來通順、分數變好,都不能單獨證明翻譯正確;還需要熟悉 ASL 的人檢查意思有沒有漏掉、改變,或該不該表示不確定。

  9. The Decoder68

    Suno 推出 Visuals,替 AI 生成歌曲搭配影片

    Suno 新增 Visuals,讓使用者替 AI 生成的歌曲製作圖片和影片。短片最長 15 秒,會配合歌曲段落和歌詞,也支援對嘴;使用者可以從參考照片、提示詞或 Suno 預設角色開始,再調整字幕影片的字型、顏色、長度和畫面比例。功能提供 Fast 和 Standard 兩種畫質,也會擋下提及特定音樂人、名人或受著作權保護作品的提示詞與上傳內容;分享至 Suno 以外的平臺前,影片會加上浮水印。Visuals 可在網頁、iOS 和 Android 使用,需另外消耗點數,Pro 和 Premier 訂閱者暫時可領取點數試用。

  10. aihot61

    Gemini API 可直接讀取 Office 檔案,也能只處理指定內容

    處理大型檔案、影片或音訊時,可能不需要用到整份內容。Gemini API 現在可以直接接收 Word、PowerPoint、Excel 和 OpenDocument 檔案,也能從檔案、試算表、影片與音訊中選取特定部分,例如指定頁碼、工作表、儲存格範圍或時間區間。也可以選擇頁面圖片、擷取出的文字、公式或影片轉錄文字等內容。這讓人能只送出需要處理的部分,也只為那部分付費。

    推薦理由:Gemini API 新增 Office 與 OpenDocument 檔案直傳,並可指定要處理的頁面、儲存格或時間範圍,方便評估能否減少不必要的處理與費用。

  11. ModelScope74

    模型要做更複雜的工作,通常得增加引數,但更大的模型也比較吃硬體。SenseNova-Loop-9B 改用 Loop + mHC,讓 32 個不同的解碼器層在一次運算中執行 56 次,重複使用中間層的權重。它能讀取文字和圖片、產生文字,並支援最高 512K 的上下文視窗。原文列出的測試分數也比 Preview 高,例如 AutomationBench 從 14.33 升到 36.67;官方 4-bit AWQ 權重約 4.9 GB,搭配 4-bit KV cache 時,64K 上下文可在約 9 GiB VRAM 上部署。

    推薦理由:SenseNova-Loop-9B 以重複運算部分層的方式增加計算深度,文中也提供多項基準分數與低位元部署所需的記憶體資訊。

  12. Dev.to Top Tech66

    SiMa.ai 推出 Palette 3.0,讓多個 AI 模型共用 Modalix 晶片

    機器人、無人機和工業攝影機要同時跑好幾種 AI 工作,常得安排多顆晶片,也得顧好速度、耗電和反應時間。SiMa.ai 推出 Palette 3.0,讓多個模型和 Docker 容器共用 Modalix 邊緣 AI 晶片,還能調整各項工作的優先順序,並讓不同硬體引擎平行運作。公司表示,既有 Modalix 客戶重新編譯應用程式就能採用更新;一項晶片測試跑出 60 路 720p 物件偵測影像串流、合計每秒 600 張畫面。技術報告提到的最高加速幅度來自特定測試,汽車助理測試的改善幅度較小。這些結果能否在長時間運作時維持,仍是實際部署時的重要考量。

  13. ModelScope74

    長上下文模型常需要更多運算成本,Tencent Hy 推出開放權重模型 Hy4-flash,想讓長時間工作更省資源。它有 220B 引數,每個 token 只啟動 12B 引數,能理解圖片,並支援 1M-token 上下文。Tencent Hy 表示,在自家 WorkIndex 測試中,Hy4-flash 略勝較大的 Hy4 Preview,每項任務成本是 Hy4 Preview 的 1/13、Hy4 的 1/20;解碼速度超過每秒 150 tokens。模型也提供不同用途的版本,並支援 vLLM、SGLang、Transformers 和 OpenAI 相容 API。

    推薦理由:Hy4-flash把長上下文、圖片理解與較低推論成本放進同一模型,文中也提供內部測試和部署資料,可用來瞭解它的定位。

  14. Dev.to Top Tech54

    如何用免費服務搭建 AI 圖片、語音與影片原型流程

    做圖片、語音和影片原型時,開發者常得訂閱好幾種服務。作者整理了免費額度的使用方式:用 Hugging Face Spaces 預覽 FLUX.1-schnell,或透過 SiliconFlow 呼叫圖片模型;Cloudflare Workers AI 每天重設 10,000 個免費 Neurons,可用於輕量語音轉文字等工作;Hailuo AI 和 Suno AI 則提供每日免費額度,供影片和音樂原型使用。免費額度、是否需要信用卡和試用限制可能變動,作者也分享了追蹤相關優惠的清單與網站。

  15. Tencent Hy68

    騰訊混元宣佈開放 Hy4 flash 的模型權重,包含 Hy4 flash-FP8 和 Hy4 flash-Base。這款原生支援多模態的模型有 224B 引數,其中 12B 會啟用,上下文視窗為 1M。官方表示它主打速度快、效率高,適合日常工作,並採用 Tencent Hy License。騰訊混元也預告接下來會推出 Hy4。

    推薦理由:Hy4 flash 同時推出 FP8 與 Base 版本,並公佈引數規模、活躍引數量和上下文視窗,方便了解這次開放權重的模型規格。

  16. aihot77

    騰訊混元開放 Hy4 flash 權重,推出 FP8 與 Base 兩個版本

    想在日常工作中使用多模態模型,常得先了解模型規格和如何取得。騰訊混元宣佈開放 Hy4 flash 權重,提供 Hy4 flash-FP8 和 Hy4 flash-Base 兩個版本,模型共有 224B 引數,啟用 12B,支援 1M 上下文,定位在日常生產力用途。模型以 Tencent Hy License 發布,可從 Hugging Face 和 GitHub 取得;官方也預告 Hy4 即將推出。

    推薦理由:Hy4 flash 提供 FP8 與 Base 兩種版本,並列出引數量與上下文視窗資訊,方便讀者瞭解模型規格與取得方式。

  17. Dev.to Top Tech80

    Google 發布 Gemini 3,首日就匯入搜尋的 AI Mode

    新模型推出後,大家常要等一段時間,才會在搜尋服務裡用到它。Google 在 2026 年 11 月 17 日發布 Gemini 3,並從第一天起讓 Pro 和 Ultra 訂閱者在 Google 搜尋的 AI Mode 使用它;作者說,前幾代模型進入搜尋都晚了幾週。文章也提到 Gemini 3 Pro 在 LMArena 得到 1501 Elo,Gemini 3 Flash 則比 2.5 Flash 快約 2 倍、執行成本低約 60%,這些數字是 Google 提供的。作者認為,模型發布時就接上搜尋服務,讓更多人能直接用到新功能,是這次發布的關鍵變化。

    推薦理由:Gemini 3 從發布當天就進入 Google 搜尋的 AI Mode,文章聚焦模型發布與搜尋入口同步,呈現 Google 如何把新模型直接帶到使用者面前。

  18. Artificial Analysis38

    無法前往邁阿密參加 GTA VI 發布活動?兩個 AI 模型替你打造這座城市 我們請 Anthropic 的 Claude Fable 5.2 和 OpenAI 的 GPT-6.2 Astra,打造本週化身為 Vice City、迎接 GTA VI 發布活動的邁阿密 ➤ 每個模型各用一個提示詞,在無法連上網路的 AA-3D 沙盒中製作 ➤ 兩者都在 Ocean Drive 沿線放入真實存在、提示詞從未提及的飯店,包括 Colony 和 Avalon ➤ 每個場景都能開車、搭快艇或乘飛船探索,可選日落或夜間景色

  19. Dev.to Top Tech39

    語意導航如何讓機器人聽懂目的地,並選出合適路線

    傳統機器人導航主要看座標、障礙物和能不能通過;但人常用「去充電站」或「檢查倉庫後方的出口」來交代任務,光有座標不夠。語意導航會把感測器看到的東西整理成地圖上的地點、物品和彼此關係,再把人的話轉成機器人能執行的目標。比如收到「去檢查站」,機器人要先找出地圖上哪裡是檢查站,再規劃路線;遇到行人或叉車時,也要考慮安全和通行規則。這讓機器人能依照環境和任務選路,但辨認結果可能出錯,因此仍需要底層導航負責檢查路線和動作是否安全。

  20. Dev.to Top Tech74

    Microsoft 推出七款 MAI 模型,並以 Frontier Tuning 配合企業工作流程

    企業使用 AI 處理固定工作時,通用模型未必熟悉內部流程,也不一定能用合理成本完成任務。Microsoft AI 推出七款 MAI 模型,涵蓋推理、程式開發、影像、語音和轉錄,並透過 Foundry 與合作平臺提供。Frontier Tuning 會在受控環境中利用實際工作紀錄調整模型,讓組織資料留在自己的環境;開發者也可以自行調整模型權重。Microsoft 提到 Mayo Clinic 合作計畫會先在院方環境中運作,但尚未公佈 MAI 模型的公開價格,也未說明該計畫的實際成效與擴大提供時間。

  21. Dev.to Top Tech74

    Microsoft 推出 Decision 1.1,協助軟體快速分類與分流工作

    軟體處理請求時,常要先判斷該分給誰、是否符合條件,或接下來要做什麼。Microsoft Decision 1.1 已正式開放使用,主打在應用程式和自動化流程中做這類判斷,也能讀取圖片。開發者可透過 Microsoft Foundry、OpenRouter 和 Vercel 使用它。Microsoft 表示,模型在 Artificial Analysis Decision Index v2.1 得分為 68,並稱排名高於另外三個決策模型;這是特定基準的比較,團隊仍可用自己的資料和需求測試。

  22. aihot66

    Gemini 4 Hydrogen 全球上線 Google Search,改善搜尋理解與回覆

    搜尋有時抓不準你真正想找的內容,回覆也不一定容易看懂。Google 宣佈 Gemini 4 Hydrogen 已在全球 Google Search 上線,並稱這是 Search 迄今最大的一次模型升級。Google 表示,新版更能理解使用者的意圖,也會更聰明地展開查詢並連結相關內容;回覆會依情況調整呈現方式,並加強多語言能力。

    推薦理由:Google 列出 Gemini 4 Hydrogen 在搜尋上的幾項改變,方便對照搜尋結果如何理解問題、呈現資訊與支援不同語言。

  23. Hacker News (official RSS)69

    Tencent 推出 Hy4 flash,主打更省錢地處理日常工作

    日常工作常要在成果品質、完成時間和費用之間取捨。Tencent 推出 Hy4 flash,這款多模態模型每次處理 token 時啟用 12B 引數,並提供 1M-token 上下文視窗。Tencent 表示,在 WorkBuddy 評估中,它的日常任務品質接近 Hy4,平均完成時間少了 70%,費用約為 Hy4 的 1/15;但處理需要長時間投入的程式開發工作時,Hy4 的能力上限較高。Hy4 flash 已在多項 Tencent 服務提供,Tencent 也計畫推出開放權重版本。

  24. MarkTechPost66

    Perplexity Computer 加入 Multiagent,最多讓 16 個 AI 助理互相核對工作

    複雜研究常要拆成好幾部分,還得確認不同結果有沒有矛盾。Perplexity 在 Computer 加入 Multiagent,由一個帶頭的 AI 助理安排工作,最多再派出 16 個 AI 助理平行處理;它們能直接分享找到的資料、指出彼此的差異,也能一起修改共用檔案,最後由帶頭者整理成一份回覆。預設團隊使用 Claude、GPT 和 Gemini 的模型。這項功能只在網頁版提供給 Perplexity Max 訂閱者;目前沒有公佈速度或準確度測試數字。

  25. Thurrott82

    Microsoft AI 在 Ignite 2026 發表七款新模型

    企業挑選 AI 模型時,常要在效果、價格和不同用途之間取捨。Microsoft AI 在 Ignite 2026 發表七款模型,涵蓋資安、寫程式、圖片編輯、即時語音、轉錄和決策;文中列出多項與其他模型的價格和效能比較,例如 MAI Code 2 對照 GPT-6.1 Sol,約以四成價格提供 98% 的寫程式品質。Microsoft 也表示,部分模型已在自家資料中心使用 Maia 200 晶片,並開始為客戶製作客製版本;組織之後也可透過 MAI Licensed Weights,在自己的 Azure 環境部署與調整模型。

    推薦理由:七款模型的發布資訊同時列出多項價格與效能比較,可看出 Microsoft 如何把不同用途的模型定位在成本與能力之間。

  26. aihot76

    OpenAI 發布 GPT-6.2 Astra 和 Sol,Artificial Analysis 評測排名第二

    OpenAI 發布 GPT-6.2 Astra 和 GPT-6.2 Sol,兩款模型在 Artificial Analysis 的智慧指數中排名第二,僅次於 Claude Fable 5.2。Astra 每百萬個輸入 token 收費 8 美元、輸出 40 美元;Sol 的輸入和輸出各為 2 美元和 10 美元。評測中,Astra 在科學、3D 和機器人專案表現突出,但程式 AI 助理指數沒有進步,Sol 還比前代少 3 分。兩款模型在最大努力設定下的幻覺率分別為 59% 和 55%。

    推薦理由:評測同時列出 GPT-6.2 Astra 與 Sol 的價格、排名和表現落差,可用來比較成本與不同任務的能力。

  27. aihot95

    OpenAI 推出 GPT-6.2 Astra 與 Sol,分別主打專業工作和日常任務

    處理複雜工作時,模型可能花很多時間和 token,成果也未必符合專業格式。OpenAI 推出 GPT-6.2 Astra 與 GPT-6.2 Sol:Astra 主打法律、金融、科學、程式開發與設計等複雜工作,Sol 則面向日常辦公和多步驟任務。OpenAI 表示,兩款模型在多項測試中用更少 token 做出更好的結果;Astra 的 API 價格是每百萬 token 輸入 8 美元、輸出 40 美元,Sol 沿用 GPT-6.1 Sol 的價格。兩款模型都達到 OpenAI 所定的網路安全 Critical 門檻,因此發布時也加強了高風險網路安全工作的防護措施。

    推薦理由:兩款模型分別瞄準複雜專業工作與日常任務,原文以多項基準、每項任務成本和防護門檻呈現差異,可據此比較用途與成本。

  28. aihot86

    Microsoft 發布 MAI 系列七款新模型,涵蓋資安、程式與語音

    企業要讓 AI 模型長時間處理工作,常得在能力和費用之間取捨。Microsoft 在 Ignite 2026 發布七款 MAI 新模型,涵蓋資安防禦、程式開發、影像編輯、即時語音、轉寫和決策等用途。Microsoft 表示,MAI Code 2 在指定編碼基準上的表現接近 GPT-6.1 Sol,價格約為四成;MAI Realtime 1 的起步價則是每分鐘音訊 0.01 美元。這些比較呈現了各模型的目標用途與價格,實際選用仍要看工作內容和所需功能。

    推薦理由:七款模型涵蓋資安防禦、程式開發、影像與語音等用途,文中列出多項基準和價格比較,可看出不同工作情境的成本差異。

  29. Dev.to Top Tech58

    VisionVix 推出可在瀏覽器探索的 3D 動物解剖模擬器

    想了解動物身體裡有哪些器官,光看書上的平面圖不容易從不同角度觀察。作者打造了 VisionVix 3D 動物解剖模擬器,收錄 10 種動物,每種都有完整外觀、內部器官和骨骼三種畫面,可以旋轉、放大型模型,也能點器官標籤看簡短說明。模擬器可直接在瀏覽器使用,免安裝;不過器官和骨骼都有簡化,模型也不是從真實動物掃描而來,章魚的骨骼畫面則是用來呈現外形的藝術模型。

  30. Dev.to Top Tech37

    SWE-CoWork 揭露 AI 助理難以完成整套公司軟體工作

    AI 助理會改程式,不代表能在公司裡獨立完成工作:它還得找出散落在檔案和聊天紀錄中的需求、和同事溝通,再確認成果真的能用。SWE-CoWork 讓 11 個模型處理真實專案中的工作,表現最好的 Claude-Opus-5.5 和 GPT-6 Astra 雖然通過約 63% 的測試,完整完成的工作卻不到 8%;而且最後回報已完成的需求中,仍有 31% 沒通過實際測試。這顯示 AI 助理目前比較會照著明確指示改程式,還不太會一路追蹤需求、合作並確認交付成果。

  31. Dev.to Top Tech39

    四篇 AI 研究改善圖片推理、語音合成與模型運算速度

    AI 看圖推理時可能會忘記圖片裡的細節;合成語音也得花不少力氣,反覆運算的模型則可能回答得很慢。四篇新研究分別提出保留圖片線索的方法 RAPO、不用語音編碼器的 VoxMel、加快反覆運算模型解碼的 LoopFill,以及用來測試圖片物理推理能力的 DominoBench。 例如,DominoBench 用 854 個場景測試模型能不能從靜態圖片推測一連串物體碰撞;模型只看圖片時,最多隻有 72% 答對關鍵人物的結果。研究顯示,把決定答案的計算步驟和數字直接告訴模型後,答對率可提高到 82–92%。這些研究提醒我們,模型說得流暢,不代表它看得懂圖片裡的細節,也不代表它會算出正確結果。