跳到正文

#多模態

RSS
今日 5 則
11月9日週一
  1. Dev.to Top Tech47

    NexoPeek:透過 VR 驗證可成藥口袋的探索歷程

    NexoPeek 將 PDB 蛋白質結構視覺化與口袋分析帶進 Meta Quest,作者表示,自己用它在免疫腫瘤學標靶上找到並驗證一個可成藥口袋。 - 結構分析功能:可從 RCSB PDB、UniProtKB、AlphaFold DB、SWISS-MODEL、PDBe 搜尋結構,並匯入多種分子檔案;也支援結構比對、配體檢視與 AI 口袋預測。

11月8日週日
  1. Dev.to Top Tech38

    Amblyotube 如何結合 HackerTV,讓作者開始雙眼視覺訓練

    作者在 Meta Quest 3 上使用 Amblyotube,搭配 HackerTV 影片進行弱視相關的雙眼視覺訓練,並記錄一週的個人測量結果。 - 訓練方式:Amblyotube 可調整優勢眼的模糊與遮蔽,並以 AI 偵測影片中的人物,只強化弱視眼所見的人物區域;也提供視野遮蔽、視覺提示、受控閃爍及 AR 房間模式。

  2. Hacker News (official RSS)82

    Video Rebirth 推出 HyperFlow H3 Flash,將 MiniMax-H3 壓縮至 13.7B/13.9B 引數

    Video Rebirth 推出 HyperFlow H3 Flash,將約 31B 引數的 MiniMax-H3 精簡為 13.7B 或 13.9B 引數版本,可用 4、6 或 8 步生成影片與同步立體聲音訊。

    推薦理由:HyperFlow H3 Flash 將剪枝、低秩分解與 INT8 量化用於影片及音訊生成,並列出不同 GPU 的端到端耗時,便於比較模型精簡幅度與執行成本。

11月7日週六
  1. 雷科技36

    雷科技:老闆電器在世界網際網路大會展示 AI 廚房應用

    老闆電器在世界網際網路大會烏鎮峰會上展示以「食神」AI 烹飪AI 助理為中樞的 AI 烹飪體系,透過多款廚電產品串聯採買、菜譜建議與烹飪流程。 - 產品與功能:現場展示 AI 烹飪眼鏡、AI 脈譜儀與 AI 調料機器人;眼鏡可提供食材挑選與菜譜建議,並以語音聯動油煙機、灶具等裝置。

  2. Vercel Blog59

    Chat SDK AI 助理可透過 json-render 串流生成式介面

    Vercel Chat SDK AI 助理現在可透過 json-render 串流生成式介面,將模型輸出的 JSON 規格轉換成 Chat SDK 卡片,再由各平臺的 adapter 發布為原生格式。 元件與平臺格式:具型別的元件目錄涵蓋表格、圖表、按鈕等;Slack 使用 Block Kit,Teams 使用 Adaptive Cards,無須為不同訊息形狀分別維護工具。 串流更新:streamCard 在根元素有內容後發布卡片,並隨新元素串流更新訊息;預設最多每 500 ms 傳送一次編輯。串流結束後,訊息會顯示通過驗證的最終卡片。 規格驗證與平臺限制:toCard 會依元件結構描述檢查各元素屬性,無效規格會觸發 CardSpecError,並附上可讀的問題清單,可回傳給模型修正。平臺超出單則訊息容量的內容會由 adapter 降級處理;例如 Slack adapter 會將第二個表格轉成程式碼區塊,也可傳入限制來拒絕這類規格。 開始使用:可參閱檔案或試用 playground。

  3. NVIDIA AI76

    NVIDIA 研究人員以 Lyra 2.0 結合影片生成與 3D 重建,從單張影像建立可沿選定相機路徑探索的環境。 場景一致性:Lyra 參考先前視角並修正累積的視覺誤差,讓使用者探索並返回熟悉地點時,世界維持一致。 相關資源:論文、程式碼與示範:https://t.co/NbtE0I9SVc

    推薦理由:Lyra 2.0 結合影片生成與 3D 重建,並利用先前視角修正累積的視覺誤差,呈現其維持可探索場景一致性的設計。