Why Real-World AI Is Harder Than the Benchmark | EliseAI’s Mario Martone
Why Real-World AI Is Harder Than the Benchmark | EliseAI’s Mario Martone
What changes when an AI mistake doesn’t just hurt a benchmark score, but affects someone’s housing or healthcare? EliseAI Head of Applied Research Mario Martone argues that deploying AI in essential industries requires a very different standard of reliability. Mario joins MTS to explain how EliseAI handles roughly 5 million phone calls a month, why LLMs aren’t the right solution for every problem, and how the team combines language models, traditional machine learning, neural networks, and inter
Podcast 專家音訊節目
收錄於 888news Podcast 智庫專區，包含精華摘要與上市公司即時行情
當 AI 錯誤不僅僅影響基準分數，而是影響某人的住房或醫療時，會有什麼變化？EliseAI 應用研究主管 Mario Martone 認為，在關鍵產業部署 AI 需要更高的可靠性標準。Mario 參與 MTS，說明 EliseAI 如何每月處理約 500 萬通電話、LLM 為何不是解決所有問題的最佳方案，以及團隊如何結合語言模型、傳統機器學習、神經網路和內部評估，以決定哪些方法在實際運營中真正有效。Mario 擁有 15 年的理論物理研究背景，他亦說明科學方法如何塑造 EliseAI 的研究文化，從在自家基準上測試新模型，到微調開源模型，並自動化越來越複雜的住房與醫療工作流程。並且他主張將 AI 應用於實際世界會產生同樣難以解決的知識挑戰，與他研究弦理論時遇到的問題相似。資源：瞭解更多 EliseAI：https://www.eliseai.com/ 在 LinkedIn 上關注 Mario Martone：https://www.linkedin.com/in/mcmartone/ 關注 MTS：https://www.mts.now/ 持續更新：在 YouTube 上尋找 a16z：YouTube 在 X 上尋找 a16z 在 LinkedIn 上尋找 a16z 在 Spotify 上收聽 a16z Show 在 Apple Podcasts 上收聽 a16z Show 跟隨我們的主持人：https://twitter.com/eriktorenberg 請注意，此處內容僅供資訊用途；不應視為法律、商業、稅務或投資建議，也不應用於評估任何投資或證券；亦不針對任何 a16z 基金的投資者或潛在投資者。a16z 及其附屬機構可能持有所討論公司的投資。欲瞭解更多細節，請參閱 a16z.com/disclosures。由 Simplecast（AdsWizz 公司）主辦。請參閱 pcm.adswizz.com 瞭解我們在廣告中收集與使用個人資料的資訊。