|

NVIDIA擴展開放模型以推動下一波代理型AI、實體AI與醫療AI發展

   

NVIDIA宣布擴展其開放模型系列,以推動下一波代理型AI、實體AI與醫療AI發展,並推出多款新模型,讓開發人員和科學家打造出能在數位和現實世界環境中進行推理與行動的智慧系統。

開放模型對於在推動全球規模化創新極為重要。NVIDIA持續擴展的產品組合,包括用於代理型系統的 NVIDIA Nemotron、用於實體AI的NVIDIA Cosmos、用於自駕車的NVIDIA Alpamayo、用於機器人的NVIDIA Isaac GR00T,以及用於生物醫學研究的NVIDIA BioNeMo,皆提供先進模型與架構,以協助各產業激發全新的動能。

NVIDIA為 AI 代理提供動能

NVIDIA Nemotron模型系列正在擴展中,已推出涵蓋語言、視覺、語音與安全的全方位理解模型,將多模態智慧延伸至更多應用,協助開發人員打造專用的代理型AI。

NVIDIA Nemotron 3全方位理解模型為AI代理提供可實現自然對話、複雜推理與進階視覺等能力。

  • Nemotron 3 Ultra 能以5倍輸送量效率提供前沿級的智慧能力,以及 NVIDIA Blackwell平台上的NVFP4格式,與支援程式碼助理、搜尋與複雜工作流程自動化等AI原生應用。
  • Nemotron 3 Omni 整合音訊、視覺與語言理解能力,使AI代理能從影片與文件中高效率且高準確度地擷取洞察。
  • Nemotron 3 VoiceChat 支援即時對話,使AI能同時聆聽並回應。該模型在單一系統中,整合自動語音辨識、大型語言模型處理與文字轉語音功能。
  • Nemotron安全模型與檢索流程,可透過偵測文字與影像中的不安全內容,強化多模態系統的可信度,同時代理型檢索流程也能提升輸出結果的相關性和準確度。

LangChain已將NVIDIA Nemotron模型與其他NVIDIA Agent Toolkit軟體整合至其代理開發平台,使企業能在大規模環境下建置、部署與監控智慧AI助手,以自動化複雜任務。

包括Automation Anywhere、CodeRabbit、CrowdStrike、Cursor、Factory、Distyl、Genspark、Perplexity與ServiceNow在內等多家企業,正部署NVIDIA Nemotron模型以支援進階代理型AI應用。Edison Scientific正將NVIDIA Nemotron作為Kosmos系統的核心組件之一。Kosmos是一個自主AI科學家,目前已有超過5萬名研究人員使用,可同時執行數百項研究任務,並將原本需要數月的研究壓縮到一天內完成。

AI開發人員正利用Nemotron模型、資料與框架打造主權模型,以母語溝通、並符合當地文化與價值觀,為數十億人提供服務。這些公司包括AI Singapore、Bielik.ai、Indosat Ooredoo Hutchison, LINAGORA、SOOFI、Stockmark、Trillion Labs、Viettel與YTL AI Labs。

NVIDIA也推出了Nemotron-Personas,這是一組在保護隱私前提下建立的全合成資料集,並以各地人口普查與人口統計資料為基礎。與Pleias合作開發的法國資料集已於今日發布,並加入既有的美國、日本、印度、巴西與新加坡資料集。

全新開放模型推動實體AI推理能力

NVIDIA正透過新的基礎模型與模擬工具,加速自主系統的發展,協助機器人與車輛在現實世界中進行感知、推理與行動。這些包括:

  • NVIDIA Cosmos 3是首個將合成世界生成、實體AI推理與行動模擬整合在一起的世界基礎模型,預計即將推出,將協助實體AI在複雜環境中運作。
  • NVIDIA Isaac GR00T N1.7是一款為人形機器人打造的開放推理型視覺語言動作(VLA)模型,目前已具備在現實世界部署的商業可行性。
  • NVIDIA Alpamayo 1.5是一款推理型視覺語言動作模型,透過導航引導、提示條件設定、彈性的多攝影機支援與可配置的攝影機參數,大幅提升自駕車的推理能力。

在GTC主題演講中,NVIDIA創辦人暨執行長黃仁勳也搶先分享了GR00T N2。這是基於DreamZero研究的次世代機器人基礎模型。基於全新的世界行動模型架構,GR00T N2能讓機器人在全新環境中完成新任務的成功率比領先的視覺語言動作模型高出兩倍以上。預計將於年底推出,目前在MolmoSpaces與RoboArena的通用機器人策略排行榜上排名第一。

HCLTech、Johnson & Johnson MedTech、Milestone Systems、mimic robotics、Skild AI、Tulip、The Toyota Research Institute正利用NVIDIA Cosmos加速實體AI訓練與影片分析。Humanoid、LG電子、NEURA與 Noble Machines正採用NVIDIA Isaac GR00T N1.7技術,以擴充人形機器人的部署規模。

開放模型將加速醫療與生命科學研究步伐

NVIDIA正透過開放式多模態基礎模型與資料集,推進由AI驅動的醫療與生命科學領域洞察,加速生物醫學研究、藥物研發、醫學影像分析以及對科學文獻的理解。

NVIDIA BioNeMo正擴展為適用於醫療與生命科學的開放式AI開發平台,方便研究人員以大規模方式,對生物系統加以建模、設計與模擬。

Proteina-Complexa是一種用於蛋白質結合體設計的生成式模型,可加速基於結構的藥物研發與治療方法開發。Novo Nordisk、Viva Biotech與Manifold Bio 正利Proteina-Complexa,打造能與目標蛋白質結合的蛋白質,並已對生成結果進行實驗測試。

NVIDIA與歐洲分子生物實驗室(EMBL)的歐洲生物資訊研究所、Google DeepMind以及國立首爾大學合作,大幅擴展AlphaFold Protein Structure Database,計算約3,000萬個蛋白質複合體預測資料,並為AlphaFold資料庫新增170萬個高可信度預測,以加速新藥靶點與疾病生物學的研究發現。

NVIDIA亦推出nvQSP,這是一款由GPU加速的模擬引擎,讓製藥研究人員得以在臨床試驗開始前,先在電腦模型探索更多治療情境。在基準測試中,與傳統單執行緒CPU模擬相比,nvQSP的效能最高可提升達77倍,使科學家能在過去僅能模擬少數幾種情況的時間內,分析數百種劑量水準與病患子群體。

上市時程

部分NVIDIA開放式模型、資料與架構可在GitHub與Hugging Face上取得,也可透過各種雲端、推論與AI基礎架構平台以及build.nvidia.com取得。

許多模型也以NVIDIA NIM 微服務形式提供,可在任何NVIDIA加速基礎架構上進行安全且可擴展的部署,涵蓋從邊緣到雲端的環境。

MakerPro
【科技特寫】一人對決巨頭:Tom Turney與AI夥伴如何在7天內攀越Google技術高牆?
AI 機器人如何落實安全性控制

訂閱MakerPRO知識充電報

與40000位開發者一同掌握科技創新的技術資訊!

Author: MakerPro

MakerPRO.cc為華人圈最專注於Maker創新創業、物聯網及共享經濟報導及共筆發表的專業媒體,不論是趨勢分析與評論,或創新實作文章,在華文創新創業媒體領域都具有重要的影響力。

Share This Post On

Submit a Comment

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *