近期，科技界迎來(lái)了一項(xiàng)關(guān)于人工智能的新突破。英偉達(dá)公司推出了一款名為Cosmos-Reason1的系列模型，該模型專注于物理推理任務(wù)，旨在提升AI在物理常識(shí)和具身推理方面的能力，為機(jī)器人技術(shù)和自動(dòng)駕駛車(chē)輛等領(lǐng)域帶來(lái)了實(shí)際應(yīng)用的廣闊前景。

長(zhǎng)久以來(lái)，人工智能在語(yǔ)言處理、數(shù)學(xué)計(jì)算和代碼生成方面取得了顯著成就，但將其功能擴(kuò)展到物理環(huán)境中卻是一個(gè)棘手的問(wèn)題。Physical AI，即物理AI，不同于傳統(tǒng)的AI技術(shù)，它依賴于視頻等感官輸入，并結(jié)合現(xiàn)實(shí)世界的物理法則來(lái)生成反應(yīng)。這類(lèi)AI需要執(zhí)行導(dǎo)航、操作和交互等任務(wù)，這就要求它具備常識(shí)推理以及對(duì)空間、時(shí)間和物理規(guī)律的深刻理解。

然而，當(dāng)前的AI模型在連接物理世界方面存在明顯的不足。它們難以直觀理解重力或空間關(guān)系，導(dǎo)致在具身任務(wù)中的表現(xiàn)不盡如人意。直接在物理世界中訓(xùn)練AI不僅成本高昂，而且風(fēng)險(xiǎn)巨大，這極大地阻礙了開(kāi)發(fā)進(jìn)程。

為了應(yīng)對(duì)這一挑戰(zhàn)，英偉達(dá)推出了Cosmos-Reason1系列模型。該模型包括Cosmos-Reason1-7B和Cosmos-Reason1-56B兩個(gè)版本，通過(guò)Physical AI的監(jiān)督微調(diào)（SFT）和強(qiáng)化學(xué)習(xí)（RL）兩個(gè)階段進(jìn)行訓(xùn)練。這一創(chuàng)新性的方法為物理推理提供了新的解決方案。

研究團(tuán)隊(duì)引入了雙本體系統(tǒng)來(lái)增強(qiáng)模型的能力。一個(gè)分層本體將物理常識(shí)劃分為空間、時(shí)間和基礎(chǔ)物理三大類(lèi)，并進(jìn)一步細(xì)化為16個(gè)子類(lèi)。另一個(gè)二維本體則映射了人類(lèi)、機(jī)械臂、人形機(jī)器人等五種具身代理的推理能力。這種設(shè)計(jì)使得模型能夠更好地理解和處理物理世界中的復(fù)雜情況。

Cosmos-Reason1模型采用了僅解碼器的大型語(yǔ)言模型（LLM）架構(gòu)，并結(jié)合視覺(jué)編碼器來(lái)處理視頻數(shù)據(jù)。這使得模型能夠同步推理文本和視覺(jué)數(shù)據(jù)，從而提高了其在物理推理任務(wù)中的表現(xiàn)。訓(xùn)練數(shù)據(jù)集包含了約400萬(wàn)條標(biāo)注的視頻-文本對(duì)，涵蓋了動(dòng)作描述和復(fù)雜推理任務(wù)。

為了評(píng)估Cosmos-Reason1模型的性能，研究團(tuán)隊(duì)構(gòu)建了針對(duì)物理常識(shí)的三個(gè)基準(zhǔn)和針對(duì)具身推理的六個(gè)基準(zhǔn)。這些基準(zhǔn)測(cè)試包含了604個(gè)問(wèn)題、426個(gè)視頻以及610個(gè)問(wèn)題、600個(gè)視頻，分別用于評(píng)估模型在物理常識(shí)和具身推理方面的能力。

實(shí)驗(yàn)結(jié)果表明，Cosmos-Reason1模型在物理常識(shí)和具身推理基準(zhǔn)測(cè)試中均表現(xiàn)出色。特別是在經(jīng)過(guò)RL訓(xùn)練后，模型在預(yù)測(cè)下一步行動(dòng)、驗(yàn)證任務(wù)完成和評(píng)估物理可行性等方面取得了顯著進(jìn)步。這一突破為物理AI的發(fā)展注入了新的活力。