經(jīng)過(guò)82天的激烈角逐，12月3日，「達(dá)闥杯」機(jī)器人大模型與具身智能挑戰(zhàn)賽結(jié)果揭曉，在這場(chǎng)集結(jié)了全國(guó)各地高校和科研機(jī)構(gòu)的頂尖頭腦風(fēng)暴中，60支隊(duì)伍展現(xiàn)了他們對(duì)於未來(lái)技術(shù)的深刻理解和創(chuàng)新實(shí)踐。從報(bào)名到?jīng)Q賽，參賽者們不僅要面對(duì)複雜多變的咖啡廳場(chǎng)景挑戰(zhàn)，還需利用達(dá)闥提供的高精度數(shù)字孿生建模技術(shù)來(lái)完成一系列規(guī)定及開(kāi)放性任務(wù)。
本次比賽中獲獎(jiǎng)作品涵蓋了多種技術(shù)方案，並且每個(gè)作品都體現(xiàn)出大模型技術(shù)在具身智能方面巨大的潛力。國(guó)防科技大學(xué)和復(fù)旦大學(xué)以其創(chuàng)新性強(qiáng)、應(yīng)用廣泛的項(xiàng)目斬獲一等獎(jiǎng)；鵬城實(shí)驗(yàn)室、中國(guó)科學(xué)院軟件研究所則以其靈活又精準(zhǔn)的作品摘得二等獎(jiǎng)。一起來(lái)看看最強(qiáng)隊(duì)伍的作品吧！
一等獎(jiǎng)：國(guó)防科技大學(xué)
團(tuán)隊(duì)成員：陳星霖、蔡怡帥、毛韻欣、張禮望、吳子吉、馬劭聰、黃玉、馬可欣、梁震、徐晴霄、文卓爾、戴勇軍、孫啟堯
指導(dǎo)老師：王戟、楊文婧、李明龍、胡慶擁
作品名稱：基於大模型和行為樹(shù)的生成式具身智能體
國(guó)防科技大學(xué)的研究團(tuán)隊(duì)創(chuàng)新性地將樹(shù)形數(shù)據(jù)結(jié)構(gòu)與大語(yǔ)言模型相結(jié)合，並開(kāi)發(fā)了一個(gè)直觀的可視化界面。這一成果實(shí)現(xiàn)了聯(lián)結(jié)學(xué)派的強(qiáng)大語(yǔ)言模型與符號(hào)學(xué)派的行為樹(shù)之間的有效融合。與傳統(tǒng)思維鏈技術(shù)相比，行為樹(shù)提供了一種更為簡(jiǎn)單且穩(wěn)定的方式來(lái)定義和增強(qiáng)大模型的行為能力。此外，該方法還有效避免了由於複雜模型產(chǎn)生幻覺(jué)問(wèn)題。這項(xiàng)工作不僅在特定領(lǐng)域和場(chǎng)景中具有應(yīng)用潛力，而且開(kāi)闢了新思路和方法，值得在未來(lái)進(jìn)行深入探索。
達(dá)闥機(jī)器人副總裁王斌點(diǎn)評(píng)：國(guó)防科技大學(xué)的作品亮點(diǎn)在於實(shí)現(xiàn)了基於大模型和行為樹(shù)的生成式具身智能體系統(tǒng)框架。將大模型作為智能體的「大腦」，利用大模型的意圖理解能力與內(nèi)容生成能力，實(shí)現(xiàn)智能交互與決策；將行為樹(shù)作為智能體的「中樞」，利用行為樹(shù)的層次化、模塊化、可解釋、可規(guī)劃等性質(zhì)，將人工智能聯(lián)結(jié)學(xué)派技術(shù)與符號(hào)學(xué)派技術(shù)有機(jī)結(jié)合，最終實(shí)現(xiàn)靈活、安全、可控的生成式具身智能體。
一等獎(jiǎng)：復(fù)旦大學(xué)
團(tuán)隊(duì)成員：王皓天，曾致語(yǔ)，岳爾文，唐傑偉
指導(dǎo)老師：董震、沈立煒、彭鑫
作品名稱：CafeGPT - 基於大語(yǔ)言模型的多智能體閉環(huán)服務(wù)機(jī)器人
復(fù)旦大學(xué)的團(tuán)隊(duì)採(cǎi)用了大模型驅(qū)動(dòng)方法來(lái)實(shí)現(xiàn)其機(jī)器人技能，而獨(dú)特之處在於他們並未使用強(qiáng)化學(xué)習(xí)。這種方法在機(jī)器人領(lǐng)域具有創(chuàng)新性。值得注意的是，該團(tuán)隊(duì)不僅成功完成了所有預(yù)定任務(wù)，還在開(kāi)放式任務(wù)中提出了智能體閉環(huán)規(guī)劃方案。這一方案進(jìn)一步發(fā)揮了大語(yǔ)言模型的潛力，並顯著提升了使用語(yǔ)言模型進(jìn)行機(jī)器人控制的成功率和可靠性。總體而言，復(fù)旦大學(xué)團(tuán)隊(duì)的作品展現(xiàn)出令人讚歎的創(chuàng)新和執(zhí)行力。
達(dá)闥機(jī)器人副總裁王斌點(diǎn)評(píng)：復(fù)旦大學(xué)的作品亮點(diǎn)在於完全使?預(yù)訓(xùn)練的?模型，不使用任何訓(xùn)練數(shù)據(jù)的情況下，以多智能體代理（Multi-LLM Agent）的方法讓咖啡廳機(jī)器?完成服務(wù)任務(wù)，實(shí)現(xiàn)具?能力。並且在人為注入異常錯(cuò)誤的情況下，這種多智能體代理的方法依然可以檢測(cè)到錯(cuò)誤並嘗試?yán)^續(xù)完成任務(wù)，方法魯棒性強(qiáng)。
二等獎(jiǎng)：鵬城實(shí)驗(yàn)室
團(tuán)隊(duì)成員：劉秉熙
指導(dǎo)老師：崔金強(qiáng)、王暉、張宏
作品名稱：基於多模態(tài)大模型的服務(wù)機(jī)器人
該團(tuán)隊(duì)採(cǎi)用了多種模態(tài)的大模型構(gòu)建了人形機(jī)器人的核心基礎(chǔ)能力完成了比賽任務(wù)，包括：語(yǔ)音識(shí)別大模型，語(yǔ)音生成大模型，視覺(jué)語(yǔ)義分割和文本生成大模型。特別地，他們使用了國(guó)產(chǎn)自主研發(fā)的鵬城腦海大語(yǔ)言模型。
達(dá)闥技術(shù)專家點(diǎn)評(píng)：鵬城實(shí)驗(yàn)室對(duì)整個(gè)咖啡廳場(chǎng)景進(jìn)行的點(diǎn)雲(yún)重建效果不錯(cuò)；基於YOLO V7的目標(biāo)檢測(cè)，識(shí)別物品類別及人物身份；特別是使用了語(yǔ)音識(shí)別及生成模型以及國(guó)產(chǎn)自研大模型來(lái)增強(qiáng)人機(jī)交互。
二等獎(jiǎng)：中國(guó)科學(xué)院軟件研究所
團(tuán)隊(duì)成員：周子涵、顧植譽(yù)、張翼飛
指導(dǎo)老師：吳國(guó)全、魏峻
作品名稱：機(jī)器人大模型與具身智能挑戰(zhàn)賽解決方案
該團(tuán)隊(duì)開(kāi)發(fā)了一套層次分離、通用靈活的架構(gòu)，通過(guò)大模型自主認(rèn)知潛力，實(shí)現(xiàn)探索、任務(wù)理解、規(guī)劃、執(zhí)行等過(guò)程，並創(chuàng)新地提出了場(chǎng)景語(yǔ)義網(wǎng)格化存儲(chǔ)和記憶管理機(jī)制，有效解決單個(gè)大模型的限制，提高靈活性和自主性，同時(shí)保證大模型交流的魯棒性。他們還創(chuàng)新地採(cǎi)用場(chǎng)景語(yǔ)義網(wǎng)格化存儲(chǔ)方法來(lái)保存場(chǎng)景信息，並通過(guò)視覺(jué)大模型感知情境語(yǔ)義，從而加快記憶檢索過(guò)程並幫助機(jī)器人更好地理解環(huán)境。團(tuán)隊(duì)還封裝了機(jī)器人能力，限制操作空間在可選API範(fàn)圍內(nèi)，實(shí)現(xiàn)邊寫(xiě)代碼邊調(diào)試(debug)的效果，並利用任務(wù)規(guī)劃產(chǎn)生的API調(diào)用序列，提高執(zhí)行效率。
達(dá)闥技術(shù)專家點(diǎn)評(píng)：中國(guó)科學(xué)院軟件所的參賽隊(duì)伍在比賽中採(cǎi)用了多個(gè)大模型協(xié)同的方式，對(duì)話大模型、視覺(jué)大模型和路徑與動(dòng)作規(guī)劃大模型，各司其職並協(xié)同合作，展現(xiàn)了1+1+1>3的效果。
此次大賽充分體現(xiàn)了大模型的潛力，不管是大語(yǔ)言模型驅(qū)動(dòng)的多模態(tài)對(duì)話，開(kāi)放域檢測(cè)模型還是大模型的思維鏈能力，都有非常驚喜的表現(xiàn)。達(dá)闥機(jī)器人副總裁王斌對(duì)參賽選手表示肯定：「所有進(jìn)入決賽建設(shè)者都展示了極高水平，同時(shí)70%的隊(duì)伍完成了兩個(gè)開(kāi)放性任務(wù)。並且大部分隊(duì)伍都配合使用大模型完成任務(wù)，效果很棒，超出預(yù)期。」
「達(dá)闥杯」機(jī)器人大模型與具身智能挑戰(zhàn)賽不僅是一個(gè)競(jìng)技場(chǎng)，更是一個(gè)前沿科技展示舞臺(tái)。參加此次挑戰(zhàn)賽意味著達(dá)闥和參賽選手們共同站在時(shí)代最前端——無(wú)論結(jié)果如何，每位建設(shè)者都已經(jīng)是未來(lái)變革中不可或缺的一部分。「達(dá)闥杯」只是開(kāi)始，在AI驅(qū)動(dòng)下，未來(lái)屬於每一個(gè)勇敢追夢(mèng)者。
更多大賽精彩回顧及選手幕後故事，將在達(dá)闥公眾號(hào)陸續(xù)更新，敬請(qǐng)關(guān)注！
掃描微信公眾號(hào)
