「智猩猩AI新青年講座」由智猩猩出品,致力于邀請青年學者,主講他們在生成式AI、LLM、AI Agent、CV等人工智能領域的最新重要研究成果。
AI新青年是加速人工智能前沿研究的新生力量。AI新青年的視頻講解和直播答疑,將可以幫助大家增進對人工智能前沿研究的理解,相應領域的專業知識也能夠得以積累加深。同時,通過與AI新青年的直接交流,大家在AI學習和應用AI的過程中遇到的問題,也能夠盡快解決。
「智猩猩AI新青年講座」現已完結233講,錯過往期講座直播的朋友,可以點擊文章底部 “ 閱讀原文 ” 進行回看!
近來,大型語言模型(LLMs)在單智能體決策中取得了令人印象深刻的表現,并且可以為機器人控制設計獎勵函數。但目前的具身智能體亦或缺乏彼此間的有效交流合作能力,亦或行為不能被人類理解,給人與智能體之間的協作帶來了很大的阻礙,且LLMs是否具備多智能體協作所必需的能力也仍尚未明確。
針對以上問題,馬薩諸塞大學阿默斯特分校在讀博士張洪鑫利用如今大語言模型豐富的世界常識、自由形式語言生成(free-form language generation)、復雜推理等能力,構建了基于LLMs的具身智能體CoELA,以在具有挑戰性的分散環境中完成長期多目標任務,最終實現了與其他智能體和人類進行高效的計劃、通信與合作的功能。相關論文《Building Cooperative Embodied Agents Modularly with Large Language Models》收錄于ICLR 2024。

CoELA由五個關鍵模塊組成:
(1)感知模塊:處理傳感器獲得的外部原始數據,更新記憶模塊的存儲信息;
(2)記憶模塊:模仿人類的長期記憶,以語義、情景和程序記憶的形式存儲智能體關于世界和他人的事實與經歷;
(3)溝通模塊:從記憶模塊檢索相關信息,引導LLMs利用其強大的自由形式語言生成能力生成最佳信息;
(4)決策模塊:利用LLMs的強大推理能力 ,根據從記憶模塊中檢索的相關信息和針對當前狀態決定采取哪種方案,生成的計劃會再次更新記憶模塊;
(5)執行模塊:檢索記憶模塊中存儲的程序知識,將高級計劃轉化為可在環境中執行的基本行動。

4月12日上午10點,智猩猩邀請到論文一作、馬薩諸塞大學阿默斯特分校在讀博士張洪鑫參與「AI新青年講座」234講,主講《使用大語言模型構建合作型具身智能體》。
主講人
張洪鑫,馬薩諸塞大學阿默斯特分校在讀博士
師從淦創教授,研究興趣為具身智能、人機交互、自然語言處理,在ICLR、NeurIPS、ACL、EMNLP等會議上發表有多篇論文,為NeurIPS、CVPR、ACL等會議擔任審稿人。
第234講
主 題
使用大語言模型構建合作型具身智能體
提 綱
1、大語言模型在智能體領域的應用現狀概述
2、利用大語言模型構建模塊化具身智能體CoELA
3、CoELA的五個核心模塊協作流程
4、實驗結果分析及展望
直 播 信 息
直播時間:4月12日10:00
直播地點:智猩猩知識店鋪
成果
論文標題
《Building Cooperative Embodied Agents Modularly with Large Language Models》
論文鏈接
//arxiv.org/abs/2307.02485
項目網站
//vis-www.cs.umass.edu/Co-LLM-Agents/
報名方式
對本次講座感興趣朋友,可以掃描下方二維碼,添加小助手李宛兒進行報名。已添加過李宛兒的老朋友,可以給李宛兒私信,發送“234”即可報名。
我們會為審核通過的朋友推送直播鏈接。同時,本次講座也組建了學習群,直播開始前會邀請審核通過的相關朋友入群交流。
