「智猩猩AI新青年講座」由智猩猩出品,致力于邀請青年學(xué)者,主講他們在生成式AI、LLM、AI Agent、CV等人工智能領(lǐng)域的最新重要研究成果。
AI新青年是加速人工智能前沿研究的新生力量。AI新青年的視頻講解和直播答疑,將可以幫助大家增進對人工智能前沿研究的理解,相應(yīng)領(lǐng)域的專業(yè)知識也能夠得以積累加深。同時,通過與AI新青年的直接交流,大家在AI學(xué)習(xí)和應(yīng)用AI的過程中遇到的問題,也能夠盡快解決。
「智猩猩AI新青年講座」現(xiàn)已完結(jié)233講,錯過往期講座直播的朋友,可以點擊文章底部 “ 閱讀原文 ” 進行回看!
近來,大型語言模型(LLMs)在單智能體決策中取得了令人印象深刻的表現(xiàn),并且可以為機器人控制設(shè)計獎勵函數(shù)。但目前的具身智能體亦或缺乏彼此間的有效交流合作能力,亦或行為不能被人類理解,給人與智能體之間的協(xié)作帶來了很大的阻礙,且LLMs是否具備多智能體協(xié)作所必需的能力也仍尚未明確。
針對以上問題,馬薩諸塞大學(xué)阿默斯特分校在讀博士張洪鑫利用如今大語言模型豐富的世界常識、自由形式語言生成(free-form language generation)、復(fù)雜推理等能力,構(gòu)建了基于LLMs的具身智能體CoELA,以在具有挑戰(zhàn)性的分散環(huán)境中完成長期多目標(biāo)任務(wù),最終實現(xiàn)了與其他智能體和人類進行高效的計劃、通信與合作的功能。相關(guān)論文《Building Cooperative Embodied Agents Modularly with Large Language Models》收錄于ICLR 2024。

CoELA由五個關(guān)鍵模塊組成:
(1)感知模塊:處理傳感器獲得的外部原始數(shù)據(jù),更新記憶模塊的存儲信息;
(2)記憶模塊:模仿人類的長期記憶,以語義、情景和程序記憶的形式存儲智能體關(guān)于世界和他人的事實與經(jīng)歷;
(3)溝通模塊:從記憶模塊檢索相關(guān)信息,引導(dǎo)LLMs利用其強大的自由形式語言生成能力生成最佳信息;
(4)決策模塊:利用LLMs的強大推理能力 ,根據(jù)從記憶模塊中檢索的相關(guān)信息和針對當(dāng)前狀態(tài)決定采取哪種方案,生成的計劃會再次更新記憶模塊;
(5)執(zhí)行模塊:檢索記憶模塊中存儲的程序知識,將高級計劃轉(zhuǎn)化為可在環(huán)境中執(zhí)行的基本行動。

4月12日上午10點,智猩猩邀請到論文一作、馬薩諸塞大學(xué)阿默斯特分校在讀博士張洪鑫參與「AI新青年講座」234講,主講《使用大語言模型構(gòu)建合作型具身智能體》。
主講人
張洪鑫,馬薩諸塞大學(xué)阿默斯特分校在讀博士
師從淦創(chuàng)教授,研究興趣為具身智能、人機交互、自然語言處理,在ICLR、NeurIPS、ACL、EMNLP等會議上發(fā)表有多篇論文,為NeurIPS、CVPR、ACL等會議擔(dān)任審稿人。
第234講
主 題
使用大語言模型構(gòu)建合作型具身智能體
提 綱
1、大語言模型在智能體領(lǐng)域的應(yīng)用現(xiàn)狀概述
2、利用大語言模型構(gòu)建模塊化具身智能體CoELA
3、CoELA的五個核心模塊協(xié)作流程
4、實驗結(jié)果分析及展望
直 播 信 息
直播時間:4月12日10:00
直播地點:智猩猩知識店鋪
成果
論文標(biāo)題
《Building Cooperative Embodied Agents Modularly with Large Language Models》
論文鏈接
https://arxiv.org/abs/2307.02485
項目網(wǎng)站
https://vis-www.cs.umass.edu/Co-LLM-Agents/
報名方式
對本次講座感興趣朋友,可以掃描下方二維碼,添加小助手李宛兒進行報名。已添加過李宛兒的老朋友,可以給李宛兒私信,發(fā)送“234”即可報名。
我們會為審核通過的朋友推送直播鏈接。同時,本次講座也組建了學(xué)習(xí)群,直播開始前會邀請審核通過的相關(guān)朋友入群交流。
