一、實(shí)驗(yàn)室功能
>支撐課程：《具身智能機(jī)器人技術(shù)實(shí)踐A》。
>培養(yǎng)目標(biāo)：基于具身機(jī)器人平臺(tái)，系統(tǒng)掌握感知、認(rèn)知、決策與控制等核心模塊的關(guān)鍵技術(shù)，高效整合視覺(jué)、語(yǔ)言、動(dòng)作等多源數(shù)據(jù)，生成魯棒的行動(dòng)策略。通過(guò)理解強(qiáng)化學(xué)習(xí)及案例式的開(kāi)發(fā)，具備實(shí)現(xiàn)具身智能體在動(dòng)態(tài)環(huán)境中面向特定任務(wù)目標(biāo)的自主適應(yīng)、實(shí)時(shí)學(xué)習(xí)與持續(xù)優(yōu)化的能力。
>面向?qū)I(yè)：機(jī)器人工程專業(yè)，人工智能專業(yè)，自動(dòng)化類專業(yè)，計(jì)算機(jī)類專業(yè)。
>面向年級(jí)：大二年級(jí)~大三年級(jí)。
>班級(jí)人數(shù)：30~40人。
>實(shí)驗(yàn)設(shè)備：智行-W2A。
二、實(shí)驗(yàn)室配置
|
類別 |
名稱 |
數(shù)量 |
備注 |
|
硬件 |
智行-W2A |
10-15套 |
2-3人使用1套。 |
|
投影儀 |
1套 |
|
|
|
實(shí)驗(yàn)桌椅 |
10套 |
圓形桌椅，每套坐3-4人，標(biāo)準(zhǔn)充電接口。 |
|
|
電腦 |
30-40臺(tái) |
學(xué)生自帶筆記本電腦，Win10以上操作系統(tǒng)。 |
|
|
實(shí)驗(yàn)場(chǎng)地 |
1 |
需配置3m*3m大小的場(chǎng)地，用0.5m高的圍欄包圍，根據(jù)具身實(shí)踐場(chǎng)景需求在圍欄內(nèi)布置各類小型道具與障礙物。 |
|
|
競(jìng)賽場(chǎng)地 |
1 |
需配置3m*3m大小的場(chǎng)地，用0.5m高的圍欄包圍，根據(jù)比賽要求在圍欄內(nèi)布置各類小型道具與障礙物。 |
|
|
師資 |
教師 |
1 |
教學(xué)引導(dǎo)，知識(shí)串講，答疑及評(píng)價(jià)。 |
|
助教 |
1 |
可配置助教，協(xié)助教學(xué)引導(dǎo)和設(shè)備管理。 |
三、課程大綱
具身智能機(jī)器人技術(shù)實(shí)踐A（32課時(shí)）
|
教師講授PPT+學(xué)生動(dòng)手實(shí)踐，或?qū)W生自行學(xué)習(xí)并動(dòng)手實(shí)踐，PPT及相關(guān)課程資源由企業(yè)提供。 |
||
|
課次 |
實(shí)驗(yàn)內(nèi)容 |
課時(shí) |
|
1 |
講解具身智能與AI的區(qū)別、及典型具身機(jī)器人案例，配置具身機(jī)器人的開(kāi)發(fā)環(huán)境。 |
4 |
|
2 |
掌握具身機(jī)器人常用傳感器的調(diào)用方法，實(shí)現(xiàn)環(huán)境數(shù)據(jù)采集與預(yù)處理。 |
4 |
|
3 |
掌握具身機(jī)器人的運(yùn)動(dòng)學(xué)模型，移動(dòng)控制算法，移動(dòng)避障與導(dǎo)航等。 |
4 |
|
4 |
使用具身機(jī)器人集成YOLO-v5輕量化模型，訓(xùn)練特定目標(biāo)識(shí)別模型并跟蹤。 |
4 |
|
5 |
驅(qū)動(dòng)具身機(jī)器人搭載語(yǔ)音陣列，實(shí)現(xiàn)語(yǔ)音指令采集、識(shí)別與機(jī)器人動(dòng)作映射。 |
4 |
|
6 |
使用強(qiáng)化學(xué)習(xí)算法完成機(jī)器人行為決策模型的構(gòu)建與迭代訓(xùn)練，實(shí)現(xiàn)對(duì)動(dòng)態(tài)復(fù)雜場(chǎng)景的自適應(yīng)響應(yīng)。 |
4 |
|
7 |
基于開(kāi)源 LLM 與 VLM 模型，完成機(jī)器人端的模型部署與加載。通過(guò)實(shí)現(xiàn)多模態(tài)場(chǎng)景理解，將語(yǔ)音控制指令轉(zhuǎn)化為標(biāo)準(zhǔn)化機(jī)器人動(dòng)作編碼，達(dá)成具身機(jī)器人的自然語(yǔ)言驅(qū)動(dòng)與自主任務(wù)執(zhí)行。 |
4 |
|
8 |
基于具體場(chǎng)景，實(shí)現(xiàn)基于具身大模型應(yīng)用的綜合案例應(yīng)用并展示。 |
4 |
四、支持的賽事
本實(shí)驗(yàn)室可支持參加多個(gè)全國(guó)性大賽，具體情況如下：
|
序號(hào) |
賽事 |
賽項(xiàng) |
|
1 |
中國(guó)高校智能機(jī)器人創(chuàng)意大賽 |
|
|
2 |
中國(guó)機(jī)器人大賽暨RoboCup機(jī)器人世界杯中國(guó)賽 |
|
|
3 |
中國(guó)智能機(jī)器人格斗及競(jìng)技大賽 |
|