rai
RAI 是一個與供應商無關的實體 AI 機器人代理框架,利用 ROS 2 工具來執行複雜操作、定義場景、自由介面執行、日誌摘要與語音互動等功能。
rai 是什麼?
RAI 是一個與供應商無關的實體 AI 機器人代理框架,利用 ROS 2 工具來執行複雜操作、定義場景、自由介面執行、日誌摘要與語音互動等功能。
rai 概覽
這是什麼
RAI 是一個供應商中立的實體 AI 機器人代理框架。它利用 ROS 2 工具來執行複雜動作、定義情境、提供自由介面執行、記錄摘要,並支援語音互動。該框架旨在開發和部署機器人的具身 AI 功能。這是一個開源專案,託管於 GitHub,採用 Apache-2.0 授權。
主要功能
- 多代理系統,可將生成式 AI 能力整合到機器人中。
- 機器人智慧功能,如自然人機互動和靈活的問題解決。
- 多模態互動,支援多種資料類型、感官整合以及多種輸入/輸出模態。
- 包含元件:rai core、rai whoami、rai_asr(語音轉文字)、rai_tts(文字轉語音)、rai_sim(模擬連線)、rai_bench(基準測試)、rai_perception(物體偵測)和 rai_nomad(導航整合)。
- 提供多種機器人的模擬展示,包括自動拖拉機、機械手臂和行動操作器。
使用情境
RAI 可用於果園中的任務與障礙推理(搭配自動拖拉機)、使用自然語言進行機械手臂的操作任務、自主行動機器人的導航與控制,以及具備機載執行的代理式行動操作。適合從事具身 AI、人機互動和多代理機器人系統的開發者與研究人員。
快速開始
請參閱儲存庫文件中的快速設定指南。
授權與價格
本專案採用 Apache-2.0 授權,為開源軟體。除開源性質外,未說明其他價格資訊。
內容整理自該專案公開的 README 與儲存庫資訊。