实验目录 · EXP007 智能工厂综合项目
EXPERIMENT 007 · 综合实战

机器人小车 智能工厂综合项目

四个实验串成一条完整闭环:让小车先看懂环境(建图导航),再看懂目标(视觉抓取),还能听懂人话(语音大模型),最终把"一句话任务"变成抓在手里的实物。

📚 4 个实验 ⏱️ 32 学时 🤖 硬件:小车 C1 🧵 能力闭环:感知 → 决策 → 执行
4
实验项目
32
总学时
5+
核心模块
1
完整任务闭环

实验卡片

点击卡片展开实验列表 · 进入实验页查看原理讲解与动画
EXP-01

建图与导航

小车如何在陌生工厂里"画出地图"并规划路线?从激光雷达到 SLAM、A* 与 Nav2,一次讲清"它怎么知道往哪走"。

SLAMNav2A* 寻路
  • 01 激光 SLAM 建图原理与实操 ★★★ 进入 →
1 个实验 · 含原理动画 + 互动 Demo展开 ▾
EXP-02

视觉识别与抓取

HSV 颜色分割为什么能"认出"目标?识别结果如何变成机械臂的一次准确抓取?

HSV 检测坐标变换 TF
  • 01目标检测与抓取位姿计算★★☆建设中
1 个实验 · 建设中展开 ▾
EXP-03

语音交互与大模型

离线语音如何唤醒?一句话里的意图怎样被大模型理解成"去 A 点取方块"这样的结构化指令?

LLM 意图解析离线 ASR
  • 01离线语音 + 大模型意图解析★★☆建设中
1 个实验 · 建设中展开 ▾
EXP-04

综合闭环实战

"去蓝色方块那里"——一句话如何驱动导航、视觉、抓取、语音四条链路协同完成任务?

状态机全链路集成
  • 01语音控制导航抓取全闭环★★★建设中
1 个实验 · 建设中展开 ▾

技术栈

ROS 2SLAM Toolbox Nav2A* / Theta* 大语言模型 TF2 坐标变换 OpenCV HSV离线语音 three.js状态机