EAI
无GPU具身智能仿真实验室在浏览器里看见“学习—理解—行动”
NO GPU · NO CLOUD · JUST EXPERIMENT

不用GPU,
也能把AI的过程拆开看。

这里不追求造一个假的“大模型”。我们用三个足够小、可以看懂的实验,把机器人怎样试错、怎样用视觉证据回答、怎样把语言变成动作展示出来。

只用当前设备CPU不上传学生数据不连接真实G1
CPUSIM
ACTIVE LAB / 当前实验

让小机器人真的试错学习

修改奖励,运行Q-learning,再回放它自己找到的路线。

REINFORCEMENT LEARNING LAB · Q-LEARNING

让小机器人自己找到安全路线

你不是直接告诉它怎么走,而是设计“加分和扣分规则”。它会试很多次,再把更好的选择记进Q表。

1选择一步2得到奖励3更新Q表4再试一次
02
训练路径回放比较“还没学会”和“学会以后”
0步 / 35准备从起点出发

本步奖励 0 · 累计奖励 0

03
读取训练结果不要只看速度,还要检查安全
等待训练数据

先设计奖励规则,再点击“开始Q学习”。

04
累计奖励曲线看学习趋势,不追求每轮都上升
训练后,这里会出现奖励学习曲线。
打开“算法透视镜”:它到底做了什么?
Q表不是大模型

6×6地图有36个位置,每个位置只记“上、右、下、左”4个分数。这里没有图片识别,也没有语言模型。

探索与利用

训练初期常随机试路,后期更多选择Q表里分数最高的方向,所以曲线会抖动但整体可能变好。

奖励塑造行为

终点加分、每步扣分会影响效率;危险、碰撞、安全距离和转向扣分,分别简化映射安全与身体稳定。

仿真不等于真机

真实G1还要面对平衡、摩擦、延迟、传感器误差和人身安全。本实验只帮助理解强化学习原理,不能生成真机控制策略。

把三种AI放在一张图里

它们处理的是同一个闭环里的不同问题

VLM我看到了什么?

把视觉线索变成可以检查的语言描述。

目标与规划现在应该做什么?

把人的目标、环境信息和安全边界放在一起。

VLA怎样连续行动?

把视觉和语言变成动作,并持续重新观察。

强化学习怎样做得更好?

从奖励与失败中调整策略,为下一次行动改进。