Getting out of the way: my robotics crash course
2 days ago
- 这位拥有25年经验的软件工程师，在过去的9个月里使用LLM构建了比整个职业生涯更多的软件，创建了41个实际项目。
- 为了让他的孩子们能够直观地看到他的工作，他购买了一套预组装的LeRobot SO-101机械臂套件，带有一个网络摄像头，并使用树莓派3来控制它。
- 他使用Codex (Astra)来设置机器人，包括舵机的安全软件、使用AprilTags进行校准，以及解决限制舵机运动的电源问题。
- 在用完Codex积分后，他转而使用Claude (Fable 5.1)，并通过发送提示让其自主工作，专注于利用摄像头反馈和阻力感应来抓取和放置积木。
- 在他女儿排球训练期间，Claude独立测试了机制，构建了反馈回路，并成功抓取和放置了积木，尽管最初有一些激烈的动作，但被自我纠正了。
- 第二天，他添加了更多积木（紫色和蓝色），并让Claude将这三个积木都放置在一个标记的投放区域，Claude在一夜之间完成了这个任务，如Codex制作的延时视频所示。
- 他的孩子们对机器人的表现感到兴奋，作者计划将LLM训练转化为VLA数据以提高速度和降低成本，未来的目标是搭建一个叠叠乐塔。