邬嘉文：GPT具身对话机器人

飞书用户6814

飞书用户4535

飞书用户7558

飞书用户6071

飞书用户6060

+37

7月30日修改

💡

作者：Garman邬嘉文

更详细的教程邬嘉文：GPT机器人制作指引

整体框架

实验目的

Transformer本质是生成内容，包括文本、音乐、图像、视频等。所以用GPT生成表情和机器人动作指令也是可以的。本实验尝试用一个ChatGPT驱动具身机器人的语音、表情以及头部动作，全面展示GPT的表现力。​

硬件框架

POC由Arduino主板和双轴舵机云台组成，接线方式如下，成本约200元。 jkl'456++++​

37%

63%

软件框架

程序由三个进程组成，进程间通过socket通讯。

Activicity	进程作用	硬件平台
chat.py	核心进程，实现聊天对话，发出语音、表情、头部动作（舵机转向）指令。	Macbook
face.py	播放声音和显示表情，底层由pythonista提供运行环境。	iPhone
head.py	闲时机器人面向用户，有eye contact功能，接收指令后会配合表情做头部动作。	Arduino

画板

已经有小伙伴复现做出来了

作者@沐雯

将SUNO AI放到小机器人里面，动作节奏不够

邬嘉文：GPT具身对话机器人​