跳到主要内容

介绍

头部模块​

  • GR3头部使用RK3588主芯片，支持Android12
  • 单目RGB摄像头，支持硬件帧同步功能
  • 领夹式麦克风，支持降噪。可连接声源定位麦克风
  • 扬声器系统，播放音频
  • SPI屏幕，显示眼睛，支持眼睛表情控制

参考功能​

  • 麦克风、扬声器、摄像头协同工作支持连接语言大模型与视觉大模型
  • 协同机器人运控系统与SPI屏幕，可以实现大模型对话同时进行动作、表情交互功能

环境部署​

  1. 开发工具Android studio下载，然后安装，安装和配置可以网上搜下教程 https://developer.android.google.cn/studio?hl=zh-cn
  1. 配置环境变量

配置好对应的java版本JDK11、adb命令，根据自己的电脑系统网上搜索配置教程

  1. 投屏工具安装，安装scrcpy，根据自己电脑系统网上搜索安装教程

调试方法​

  1. 机器人头部RK3588 IP地址为192.168.137.200，有线或者wifi连接上机器人内部网络后可以通过这个ip访问。
  • 有线连接方式：网线一端接机器人背后的网口，另一端接入自己的电脑网口
  • 无线连接方式：电脑打开wifi搜索机器人编号的网络，如：wifi名称GR301AA0001_5G
  1. 有线或者无线连接后，可以通过adb访问到头部的RK3588系统,前提先配置好adb命令，在终端或cmd命令行中能执行，接着在终端执行下面的adb connect命令
adb connect 192.168.137.200:5555

连接成功后命令行返回

connected to 192.168.137.200:5555
  1. 电脑投屏显示Android运行画面，前提已安装scrcpy投屏工具, 终端执行
scrcpy --no-audio

执行后投屏画面如下，这个界面时下面提供demo应用的主界面

  1. 打开Android studio开始代码编写，可以导入最下面的demo源码先直接运行跑通