网站首页 全球最实用的IT互联网站!

人工智能P2P分享Wind搜索发布信息网站地图标签大全

当前位置:诺佳网 > 人工智能 > 人形机器人 >

AI鲸鱼小车项目摘要 本项目构建一个集离线语音

时间:2026-03-17 21:53

人气:

作者:admin

标签:

导读:AI鲸鱼小车项目摘要 本项目构建一个集离线语音唤醒、在线智能对话和全向移动功能的智能机器人。核心硬件包括ESP32-S3主控(需WROOM N16R8型号)、天问ASRPRO语音模块、I2S麦克风/功放、...

AI鲸鱼小车项目详细笔记

项目核心: 制作一个具备离线语音唤醒 → 在线智能对话 → 全向移动功能的智能机器人。


一、 硬件清单与采购要点(照着买不踩坑)
模块 具体型号/关键参数 购买注意事项
主控 ESP32-S3-DevKitC-1 必须确认模组型号是 WROOM N16R8(16MB Flash, 8MB PSRAM),这是运行大模型的硬性要求
语音识别 天问 ASRPRO 开发板 负责前端处理,实现“小鲸小鲸”这类离线唤醒词识别,并将后续语音转为文字。
麦克风 INMP441 模块 注意是 I2S 接口,非模拟麦克风。拾音效果更好,需与ASRPRO或ESP32的I2S接口连接。
音频输出 MAX98357A 功放模块 I2S 接口数字功放,直接驱动喇叭,音质比PWM驱动好很多。
电机 N20 减速电机 × 4 建议参数:12V供电,转速300RPM(扭矩大)或500RPM(速度快)
电机驱动 迷你版 TB6612FNG × 2 一块驱动板可控制两个电机,四轮需要两块。比L298N效率高、发热小。
车轮 60mm 麦克纳姆轮 × 4 重中之重:必须选择 轮毂中心为3mm D型轴孔 的版本,以匹配N20电机的D型轴。切勿购买TT马达用的扁孔轮!
显示 2.0寸 LCD串口屏 UART(串口)通信,只需接TX、RX、VCC、GND四根线即可显示,编程简单。
结构 WhaleBot 3D打印外壳 文件需从提供的网盘下载。打印时,尾巴部分的切片软件警告(非流形边)可忽略,不影响打印。

二、 核心系统框图(理解信号流向)

外界声音

INMP441麦克风
采集音频

I2S数字音频流

天问ASRPRO开发板

持续监听:
检测到预设的离线唤醒词?

将唤醒词后的语音
转换为文字指令

通过串口发送文字

ESP32-S3主控
核心大脑

任务1:联网
将文字指令通过Wi-Fi
发送给在线大语言模型

接收大模型返回的文本回答

任务2:解析
解析出控制指令

任务3:执行
同时执行以下三项

通过I2S将回答文本
送给MAX98357A功放

通过GPIO将运动指令
发给TB6612电机驱动

通过串口将交互信息
发送给LCD屏

语音播报

控制四个N20电机移动

在鲸鱼嘴部显示屏上显示

三、 关键难点与提醒(避坑指南)
  1. 主控选型是前提:ESP32-S3的大内存版本(N16R8) 是项目能跑通的核心,普通版本无法运行大模型。
  2. 车轮采购是易错点3mm D型轴孔是匹配N20电机的关键,买错将无法安装。
  3. 供电设计需考虑:电机(12V)与主控、模块(5V/3.3V)需要不同的电压。可能需要一个12V电池搭配降压模块(如LM2596)为控制部分供电。
  4. 软件架构较复杂:涉及天问ASRPRO的离线语音模型训练ESP32的Arduino编程(连接Wi-Fi、调用大模型API、控制各模块)、以及各模块间的通信协议(I2S、UART)

四、 学习与制作步骤建议
  1. 第一阶段:硬件准备
    • 按清单采购所有元件。
    • 3D打印外壳并准备好所有结构件。
  2. 第二阶段:分模块测试(非常重要!)
    • 测试1:将ESP32-S3连接Wi-Fi,并测试能否成功调用大模型API(先只在串口监视器里看文字回复)。
    • 测试2:单独测试天问ASRPRO的离线唤醒和语音转文字功能(通过串口看识别结果)。
    • 测试3:用ESP32通过TB6612驱动一个N20电机正反转。
    • 测试4:测试MAX98357A播放音频文件。
    • 测试5:测试LCD屏显示文字。
  3. 第三阶段:系统集成与调试
    • 将ASRPRO与ESP32的串口连接,让ESP32能收到语音指令。
    • 编写主程序,将语音指令->大模型->解析->控制/播报/显示的整个逻辑串联起来。
    • 将各模块安装到3D打印外壳内,进行整体调试。

课程来自:AI+硬件:动手做智能鲸鱼小车Task1

温馨提示:以上内容整理于网络,仅供参考,如果对您有帮助,留下您的阅读感言吧!
相关阅读
本类排行
相关标签
本类推荐

CPU | 内存 | 硬盘 | 显卡 | 显示器 | 主板 | 电源 | 键鼠 | 网站地图

Copyright © 2025-2035 诺佳网 版权所有 备案号:赣ICP备2025066733号
本站资料均来源互联网收集整理,作品版权归作者所有,如果侵犯了您的版权,请跟我们联系。

关注微信