原创 乐鑫ESP32-S3模块应用,智能机器人技术发展,智能语音交互

2022-1-7 17:16 974 7 3 分类: 智能硬件 文集: MCU
随着技术的发展,智能服务正在融入群众的生活。智能机器人的应用,大大提高人们的工作效率,并减少投入的成本。

传感器检测是否有来宾,指纹识别模块可以用来签到,语音识别处理模块可以进行简单的日常提问进行识别并用相应的回答,触摸屏界面实现人机互动,可以实现查询地点位置、部门介绍等功能。

ESP32-S3搭载Xtensa®32位LX7双核处理器,主频高达240MHz,内置512KBSRAM(TCM),具有45个可编程GPIO管脚和丰富的通信接口。

ESP32-S3MCU增加了用于加速神经网络计算和信号处理等工作的向量指令(vectorinstructions)。AI开发者们通过ESP-DSP和ESP-NN库使用这些向量指令,可以实现高性能的图像识别、语音唤醒和识别等应用。

当人体感应模块检测到有人接近时,语音系统可以播报出“欢迎光临”。当客户说出“指纹识别”指令时,MCU可以正常进入指纹识别程序,指纹识别程序分为指纹签到,指纹录入,指纹删除。

当客户说出“楼层娱乐查询”指令时,MCU进入楼层娱乐查询程序,并且当客户说出某楼层号时,即可查询到某楼层的娱乐设施的分布地图和价格明细,如果客户说的是房间号,则告诉客户房间号的位置。

当客户说出“帮助”指令时,可得到负责人的联系方式,如果在紧急情况下,客户可通过“紧急拨号功能”,第一时间获得帮助。

迎宾机器人可以实现迎宾、人机对话、指纹签到、签到汇总、进出人数统计、地点查询、部门介绍等接待客人的功能,给人们带来管理便利。

利用芯片实现对客户的语音的识别,把人机互动变得更加的有趣。在实际的应用中,需要在编程时,加入一些过滤词语,提高模块对词语的过滤能力。

ESP32-S3拥有45个可编程GPIO以及SPI、I2S、I2C、PWM、RMT、ADC、DAC、UART、SD/MMC主机控制器和TWAITM控制器等常用外设接口。

其中的14个GPIO可被配置为HMI交互的电容触摸输入端。此外,ESP32-S3搭载了超低功耗协处理器(ULP),支持多种低功耗模式,广泛适用于各类低功耗应用场景。

ESP32-S3支持更大容量的高速OctalSPIflash和片外RAM,支持用户配置数据缓存与指令缓存。它还支持2MbpsPHY,用于提高传输速度和数据吞吐量。

ESP32-S3集成2.4GHzWi-Fi(802.11b/g/n),支持40MHz带宽;其低功耗蓝牙子系统支持Bluetooth5(LE)和BluetoothMesh,可通过CodedPHY与广播扩展实现远距离通信。

当有客人过来拜访,前台迎宾机器人检测到人体,触出CPU电路发出“欢迎光临”的迎宾声音,迎宾机器人采集客人的指纹以便下次签到使用。

如果是已采集指纹的客人则可以进行指纹识别签到,若是客人对主办部门的情况不是很了解,则可以进行语音提问或者在人机界面查询。根据客户的语音指令或者在触摸屏上做选择,MCU进入不同的程序处理。

作者: 飞睿科技, 来源:面包板社区

链接: https://mbb.eet-china.com/blog/uid-me-3961071.html

版权声明:本文为博主原创,未经本人允许,禁止转载!

给作者打赏,鼓励TA抓紧创作!

赞赏支持
点赞 7
赞赏0

文章评论1条评论)

登录后参与讨论

yzw92 2022-1-10 06:41

感谢分享
我要评论
1
7
1
2
3
4
5
6
7
8
9
0
关闭 热点推荐上一条 /4 下一条