Skip to content

手势控制无人机系统 - 添加语音反馈功能 - #4010

Merged
donghaiwang merged 18 commits into
OpenHUTB:mainfrom
xiaoshiyuan888:new
Dec 20, 2025
Merged

donghaiwang merged 18 commits into
OpenHUTB:mainfrom
xiaoshiyuan888:new

Conversation

@xiaoshiyuan888

Copy link
Copy Markdown
Contributor

修改概述:
为手势控制无人机系统添加完整的语音反馈功能,提高用户体验和安全性

修改的详细描述

  1. 新增语音反馈系统,支持pyttsx3(离线)和gTTS(在线)两种语音引擎,自动检测可用库,优先使用离线方案,支持语音队列避免语音重叠播放
  2. 支持多平台音频播放,包括pygame播放器、pydub播放器、系统默认播放器,自动选择最适合当前环境的播放方式
  3. 语音提示覆盖主要操作流程,包括系统启动/退出提示、无人机连接成功/失败提示、起飞/降落状态播报、手势识别结果语音反馈、错误状态和警告提示
  4. 增强配置系统,新增语音配置选项,可单独控制各类语音提示的启用/禁用,可设置语音播报的最小置信度阈值,音量、语速等参数可配置
  5. 改进用户界面,状态栏显示语音系统状态,帮助菜单增加语音控制说明,新增键盘快捷键:V(切换语音)、M(测试语音)

经过了什么样的测试?

  1. 操作系统:Windows 10
  2. Python环境:Python 3.12,虚拟环境:conda, venv
  3. 语音库测试:pyttsx3在不同平台的可用性测试,gTTS + pygame/pydub组合测试,网络连接状态下的语音服务测试
  4. 功能测试:语音反馈的实时性和准确性,多线程语音队列的正确性,配置文件的保存和加载,不同手势的语音播报匹配度
  5. 性能测试:语音系统对主程序性能的影响,内存使用情况监控,CPU占用率测试

运行效果

动图、视频、截图等

default.mp4
default.mp4
default.mp4

@donghaiwang
donghaiwang merged commit 44acfef into OpenHUTB:main Dec 20, 2025
1 check passed
sda-57 pushed a commit to sda-57/nn that referenced this pull request Dec 21, 2025
* new分支:1.添加.gitignore忽略Lib目录 2.修改main.py优化无人机控制逻辑

* 改进无人机手势控制系统,优化摄像头处理和手势稳定性

* 优化手势识别算法,提升系统稳定性和用户体验

* 优化英文界面,改进手势识别算法,增强单指识别准确率

* 持续优化手势识别算法,解决位置敏感问题,增强全屏手势检测能力

* 优化手势标签显示,修复中文字体缺失导致的问号问题

* 新增:语音反馈系统,支持多平台音频播放
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants