请选择 进入手机版 | 继续访问电脑版
快捷导航
70 663

基于语音合成与机器视觉的手语翻译

HelloKitty 于 2017-12-23 15:55 发表在 [开源项目] [复制链接]
汪鑫鑫 注册会员 发表于 2017-12-29 22:09:47 from Mobile | 显示全部楼层
本帖最后由 汪鑫鑫 于 2017-12-29 22:49 编辑

2017/12/29
今日进程:完善了详细文档中的流程图
明日任务:学习opencv文档,熟悉用法

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
Connecting & Messaging from Any.
举报 使用道具
HelloKitty 中级会员 发表于 2017-12-29 20:54:52 | 显示全部楼层
已解决声卡滴滴声 通过cat 音频设备即可 不过不知缘由 语音合成库融入尝试进行中 还有个问题 语音合成外放声音太低 听不清晰
计划:尝试修改源码 提高音量
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-29 14:33:30 | 显示全部楼层
手势检测
手势分割
手势特征提取  
手势识别

完成。
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-29 11:13:59 | 显示全部楼层
修复 优化 指尖提取算法 完成
Connecting & Messaging from Any.
举报 使用道具
汪鑫鑫 注册会员 发表于 2017-12-28 22:53:22 from Mobile | 显示全部楼层
本帖最后由 汪鑫鑫 于 2018-1-4 09:46 编辑

2017/12/28
今日进程:参与指尖峰值检测算法,对指尖峰值进行修正,画了流程图
明天任务:完成详细设计文档中的流程图,以及组长分配的任务
Connecting & Messaging from Any.
举报 使用道具
HelloKitty 中级会员 发表于 2017-12-28 22:28:16 | 显示全部楼层
完成eSpeak语音合成库的裁剪移植
但A8板子在开始放语音的时候总有滴滴声 一段时间就好了 不知道原因何在
后续计划:解决滴滴声 尝试将语音合成库融入到具体的项目需求中
Connecting & Messaging from Any.
举报 使用道具
罗杨杨 注册会员 发表于 2017-12-28 19:51:38 | 显示全部楼层
今天:
       搭建了基本的服务器,按照规定的协议实现简单的客户端和服务端的互传。
明天:
        待定。。。。
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-27 16:47:26 | 显示全部楼层
anymsg_renzong 发表于 2017-12-27 16:45
掌心算法修改  采用距离变换。
指尖算法修改  凸包检测,采用峰值法与曲率法。
完成

语音可发声,,库裁剪。
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-27 16:45:01 | 显示全部楼层
本帖最后由 anymsg_renzong 于 2017-12-27 16:46 编辑

掌心算法修改  采用距离变换。
指尖算法修改  凸包检测,采用峰值法与曲率法。
完成

其他待确定 、
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-27 09:55:50 | 显示全部楼层
wifi  contex-A8  socket  完成  
Connecting & Messaging from Any.
举报 使用道具
HelloKitty 中级会员 发表于 2017-12-26 21:36:07 | 显示全部楼层
HelloKitty 发表于 2017-12-25 21:59
2017/12/25
今日:测试开源语音合成库Flite在linux环境的可行性
在最后的语音播放测试中,报错oss_audio:f ...

2017/12/26
今日:了解并尝试eSpeak arm移植 espeak库文件中有多个文件是doc格式 造成了一些阻碍 已解决一部分 还存在问题
明日 继续移植espeak库
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-26 21:31:24 | 显示全部楼层
完成 指尖特征提取,优化掌心特征提取。特征提取完成。

待确认、模块与样本相似度,手势识别。
Connecting & Messaging from Any.
举报 使用道具
罗杨杨 注册会员 发表于 2017-12-26 21:13:06 | 显示全部楼层
今天:
        学习了一下Mat矩阵的一些用法,查找了一些手势识别的算法。
明天:
        继续研究手势识别
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-26 00:54:47 | 显示全部楼层
完成掌心特征值提取 ,
Connecting & Messaging from Any.
举报 使用道具
HelloKitty 中级会员 发表于 2017-12-25 21:59:42 | 显示全部楼层
2017/12/25
今日:测试开源语音合成库Flite在linux环境的可行性
在最后的语音播放测试中,报错oss_audio:failed to open audio device /dev/dsp
原因是Flite播放需要OSS声卡驱动 而ubuntu17.04 默认是Alsa 。尝试安装OSS框架,安装成功后仍报这个错误。考虑到Flite的移植难度,打算尝试eSpeak开源库。

后期:完善WIFI模块传输C/S架构,了解espeak 尝试其裁剪移植
Connecting & Messaging from Any.
举报 使用道具
anymsg_renzong 版主 发表于 2017-12-25 21:55:31 | 显示全部楼层
完成摄像头数据采集,手势分割。手势特则提取进行中。掌心提取 指尖提取
Connecting & Messaging from Any.
举报 使用道具
汪鑫鑫 注册会员 发表于 2017-12-25 21:15:41 | 显示全部楼层
本帖最后由 汪鑫鑫 于 2017-12-26 21:35 编辑

2017/12/25
今日进程:搭建开发环境,配置开源语音合成库
明日任务:继续配置开源语音合成库,配置完成后进行测试

2017/12/26
今日进程:仍然在配置开源语音合成库,安装port Audio的时候除了问题,所以没装好
明日任务:争取解决问题,配置好环境
Connecting & Messaging from Any.
举报 使用道具
watchdog 注册会员 发表于 2017-12-25 20:26:48 | 显示全部楼层
本帖最后由 watchdog 于 2018-1-2 20:33 编辑

2017/12/25
今日进展:
在vs2015上配置了openCV,完成了环境搭建
了解了wifi的驱动模块a8开发板apm6658的一些资料
明日:
了解wifi是如何传输的

2017/12/26
今日进展:
了解wifi是如何传输的
尝试在linux下安装espeak和portaudio
明日:
初步搭建服务器与客户端之间的消息的来往
2017/12/28
今天进展:
初步搭建服务器与客户端之间的消息的来往
完成常数的宏定义
明天:
看代码整合代码vs15上的
2017/12/29
今天进展:
看代码整合代码vs15上的
明天:
Connecting & Messaging from Any.
举报 使用道具
罗杨杨 注册会员 发表于 2017-12-25 20:15:14 | 显示全部楼层
明天:
        了解一下opencv手势识别的算法
Connecting & Messaging from Any.
举报 使用道具
罗杨杨 注册会员 发表于 2017-12-25 20:11:21 | 显示全部楼层
今天:
        在vs2015上配置了opencv。

        开始打不开mp4视频文件,然后通过百度
        解决了这个问题。
Connecting & Messaging from Any.
举报 使用道具
chinmel 版主 发表于 2017-12-23 17:32:49 from Mobile | 显示全部楼层
本地识别,考虑多核,高主频处理器。A8够呛吧。或者,传到PC上做。
Connecting & Messaging from Any.
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

推荐板块

精彩推荐

热门排行

明星用户

手机版|小黑屋|AnyMSG ( ©AnyMSG 2009 - 2017 · ICP备16009991号 )

GMT+8, 2019-2-18 19:55