本文将介绍一款简易数字语音识别系统的开发,可用作课程设计、或本科毕业设计开发的参考材料。
该系统以python作为开发工具,采用深度学习+flask+微信小程序为框架开发的一款数字语音识别小程序,适用于初学者了解深度学习、微信小程序以及简易服务器的开发,整个开发过程简介、快速。可作为课程设计、毕业设计的开发使用和参考。**本项目将上传该项目的所有源码(包括深度学习、flask服务器代码、以及数据集处理代码)、设计文档、ppt、演示视频。


2018年1月,科大讯飞经过研究提出来一种基于深度学习的全序列卷积神经网络DFCNN的语音识别框架,如图2.1.2所示。采用该方法的语音识别模型在语音识别准确率上取得较高的突破,通过采用语谱图作为输入,避免了信息在频域和时域上的丢失,并结合CTC技术,实现了端到端的声学模型训练,并且和BLSTM-CTC 系统相比,在系统性能方面获得了15%的提升。

有关该模型的具体内容就不做详细的介绍,感兴趣的开源直接区阅读作者的论文或者查看本项目上传的说明文档第三章节的内容
话不多说,直接进行该框架系统的设计介绍**(本文主要进行该系统的设计介绍,关于该项目的代码集详细的设计文档将在在文章末尾将给出连接)**
(1)前端系统设计应能实现语音的录制和识别结果的显示,并正对语音录制过程中的异常状态进行处理;
(2)构建前端和后台通讯的服务器,实现对前端功能的监听和接收录制的语音文件,以及识别结果的返回;
(3)系统服务器能够对语音录制后的语音文件进行编码处理,将其转换为CNN-CTC声学模型可识别的语音文件,并临时保存到规定文件夹中,用作后期模型训练的语料数据;
(4)系统服务器在启动时只对模型进行一次加载,避免每次有语音数据时都需重新加载模型的弊端,减少了内存的使用量。
对于一个语音识别系统,不仅要能够对语音进行录制,同时还需要能够对语音进行识别及显示,实现该过程的整个流程如图。

前端系统主要采用小程序的形式来呈现,利用小程序开发软件进行语音识别前端系统的设计开发。由于小程序在登录时需获取用户头像信息,用于后期语音识别交互,在用户进入小程序之前,设置一个登录授权界面,既获取用户头像信息

在确定好系统信息交互方式后,需进行语音录制相关功能的设计,其相关的功能主要有一下几点:
(1)语音录制按钮的弹出;
(2)录制出错信息提示;
(3)语音发送失败信息提示。

服务器主要实现前端微信小程序与后端的通信,所以服务器的设计以本地计算机为载体,在同一个局域网下进行信息传递和系统检测,关于服务器的设计开发采用Python编码语言,调用第三方Flask模块库构建一个轻量级的web服务器。
采用Flask构建的服务器在功能上应包含以下几点:
(1)能够对前端用户登录时的信息进行采集,并判断小程序是否成功连接上服务器;
(2)能接受前端所发送的语音信息,对其进行格式转换,并保存到零时的地址文件中,用于语音识别以及作为语音训练的素材;
(3)服务器在启动时,自动的加载声学模型和训练数据;
(4)当有语音传入时自动的调用以加载的声学模型进行语音识别,并将识别结果解码为文字信息返回到前端系统;
(5)服务器应设置有错误监测机制,当语音在识别过程中出现错误,或识别终止时,向用户返回错误提示信息,告知用户需重新录制语音进行识别。
服务器的具体工作流程如图所示

在确定语音录制过程无误后,将对语音的识别性能进行测试,分别在移动端录制五段语音,查看每段语音的识别情况,其结果如图所示

我需要在客户计算机上运行Ruby应用程序。通常需要几天才能完成(复制大备份文件)。问题是如果启用sleep,它会中断应用程序。否则,计算机将持续运行数周,直到我下次访问为止。有什么方法可以防止执行期间休眠并让Windows在执行后休眠吗?欢迎任何疯狂的想法;-) 最佳答案 Here建议使用SetThreadExecutionStateWinAPI函数,使应用程序能够通知系统它正在使用中,从而防止系统在应用程序运行时进入休眠状态或关闭显示。像这样的东西:require'Win32API'ES_AWAYMODE_REQUIRED=0x0
Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时,rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack
我想用ruby编写一个小的命令行实用程序并将其作为gem分发。我知道安装后,Guard、Sass和Thor等某些gem可以从命令行自行运行。为了让gem像二进制文件一样可用,我需要在我的gemspec中指定什么。 最佳答案 Gem::Specification.newdo|s|...s.executable='name_of_executable'...endhttp://docs.rubygems.org/read/chapter/20 关于ruby-在Ruby中编写命令行实用程序
我构建了两个需要相互通信和发送文件的Rails应用程序。例如,一个Rails应用程序会发送请求以查看其他应用程序数据库中的表。然后另一个应用程序将呈现该表的json并将其发回。我还希望一个应用程序将存储在其公共(public)目录中的文本文件发送到另一个应用程序的公共(public)目录。我从来没有做过这样的事情,所以我什至不知道从哪里开始。任何帮助,将不胜感激。谢谢! 最佳答案 无论Rails是什么,几乎所有Web应用程序都有您的要求,大多数现代Web应用程序都需要相互通信。但是有一个小小的理解需要你坚持下去,网站不应直接访问彼此
我尝试运行2.x应用程序。我使用rvm并为此应用程序设置其他版本的ruby:$rvmuseree-1.8.7-head我尝试运行服务器,然后出现很多错误:$script/serverNOTE:Gem.source_indexisdeprecated,useSpecification.Itwillberemovedonorafter2011-11-01.Gem.source_indexcalledfrom/Users/serg/rails_projects_terminal/work_proj/spohelp/config/../vendor/rails/railties/lib/r
刚入门rails,开始慢慢理解。有人可以解释或给我一些关于在application_controller中编码的好处或时间和原因的想法吗?有哪些用例。您如何为Rails应用程序使用应用程序Controller?我不想在那里放太多代码,因为据我了解,每个请求都会调用此Controller。这是真的? 最佳答案 ApplicationController实际上是您应用程序中的每个其他Controller都将从中继承的类(尽管这不是强制性的)。我同意不要用太多代码弄乱它并保持干净整洁的态度,尽管在某些情况下ApplicationContr
我是一个Rails初学者,但我想从我的RailsView(html.haml文件)中查看Ruby变量的内容。我试图在ruby中打印出变量(认为它会在终端中出现),但没有得到任何结果。有什么建议吗?我知道Rails调试器,但更喜欢使用inspect来打印我的变量。 最佳答案 您可以在View中使用puts方法将信息输出到服务器控制台。您应该能够在View中的任何位置使用Haml执行以下操作:-puts@my_variable.inspect 关于ruby-on-rails-如何在我的R
我正在尝试解析一个CSV文件并使用SQL命令自动为其创建一个表。CSV中的第一行给出了列标题。但我需要推断每个列的类型。Ruby中是否有任何函数可以找到每个字段中内容的类型。例如,CSV行:"12012","Test","1233.22","12:21:22","10/10/2009"应该产生像这样的类型['integer','string','float','time','date']谢谢! 最佳答案 require'time'defto_something(str)if(num=Integer(str)rescueFloat(s
如何检查Ruby文件是否是通过“require”或“load”导入的,而不是简单地从命令行执行的?例如:foo.rb的内容:puts"Hello"bar.rb的内容require'foo'输出:$./foo.rbHello$./bar.rbHello基本上,我想调用bar.rb以不执行puts调用。 最佳答案 将foo.rb改为:if__FILE__==$0puts"Hello"end检查__FILE__-当前ruby文件的名称-与$0-正在运行的脚本的名称。 关于ruby-检查是否
是否可以在应用程序中包含的gem代码中知道应用程序的Rails文件系统根目录?这是gem来源的示例:moduleMyGemdefself.included(base)putsRails.root#returnnilendendActionController::Base.send:include,MyGem谢谢,抱歉我的英语不好 最佳答案 我发现解决类似问题的解决方案是使用railtie初始化程序包含我的模块。所以,在你的/lib/mygem/railtie.rbmoduleMyGemclassRailtie使用此代码,您的模块将在