草庐IT

Insights直播回顾——手语服务,助力沟通无障碍

HMS Core 2023-03-28 原文

HMS Core Insights第九期直播–手语服务,助力沟通无障碍,已于12月29日圆满结束,本期直播与小伙伴们一同了解了HMS Core手语服务的亮点特性、底层技术以及演进规划,下面我们一起来回顾本次直播的精彩内容吧!

【内容回顾】

1、 亮点特性——中文手语生成与虚拟形象展示。

2、 刨根问底——支撑手语服务功能实现的技术细节。

3、 循序渐进——手语服务在语种、词库以及手语识别上的演进规划。

【专家观点】

Andy, 华为AI算法专家

华为在很早之前就开始了无障碍沟通方面的探索,经过不断地积累与探索,我们将HMS Core手语服务这套能力开放出来,让更多开发者能够一起为无障碍沟通环境的建设添砖加瓦,也能在持续的应用与反馈中,不断完善手语服务的各项功能。

Jason,华为计算机视觉算法专家

HMS Core手语服务中,手语动作清晰、准确的表达是核心。我们基于业界领先的深度神经网络技术,实时将输入文本翻译为时序稳定、连贯且符合听障人群中手语使用者表达习惯的手语动作数据,同时,手语生成不仅包括手部动作和身体姿态,还支持10种面部表情的生成,力求准确表达。

郑璇,手语语言学顾问

无障碍沟通环境的建设目前已经成为了社会趋势,HMS Core手语服务通过先进技术的运用,为无障碍沟通环境的建设提供了技术基础,也让更多的开发者有能力,用科技帮助听障人群中手语使用者更好更便捷地生活。

【精彩答疑】

Q1:手语服务目前都有哪些亮点特性?

A:HMS Core手语服务是华为面向开发者提供的手语生成能力,其能够将文本实时翻译为流畅、自然且符合听障人群表达习惯的手语动作数据。此外,手语服务还能够通过数字人形象,清晰准确地表达包括手部动作、身体姿态以及面部表情在内的手语动作。

Q2:手语服务的功能是基于哪些技术实现的?

A: 手语服务的功能实现主要由基于机器翻译的手语转写模块和基于多模态融合的手语动作表情生成模块组成。通过自研中文预训练语言模型、整体替代机制以及加速技术整体提升了手语转写的精度及速度;通过多模态动作表情融合生成技术,手语服务能够实现自然连贯的手语动作生成,在高质量动捕数据较少的情况下,提高生成动作的准确性、平滑性。

Q3:开发者可以通过手语服务在哪些场景下应用?

A: 手语服务覆盖日常生活词汇,满足和家人、朋友在聊天、就餐、购物等应用场景,实现沟通无障碍;手语服务还完全遵循《国家通用手语词典》所列出的语法规则,不仅会《国家通用手语词典》里的8214个常用词,还会许多高频词汇,帮助普及国家通用手语标准,帮助听障儿童学习阅读,实现手语教学,此外手语服务还能够丰富听障人群的社会信息获取途径,拉近听障人群和社会的距离。

Q4:手语服务未来的演进规划是什么?

A: 针对现有能力,手语服务会进一步扩充词汇覆盖,满足更多场景应用,同时也将丰富数字人表情姿态,让手语动画更全面准确。手语服务还将进一步开放新功能,为更多的听障人士建立无障碍沟通环境。

【了解更多】

如果你还想回顾更多直播精彩瞬间,欢迎登录华为开发者学堂查看直播回放

如果你对手语服务感兴趣,欢迎登录手语服务首页了解更多技术细节。

了解更多详情>>

访问华为开发者联盟官网
获取开发指导文档
华为移动服务开源仓库地址:GitHubGitee

关注我们,第一时间了解 HMS Core 最新技术资讯~

有关Insights直播回顾——手语服务,助力沟通无障碍的更多相关文章

  1. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

    我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封,在我看来soap请求没有正确的命名空间。任何人都可以建议我

  2. ruby - 具有身份验证的私有(private) Ruby Gem 服务器 - 2

    我想安装一个带有一些身份验证的私有(private)Rubygem服务器。我希望能够使用公共(public)Ubuntu服务器托管内部gem。我读到了http://docs.rubygems.org/read/chapter/18.但是那个没有身份验证-如我所见。然后我读到了https://github.com/cwninja/geminabox.但是当我使用基本身份验证(他们在他们的Wiki中有)时,它会提示从我的服务器获取源。所以。如何制作带有身份验证的私有(private)Rubygem服务器?这是不可能的吗?谢谢。编辑:Geminabox问题。我尝试“捆绑”以安装新的gem..

  3. ruby-on-rails - 启动 Rails 服务器时 ImageMagick 的警告 - 2

    最近,当我启动我的Rails服务器时,我收到了一长串警告。虽然它不影响我的应用程序,但我想知道如何解决这些警告。我的估计是imagemagick以某种方式被调用了两次?当我在警告前后检查我的git日志时。我想知道如何解决这个问题。-bcrypt-ruby(3.1.2)-better_errors(1.0.1)+bcrypt(3.1.7)+bcrypt-ruby(3.1.5)-bcrypt(>=3.1.3)+better_errors(1.1.0)bcrypt和imagemagick有关系吗?/Users/rbchris/.rbenv/versions/2.0.0-p247/lib/ru

  4. ruby-on-rails - s3_direct_upload 在生产服务器中不工作 - 2

    在Rails4.0.2中,我使用s3_direct_upload和aws-sdkgems直接为s3存储桶上传文件。在开发环境中它工作正常,但在生产环境中它会抛出如下错误,ActionView::Template::Error(noimplicitconversionofnilintoString)在View中,create_cv_url,:id=>"s3_uploader",:key=>"cv_uploads/{unique_id}/${filename}",:key_starts_with=>"cv_uploads/",:callback_param=>"cv[direct_uplo

  5. ruby - 用 Ruby 编写一个简单的网络服务器 - 2

    我想在Ruby中创建一个用于开发目的的极其简单的Web服务器(不,不想使用现成的解决方案)。代码如下:#!/usr/bin/rubyrequire'socket'server=TCPServer.new('127.0.0.1',8080)whileconnection=server.acceptheaders=[]length=0whileline=connection.getsheaders想法是从命令行运行这个脚本,提供另一个脚本,它将在其标准输入上获取请求,并在其标准输出上返回完整的响应。到目前为止一切顺利,但事实证明这真的很脆弱,因为它在第二个请求上中断并出现错误:/usr/b

  6. ruby-on-rails - 在 Rails 中调试生产服务器 - 2

    您如何在Rails中的实时服务器上进行有效调试,无论是在测试版/生产服务器上?我试过直接在服务器上修改文件,然后重启应用,但是修改好像没有生效,或者需要很长时间(缓存?)我也试过在本地做“脚本/服务器生产”,但是那很慢另一种选择是编码和部署,但效率很低。有人对他们如何有效地做到这一点有任何见解吗? 最佳答案 我会回答你的问题,即使我不同意这种热修补服务器代码的方式:)首先,你真的确定你已经重启了服务器吗?您可以通过跟踪日志文件来检查它。您更改的代码显示的View可能会被缓存。缓存页面位于tmp/cache文件夹下。您可以尝试手动删除

  7. 报告回顾丨模型进化狂飙,DetectGPT能否识别最新模型生成结果? - 2

    导读语言模型给我们的生产生活带来了极大便利,但同时不少人也利用他们从事作弊工作。如何规避这些难辨真伪的文字所产生的负面影响也成为一大难题。在3月9日智源Live第33期活动「DetectGPT:判断文本是否为机器生成的工具」中,主讲人Eric为我们讲解了DetectGPT工作背后的思路——一种基于概率曲率检测的用于检测模型生成文本的工具,它可以帮助我们更好地分辨文章的来源和可信度,对保护信息真实、防止欺诈等方面具有重要意义。本次报告主要围绕其功能,实现和效果等展开。(文末点击“阅读原文”,查看活动回放。)Ericmitchell斯坦福大学计算机系四年级博士生,由ChelseaFinn和Chri

  8. ruby - 我的 Ruby IRC 机器人没有连接到 IRC 服务器。我究竟做错了什么? - 2

    require"socket"server="irc.rizon.net"port="6667"nick="RubyIRCBot"channel="#0x40"s=TCPSocket.open(server,port)s.print("USERTesting",0)s.print("NICK#{nick}",0)s.print("JOIN#{channel}",0)这个IRC机器人没有连接到IRC服务器,我做错了什么? 最佳答案 失败并显示此消息::irc.shakeababy.net461*USER:Notenoughparame

  9. ruby - Rails 开发服务器、PDFKit 和多线程 - 2

    我有一个使用PDFKit呈现网页的pdf版本的Rails应用程序。我使用Thin作为开发服务器。问题是当我处于开发模式时。当我使用“bundleexecrailss”启动我的服务器并尝试呈现任何PDF时,整个过程会陷入僵局,因为当您呈现PDF时,会向服务器请求一些额外的资源,如图像和css,看起来只有一个线程.如何配置Rails开发服务器以运行多个工作线程?非常感谢。 最佳答案 我找到的最简单的解决方案是unicorn.geminstallunicorn创建一个unicorn.conf:worker_processes3然后使用它:

  10. ruby - Dropbox 类似 git 的服务——没有 rsync 和 inotify - 2

    关于如何使用git设置类似Dropbox的服务,您有什么建议吗?您认为git是解决此问题的合适工具吗?我在考虑使用git+rush解决方案,你觉得怎么样? 最佳答案 检查这个开源项目:https://github.com/hbons/SparkleShare来自项目的自述文件:Howdoesitwork?SparkleSharecreatesaspecialfolderonyourcomputer.Youcanaddremotelyhostedfolders(or"projects")tothisfolder.Theseprojec

随机推荐