草庐IT

Motionverse

全部标签

数字人系列四:Motionverse 接入chatgpt、文心一言等国内外大语言模型

1.下载插件:motionverse官网地址:概述 · Motionverse 接口文档 (deepscience.cn)2.按照官方文档新建Unity工程:对接说明 · Motionverse 接口文档 (deepscience.cn)3.通过我们自己的ASR,将语音转换为文本,文本通过大语言模型(chatgpt、文心一言以及其他大语言模型)生成的结果,直接通过生成式AI技术,把文本转化为AI智能体的声音、动作和表情,和大语言模型完美连接,只需要在获取到文本的时候调用以下代码即可:代码示例:DriveTasktask=newDriveTask();task.player=player;tas

Unity+讯飞语音+讯飞星火+Motionverse打造智能数字人

Unity+讯飞语音+讯飞星火+Motionverse打造智能数字人不废话,先来效果视频unity+讯飞语音识别+讯飞星火大模型+Motionver然后说说原理要实现这个,主要的实现三个模块的接入:语音识别。作用是吧麦克风的语音转化为gpt大模型能够识别的文字。然后发给gpt。GPT大模型。作用当然是把第一步中生成的问题文字转换为解答文本。数字人驱动。作用使用文字内容,驱动数字人的动作,并生成语音进行播报。下面说说具体的接入步骤以及遇到的坑,还有解决方案一、接入讯飞语音这个是三个模块中接入最顺利的了。开通的方法很简单,去讯飞开放平台,注册一个账号,创建好应用,领取一下新人福利,就能获取5000