数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库)

这篇具有很好参考价值的文章主要介绍了数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

最近有很多数字人开发者看了B站频道”小智同学来了”,找我们要了源码和教程,开发者反馈了一些问题,希望我们提供详细的教程,我们也将一些反馈整理如下:
1、NLP文字OnNLPDrive()函数的调用传参,需要注意只能传文本语音(语音文件链接(.wav, .mp3)或者内容为语音base64的文件链接(.json));不能是音乐、纯电音等音频。
解决方案:
文本文字免费转URL语音音频链接:https://www.text-to-speech.cn
测试音频:ds-model-tts.tos-cn-beijing.volces.com/temp/168956149023317142.wav

2、整个Demo项目跑下来,蛮有意思的、对于想用Unity开发数字人还是很方便。调用Motionverse 3种API接口,直接驱动数字人进行语音播报及对应的面部表情和肢体动作。

3、希望能够提供导入自己数字人使用教程,本版本使用平台提供的数字人,下个版本会做Ready Player Me导入教程

以下是文字教程:

一、Unity3D安装

Unity3D(我的Unity3D是2022.3.0f1c1最新版本
引用原作者:Dugege007的Unity3D保姆级安装教程
https://blog.csdn.net/Dugege007/article/details/128472571

二、进入Motionverse官网

数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity1、注册Motionverse账号:http://motionverse.deepscience.cn/#/
Motionverse是一款面向开发者的业务中台,利用AI技术,提供多模态实时驱动虚拟数字人的解决方案。它通过SDK和管理后台,解决产品和终端的虚拟数字人驱动问题。在元宇宙世界中,Motionverse能满足大量虚拟数字人的动作表情需求,通过各种输入情况,智能实时生成所需的动作表情和口型。作为中台产品,Motionverse以API/SDK的形式,向行业开放性提供解决方案,使数字人驱动变得更简单,更实时,更低成本。
数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity2、创建应用: 请按下图5步骤实现。
3、点击“配置" 获取应用的AppID和Secret号,同时设置数字人的声音、问答库。
数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity恭喜你、到这里你就已经完成了前期的Unity3D环境搭建、数字人驱动应用API接口的设置。


4、下一步就是创建Unity3D项目、下载Motionverse插件且导入数字人资源包到Unity3D项目内、数字人驱动数据配置。
数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity

5.补充“对接说明”中如何快速导入Unity3D插件资源。
数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity注意:对于Unity2022版本,需要在Player设置中允许Http下载,否则会报错。

三:Motionverse模型三大接口测试

1、打开Sample脚本文件、分别简单使用声音文件OnAudioUrlDrive()函数、文字OnTextDrive()函数、NLP文字OnNLPDrive()函数,等3种函数驱动数字人。
数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity

  • 效果如下:

数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库),数字人,语音识别,人工智能,gpt,AIGC,gpu算力,unity整个Demo项目跑下来,蛮有意思的、对于想用Unity开发数字人还是很方便,调用Motionverse 3种API接口,直接驱动数字人进行语音播报及对应的面部表情和肢体动作。
 文章来源地址https://www.toymoban.com/news/detail-736866.html

到了这里,关于数字人系列一:10分钟打造AI对话数字人(平台提供数字人和问答库)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【元壤教育AI提示工程】Midjourney神器助力,设计小白3分钟轻松打造炫酷海报!

    前言 关注「元壤教育」公众号,系统学习更多AIGC课程。 看完这篇实操教程,设计师该领盒饭了,哈哈,开个玩笑,各位老板看着办。 本教程针对完全没有设计基础的老板们,手把手教你3分钟利用Midjourney轻松打造炫酷海报。 这里有两种方法,不过本教程我们先讲解第二种。

    2024年02月12日
    浏览(42)
  • 10分钟极速部署开源监控平台HertzBeat

    接入HertzBeat(赫兹跳动),开源监控平台 前言 监控平台介绍 该监控平台可使用 docker 快速部署,可周期性监控各 API,数据库等状态,并提供比较完整的可视化功能。监控平台已经集成异常通知,方式包括 webhook、企微钉钉飞书通知机器人、邮件。这些功能已经完全满足我们的日

    2024年02月09日
    浏览(48)
  • 免费打造个人专属的高颜值本地大模型AI助手,无限量使用 Ollama+LobeChat开源工具,在本地运行AI大模型,安全的和AI对话。

    第一步,首先安装ollama,选择对应系统的安装包 ollama官网地址:https://ollama.com/ 本问是lunix系统上安装ollama: 如果机子没有GPU显卡的话,ollama会提示只通过cpu模式运行。 测试ollama命令: 想要流畅运行,推荐配置: 4b的模型:8GB内存。 7b的模型:16GB内存。 13b模型: 32GB内存。 70b模

    2024年04月26日
    浏览(45)
  • 打造AI虚拟数字人,Stable Diffusion+Sadtalker教程

    站长笔记 2 个月前 1 1k Stable Diffusion是一个能够根据 文本描述生成高质量图片的深度学习模型 ,它使用了一种叫做 潜在扩散模型的生成网络架构 ,可以在普通的GPU上运行。Sadtalker是一个能够根 据图片和音频生成 视频的开源项目 ,它使用了一种叫做 SadNet的神经网络 ,可以

    2024年02月11日
    浏览(75)
  • 云游长江大桥,3DCAT实时云渲染助力打造沉浸化数字文旅平台

    南京长江大桥 是中国第一座自主设计建造的双层公路铁路桥,也是世界上最早的双层公路铁路桥之一。它不仅是一座桥梁,更是一座历史文化的见证者和传承者。它见证了中国人民的智慧和奋斗,承载了中国社会的变迁和发展。 如何让这座不可移动的文物活起来,让更多的

    2024年02月06日
    浏览(49)
  • Stable Diffusion 30分钟打造AI 写真照片生成器|海马体照相馆这次真的要木得了

    这次,海马体照相馆可能真的要木得了!! 前有妙鸭相机这种付费傻瓜式的 AI 写真程序,后有 Stable Diffusion 定制属于自己的 Lora 模型的围攻。 但今天要分享的确实一个叫 EasyPhoto 的 AI 写真照片生成器! 免费,使用起来却非常简单。 EasyPhoto 是一款 Stable diffusion 插件,用于生

    2024年02月21日
    浏览(82)
  • 智慧用电,同为云(TOWE Cloud)平台为机房供配电提供数字化赋能

    随着现代数字经济的快速发展,机房智能供配电监控系统是所有电源和电气设备统一管理监控的重要核心部分,除了可以确保电源和动力系统正常运行外,还可以大大提高工作效率,节省能源消耗。智能供配电监控系统通过传感器、数据采集器等方式实现电力系统数据的传输

    2024年01月25日
    浏览(50)
  • 几分钟,教你搭个 AI 绘画平台~

    大家好,我是程序员鱼皮。 AI 绘画是 23 年最火的技术之一。对程序员来说,以前我们想做个网站,会经常因为没有图片素材而发愁;而现在用 AI 绘画技术,想要什么图片, 只要输入文字就能快速生成了 。 比如我们公司官网的主图,就是用 AI 绘画生成的,效果非常惊艳!

    2024年02月03日
    浏览(34)
  • AI电诈—10分钟被骗430万

    最近比较热门的AI电信诈骗应该是“福州市某科技公司法人代表郭先生10分钟内被骗430万元”,诈骗过程如下: 4月20日中午,郭先生的好友突然通过微信视频联系他,自己的朋友在外地竞标,需要430万保证金,且需要公对公账户过账,想要借郭先生公司的账户走账。基于对好

    2024年02月08日
    浏览(41)
  • 对话式 AI 项目实战系列 NLP 篇 (173)

    作者:禅与计算机程序设计艺术 随着人工智能技术的发展和落地,对话系统、机器学习和自然语言处理等新兴领域成为热门研究方向。而在此过程中,数据积累、训练模型和部署上线都是一个非常复杂的过程,如何更加有效、准确地完成这些任务就成为了一个重要问题。本期

    2024年02月07日
    浏览(42)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包