虚拟数字人几近真人?“造假”过程大公开

近来虚拟人呈现井喷式发展,银行、媒体、美妆等不同行业纷纷推出自己的虚拟人,一时之间AYAYI、Ling、柳夜熙等各式各样风格鲜明的虚拟人类走进了大众视野。那么到底什么是虚拟数字人?根据中国人工智能产业发展联盟发布的《2020年虚拟数字人发展白皮书》,虚拟数字人是具有数字化外形的虚拟人物,应具备人的外观、人的行为、人的思想。

虚拟数字人形象上分为2D和3D两大类,外形风格上又分为卡通、拟真、写实等类型。比如Ling、柳夜熙等就是典型的3D超写实虚拟数字人。超写实是指人物外观仿真度高,栩栩如生,这种虚拟人需要面部面数在1万面以上,高精度经得起360度无死角的怼拍。面部材质不仅十分接近真实皮肤的质感,还可以根据相机的距离进行自动优化,皮肤、五官、头发、肢体几近真人。

大家是不是很好奇,这种3D超写实虚拟数字人是怎么创造出来的?简单来说,一个3D虚拟数字人的制作需要经过形象生成、动画生成、语音生成三个环节。形象生成决定了虚拟人的长相,动画生成能够让虚拟人灵活地动起来,而语音生成则是让虚拟人开口说话,进行表达和交互。

一、形象生成

形象生成部分最重要的是建模,常见的建模方式有手工建模,扫描建模和AI建模。随着科技的发展,效率更高的扫描建模和Al建模技术逐渐成为人物建模的主流方式。央视网数字虚拟小编小C就是采用了相机阵列扫描方式进行建模,在集成了100多台相机的扫描棚中,只需很短的采集时间,大量的面部和身体数据被采集到系统中,通过算法处理获得最原始的三维人物模型数据。另外为了采集的形象更加精准还可以采用更为先进的4D扫描技术,相比3D扫描能捕捉面部更细微的动作,采集更丰富的动态数据。

建模完成后要想让冰冷的模型动起来,还需要进行一系列绑定和驱动。骨骼和肌肉绑定决定了模型后续的肢体动作和面部表情的自然度和流畅性。目前有骨骼绑定和混合变形绑定两种主流方式,而驱动分为真人驱动和智能驱动,真人驱动是指通过捕捉技术采集真人演员的动作和面部表情数据之后将这些数据迁移合成到虚拟数字人身上,光学捕捉和惯性捕捉是常见的动捕方式,但都需要穿戴动捕设备,使用门槛较高。而近年来基于计算机视觉的捕捉技术发展迅猛,超写实虚拟数字人的面部表情捕捉还可以通过一个景深摄像头采集真人的面部3D点阵云图,然后实时地将面部动作和表情迁移到虚拟人的身上,相比需要穿戴动捕设备、租赁动捕棚的方式,驱动虚拟人只需要一台手机,使操作流程更加方便。

二、动画生成

有了绑定和驱动,还需要通过渲染来生成动画,渲染分为实时渲染和离线渲染,为实现虚拟数字人的实时操控与实时交互各大渲染引擎一直在发力突破算法,提升实时渲染效率,希望在实时渲染的画面质量、渲染速度、计算资源三者中取得最优解。

三、语音生成

形象和动作都完成后就是让虚拟人开口说话,虚拟数字人的语音可以使用合成语音或者真人语音,经过人工智能技术加上持续训练合成语音会越来越类似真人语音的声调、节奏和抑扬顿挫,并能实时对应唇型,而真人语音就是直接使用中之人的声音或者声优配音,还可以通过声音变声器,把中之人的声音转换为同一种声音,这样即使中之人怎么变换,声音也不会变,为虚拟人形象人设的稳定提供了一定的便利。

虚拟数字人是科技与艺术的完美结合,不知不觉间,越来越多的数字虚拟人逐渐走进社会的各个环节,通过不同的形象、性格、功能给大家习以为常的工作和生活带来更新鲜、更具温度的体验。这得益于整个行业对数字虚拟人技术的一次次创新和推动,以及玩家们不断尝试打破技术疆界,促进技术融合的尝试,在未来充满想象的虚拟空间中虚拟数字人也是更自由、更理想化的人类的投射,而七维科技和增拓作为行业内虚拟人技术的提供者,也正努力地朝着智能化、个性化的路径发展,用技术为各行各业实现创新赋能。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/42796.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

虚拟数字人有哪些应用场景和用途?

近几年,元宇宙概念下的重要资产“虚拟数字人”崛起,作为未来人类进入元宇宙的媒介,虚拟数字人随着理论与技术的革新,应用范围正在不断扩大。那么虚拟数字人都有哪些应用场景和用途呢? 一、教育 虚拟数字人可以辅助老师…

怎么利用AI虚拟数字人创业,都有哪些AI数字虚拟人项目可操作。

随着数字化的快速发展,数字人成为了越来越受欢迎的创业领域。数字人是指由人工智能技术和人工智能算法构建而成的虚拟人物,可以模拟人类的语言、思维和情感等能力。数字人的出现给我们带来了创新的商业模式和巨大的商业机会。那么,如何利用数…

想知道同声翻译在线翻译怎么操作吗?很简单,只需4步

你知道同声翻译在线翻译怎么操作吗?随着全球化的不断发展,越来越多的人需要与来自不同国家的人交流。为了实现跨语言的沟通,同声翻译技术越来越受到欢迎。 下面将介绍4款支持同声翻译在线翻译功能的软件,希望可以帮助到大家。 方法…

如何进行同声翻译?这些同声翻译在线翻译方法大家都在用

在座的各位以后有没有出国求学或者旅游的计划呀,像我英语不太好,话到嘴边常常不知道怎么表达,在国内路上遇到热情的外国人也只会一句“How are you”外加肢体语言连比带画的,但是坚定想要出国的小伙伴们也不要担心自己语言不通&am…

手机同声传译软件有哪些?推荐四款软件实时翻译软件

小伙伴们有时候会在街上或者旅游景点遇到外国人吗?他们有可能向我们问路、问好玩的地方、问美食推荐等等,但如果我们因为外语水平不好,而导致语言不通,很难跟他们进行交流,这个时候应该怎么办呢?其实可以借…

同声传译在线软件有什么?推荐这些实时翻译软件给你

当在街上遇到问路的外国友人或者想要去国外游玩的时候,我们就可以借助同声传译软件将说的话进行实时翻译,流利的解答外国友人问的问题以及不用担心去国外会语音不通了。 那么小伙伴们知道同声传译在线软件有什么吗?不知道的话,可…

【经验分享】PC端免费高效的同声翻译

2022.09.26 谷歌翻译退出中国市场 translate.googleapis.com 与 谷歌翻译web translate.google.cn现在无法用了 最新解决方法见 https://blog.csdn.net/sinat_24092079/article/details/127133879 疫情期间上网课,对于英语听力较差或者需要观看英文视频&#xff0c…

这3个好用的同声传译app,让你知道有什么同声传译软件推荐

随着社会生活质量的提升,跨文化交流越来越频繁,现在市面上有许多功能丰富、操作简单、翻译准确的同声传译软件,只要使用其中的“同声传译”,就可以实现跨语种和外国人进行沟通了。那么有什么同声传译app推荐呢?今天我就…

图像风格快速迁移tensorflow实战

引言 需要解决的问题是:利用tensorflow的快速风格迁移功能,把一张qq的logo图片转换成《星空》油画的风格,并打印输出。 如图所示,最右边图像是输入结果,左边两图是输入: 一、操作步骤 通过两天的学习&am…

使用PyTorch搭建VGG模型进行图像风格迁移实战(附源码和数据集)

需要源码和图片集请点赞关注收藏后评论区留言或者私信~~~ 一、VGG模型 VGG模型是科学家们提出的图像分类模型,这一模型采用了简单粗暴的堆砌33卷积层的方式构建模型,并花费大量的时间逐层训练,最终在ImageNet图像分类比赛中获得了亚军&#…

Pytorch 使用GAN实现二次元人物头像生成 保姆级教程(数据集+实现代码+数学原理)

Pytorch 使用DCGAN实现二次元人物头像生成(实现代码公式推导) GAN介绍 算法主体 推导证明(之后将补全完整过程) 随机梯度下降训练D,G DCGAN介绍及相关原理 Pytorch实现二次元人物头像生成 如何使用GAN生成二次元头像 数据准备 代码实现 判别、生成模型…

GAN动漫人像生成实现(附带源码)

基于生成对抗网络的人像转卡通像实现 写在前面先来看看效果吧大家最想要的项目原理简介(2021/11/16更)本项目C和Pytorch的OnnxRuntime使用方法(2022/1/3更)APP的代码(2022/4/4更)双城之战风格迁移数据集写在后面 写在前面 天气晴朗万物可爱,希望通过这篇文章对大家…

NVIDIA的StyleGAN、StyleGAN2、StyleGAN3系列论文解读,梳理基于风格的生成器架构

通俗来讲就是,张三造假币(Generator生成器),然后用验钞机去验证真假(Discriminator辨别器),如果是假的就继续提高造假技术,直到验钞机检验不出来为止,也就是说一个造假一个验假(验钞机也需升级),两者互相学…

AI绘画突然爆火?快速体验二次元画师NovelAI(diffusion)

目录 0 写在前面1 diffusion vs GAN2 NovelAI3 AI绘画环境搭建4 体验AI创作 0 写在前面 机器学习强基计划聚焦深度和广度,加深对机器学习模型的理解与应用。“深”在详细推导算法模型背后的数学原理;“广”在分析多个机器学习模型:决策树、支…

女神青涩时纤毫毕现,腾讯 AI 模型 GFPGAN 火上 GitHub 热榜第一,Demo 在线可玩

来源:量子位 作者:明敏 包浆老图立刻清晰到头发丝是一种怎样的体验?看这明亮的眼眸、清晰的发丝,原本模糊的人像立刻添了几分灵动(这就是用 AI 修复的高圆圆童年照)。 甚至时间更久远的历史名人照片也能搞…

游戏原画师

常用软件: 1. Photoshop著名的图形处理软件,也能绘画,适合绘画功底一般的初学者。 2. Painter很多专业人士都很爱用的一款软件。笔刷很多,适合有一定美术功底的人。 3. Sai画漫画的话,sai就比较好用了,对…

chatgpt赋能python:Python与前端连接:使用Python的Web框架构建后端API

Python与前端连接:使用Python的Web框架构建后端API Python是一种强大的编程语言,越来越受到开发者的欢迎。但是,对于Web开发,Python并不是一种前端语言。那么,如何将Python的后端与前端连接起来?本文将介绍…

Vue前端Flask后端

项目构建 本科期间因为学过相关课程,已经配好了相关的环境,所以直接进行了版本确认。 一、Vue2 1. 前端环境确认 Vue:3.2.47 | 踩过的坑使用1的时候一直为empty,加 -g仍是empty 在项目下1,非项目下要用2 1$ npm in…

chatgpt赋能python:Python前端与后端的数据交互

#Python前端与后端的数据交互 在现代Web应用程序中,前端与后端的数据交互至关重要。前端可能需要向后端发出请求来获取数据或触发某些操作,而后端则需要向前端返回数据或处理请求并采取适当的措施。Python是一种流行的编程语言,用于开发Web应…

上货避坑指南 私域上货选品工具 无货源选品上货 采集商品详情数据API分享 详情图 sku信息

电商开店之后,第一件事就是上货了,上货其实也是有技巧的。 上传商品时我们一定要注意细节,不可忽略一些重要细节,所以商家们在上传商品前,不可忽略是否预售、标题、主图、详情页、保证金、上架时间这几个细节。 详情…