目标

利用 Live Link Face + unrealEngine + quixel bridge 方案,实现虚拟形象的建模和控制。为后面的直播等应用搭建基础流程。

安装和配置

unrealEngine (虚幻引擎)

需要从下面的链接先下载 Epic Games launcher 安装好后,再下载并安装 unrealEngine

https://www.unrealengine.com/en-US/download

我下载的是 Unreal Engine 5.0.3 的版本


quixel bridge

如果是 5 之前的版本,可以到官网下载 : https://quixel.com/bridge

5 的话会自己带这个插件不用单独下载了。

metahuman

https://www.unrealengine.com/en-US/metahuman

要申请 “参加抢先体验”


提交申请以后会到这个界面 :


看到下图就 OK 了


从这里往后等待的时间会比较长,首先点击 Launch latest MetaHuman Creator

然后不到一分钟左右到这里,这里要等待好几分钟,视你的网络情况而定


你看到这个界面后就进来了:


你是可以自己创建角色的,当然也可以用预置好的这些,我用一个预置的角色演示:

启动虚幻引擎

因为网络问题等了好久才启动成功


然后创建一个项目,选游戏和空白模版就可以了

软件第一次启动后,你想用 bridge 导入时会发现有错误提示,需要再安装一个 web browser 插件才能用 bridge ,具体是这里的第二个:


接着登录 bridge,找到你之前创建的角色,把它导入到 虚幻引擎的工程中

这里找到我们刚才编辑的角色

经过慢长的等待,终于可以导入角色了


会提示要启用插件,点击启用后重启软件。

重启过程中漫长的等待,然后软件 终于打开了。

在漫长的等待中你会经过 N 次这个:


导入角色


选 BP 开头的文件

Live Link Face

iphone x 以上手机安装 live link face 应用 ,手机用线连接到电脑。

然后左上角设置→Live Link→ 点击添加目标,输入 PC 的 IP ,端口用默认的。


遗憾的是虚幻5 各种尝试后都无法显示出 iphone 我的型号是 iphoneXR ,试了 iphoneXS也不行,也折腾了网络,还是不行,于是还是改用低版本 4.27 也还是没连上,实在太费时间就放弃了。所以 4 和 5 我都没连通,哎。

好处是 4.27 有一直官方的免费 demo 可以下载使用,叫 “faceAR” ,从虚幻商城下载,直接拿来用,比较快,也不用自己通过 metahuman 建模型了


效果

虽然我由于各种原因没有连通,但思路就是这样的,最终的效果就是你对着手机做动作,它就可以实时同步到虚拟人那端了,来看看成功的效果:



如果是直播的话,可以把虚拟显示结果直接利用 OBS 推流到直播平台。

注意

  • 安装过程中如遇到网络问题,请使用科学上网。
  • 建议使用性能较好的电脑,否则等待时间过长,CPU 在安装和使用过程中经常会 100% ,也没法用。
  • 如遇到 “正在编辑着色器” 、“正在准备着色器” 一类的提示,没什么更好的办法加速,请耐心等待。
  • 虚幻 5 是不错,但非常卡,我的设备是 macbook Pro i7 6 核 32G 内存,CPU 直接 100%了。所以我觉得 5 还是得 m1 芯片才顶得住。

应用

  • 直播
  • 游戏
  • AR
  • 元宇宙

想像空间很大,直播应该已经有人做了,youtube 有个叫 CodeMiko 可以看下。



CodeMiko 背后其实是一个真实的人,她通过动作捕捉技术,实现与虚拟人的语言和动作同步。


国内也已经有人在做了,可能将来从各大短视频平台能陆续看到这类虚拟主播了

有没有人买账?

不用担心,买账的比你想像的多。

所以,一直说炒概念的元宇宙离我们真的很远吗?

参考

  • https://www.bilibili.com/video/BV1GB4y1M7iH?spm_id_from=333.337.search-card.all.click&vd_source=6fb7f58b736bb5913c33073b42979450
  • https://www.youtube.com/watch?v=OH4lXi0HAKo
  • https://www.bilibili.com/read/cv15994528/
  • https://www.bilibili.com/video/BV1LV411r7Sk/?spm_id_from=333.788.recommend_more_video.1&vd_source=6fb7f58b736bb5913c33073b42979450

本文由 mdnice 多平台发布

虚拟人直播-元宇宙离我们有多远?相关推荐

  1. 电商直播+元宇宙,虚拟人结合虚拟场景直播打开双十一营销新局面

    近年来,元宇宙是互联网最热的概念之一,对于企业与品牌来说,元宇宙多元化的营销方式带来了新的机遇.如何利用元宇宙概念来进行品牌新营销,已经成为了当下无数品牌和企业的共识追求.在这样的市场背景下,今年的双 ...

  2. 进击的虚拟人:元宇宙中的虚拟化身与花样“NPC”

    元宇宙的世界到底是一个什么样的世界?我们在元宇宙中与世界到底会变成什么样的关系? 从目前市场上升温最快的虚拟人中,我们或许能找到一些答案. 如果物理世界的人类以国家.种族.皮肤颜色来划分,那元宇宙中的 ...

  3. 忆享聚焦|全球云计算市场份额、数字虚拟人、“元宇宙”实体店……近期行业热点速览

    "忆享聚焦"栏目第四期来啦! 本栏目汇集近期互联网最新资讯,聚焦前沿科技,关注行业发展动态,筛选高质量讯息,拓宽用户视野,让您以最低的时间成本获取最有价值的行业资讯. 1.工信部: ...

  4. 从技术实现到安全运行,工程师版“元宇宙”离我们还有多远?

    来源 |智能相对论 作者|隐东 "元宇宙"被坐拥35.8亿月活用户的Meta(原Facebook)带火之后,微软.英伟达.腾讯.字节跳动等中外科技巨头们也接连入局. 大佬们对元宇宙 ...

  5. 元宇宙系列之AI虚拟人:“人”潮汹涌 探路未来

    尽管元宇宙尚处不断扩充定义的进程中,但市场对于虚拟人在其中扮演关键要素已达成一定共识.我们认为,从中短期视角看,虚拟人相关技术逐步落地,应用场景持续拓宽,或为元宇宙概念下技术.内容及产业融合升级的初步 ...

  6. 元宇宙直播,不再是概念

    自Facebook更名Meta以来,元宇宙浪潮可谓是一波高过一波,不同行业都在与元宇宙结合.2022年元宇宙直播成为新热点.不过,关于什么是"元宇宙直播",行业还存在分歧.最新我在 ...

  7. 讲好元宇宙故事 保利威开启MR直播新时代

    关注云报 洞察深一度 一位女士,眼中充满好奇,身体却稍显犹豫,最终还是坐在了绿幕为背景的双人沙发上,不知道接下来会发生什么? 另一边,一个工作人员好像在机器前调试着什么,瞬间一块显示屏上"神 ...

  8. 【无标题】MR直播爆发 在元宇宙的前夜

     从本质上来说,面对面的交流是最有效的,因为被沟通对象的声音.神态以及细微的情绪变化,都会被沟通者敏捷捕捉并反聩给大脑,从而做出准确判断,但由于时间和空间上的差异,人们往往无法做到面对面交流,因此,1 ...

  9. 元宇宙大潮来袭?业内首个虚拟形象实时互动融合 SDK 来了!

    元宇宙,火得猝不及防. 短短几个月时间,Minecraft.Roblox 进入了更多人的视野,GREE.英伟达.微软等陆续发布相关产品解决方案,韩国.日本还从国家层面宣布大力布局元宇宙赛道.<头 ...

最新文章

  1. POJ3693 Maximum repetition substring
  2. 如何成为CSDN博客专家
  3. Rand函数使用和对补码的理解
  4. Oracle 11gR2 RAC集群服务启动与关闭命令汇总
  5. wap ios android,iOS/Android/WAP 全兼容专题页面制作方法(一)
  6. apipost如何使用mock测试
  7. 计算机存储器的容量单位有哪些,存储器容量单位有哪些,它们之间的关系是什么?...
  8. 一根网线实现双机互联共享文件
  9. 第 5 章 函数和代码复用
  10. oracle 结果集已耗尽_SQLException:耗尽结果集
  11. linux语句tail和grep组合,Linux grep、tail命令的混合使用
  12. C# WPF动点任意移动气泡画法(解决方案使用到数学勾股定理、正弦定理、向量知识)。
  13. 《利用Python进行数据分析》笔记---第6章数据加载、存储与文件格式
  14. 笔记代码 | 统计学——基于R(第四版) 第一章
  15. 信息系统项目管理师10大管理47个过程域输入输出工具(项目质量管理)
  16. 如何用纯 CSS 创作一个小和尚 1
  17. 神仙道装备材料及掉落地点大全
  18. Flash 引导层的使用 模拟小车在弯曲的道路上行驶
  19. 2019 Gartner 中国超融合厂商竞争格局报告发布
  20. 自制华为灭屏显示图像

热门文章

  1. 启发式思考批判性思维
  2. html如何绘制棒棒糖,css画一个棒棒糖的实例代码
  3. 字符串反转的四种方法
  4. 时间服务器中,适用于国内的 NTP 服务器地址,可用于时间同步或 Android 加速 GPS 定位
  5. Python|分支结构——单分支
  6. 几个有趣的小游戏,没事的可以休闲玩玩
  7. idea合并分支 idea git 合并分支
  8. 闪送你的圣诞礼给你的爱从不等待
  9. Unity记录2.2-动作-动画、相机、Debug与总结
  10. html手机电脑自动适应模块,CSS网页响应式布局实现自动适配Pc/Pad/Phone设备