/人人可拥有? 一部手机即可生成真实的数字化身 #Meta 离元宇宙更近了吗?

人人可拥有? 一部手机即可生成真实的数字化身 #Meta 离元宇宙更近了吗?

哇塞!能问下这个虚拟人是用啥软件做出来的? unreal 的metahuman 吗?还是 ready player me?还是其它酷炫的软件?

#


#

#

用 ready player me 做的,在他基础上修改。

人物的肢体动作是用的 mix,还是直接在 unity 里调整骨骼呢?

#

#

不用调整骨骼,直接代码驱动就行,ready 的骨骼已经绑定好了~

酷!所以动作还没用到动捕技术是吧 是代码预设的一些默认动作玩法?

#

#

上面展示的案例没有用动捕装备。不过说不定以后复杂的动捕设备会逐渐淘汰……



Authentic Volumetric Avatars From a Phone Scan 


SIGGRAPH 2022





Meta 发布了关于真人数字头像的最新研究,展示了只用一部 iPhone 完成扫描逼真的虚拟现实 VR 化身的制作流程。这项任务曾经需要 100 多个摄像头才能完成,此技术大大降低了真人虚拟数字人化身的制作成本。


小杜

Meta 之前使用包含 171 个高分辨率摄像机来制作专业的 VR 化身,新技术能使用带有前置深度传感器的智能手机,用手持扫描替代复杂的设备系统。


Mate 使用的包含171个高分辨率设计相机的 Avatar 制作系统 MUGSY 


iPhone 扫描生成 Avatar


小杜

该技术支持制作拥有丰富表情的单人虚拟化身,同时也支持单个动作驱动视屏控制输出多人虚拟化身。




输入动作驱动视频,输出多人虚拟化身


小杜

此项目还对比了多机位合成的数字形象与单摄像头合成的效果。多机位合成效果较机扫描更为细腻,光感柔和。

多机位合成的数字形象 vs 单摄像头合成

小杜

但该技术还未成熟到商业应用。目前使用者必须将手机平移到中性面部,然后再复制一系列 65 种面部表情。扫描过程平均需要三分半钟,但用户必须等待六个小时才能让一台配备四个高端 GPU 的机器完整地渲染头像。如果这个产品向公众开放,渲染大概率会在云 GPU 上完成。

项目论文地址:

drive.google.com/file/d/1i4NJKAggS82wqMamCJ1OHRGgViuyoY6R/view


Mixlab

期待该技术完善后的应用前景,一部手机即可迁入元宇宙~


opus

欢迎加入社群,探索 数字人 的多样玩法~



备注:数字人


[ 元宇宙创作者指南 ] 
[ 元宇宙资源清单 ]

github.com/shadowcz007/awesome-metaverse



本文来自微信公众号“无界社区mixlab”(ID:mix-lab)。大作社经授权转载,该文观点仅代表作者本人,大作社平台仅提供信息存储空间服务。