首页  >   行业新闻
面部追踪+投影,一个人也能玩转科幻大片

  来自大洋彼岸的第58届格莱美大奖颁奖仪式,Lady Gaga借助Intel的RealSense实感技术和脸部3D投影技术打造的致敬妆容,抢了全世界媒体的头条。

  这近距离的表演中,借助现场多媒体影像技术的配合,Gaga的脸上分分秒秒都犹如风起云涌一般,油漆妆、闪电红色油彩妆、蜘蛛、科技旋风等变幻莫测,每一刻都复制摇滚巨星David Bowie的经典形象。

  Real Sense助力Gaga致敬经典

  为了在Gaga的脸上实现这些华丽的妆容,英特尔利用Real Sense技术从Gaga的12个不同姿势里捕捉了一套她面部的3D三维扫描信息,通过实时悬浮触控和直接还原成像,实现用电脑模拟人类视觉。

面部投影 面部追踪 科幻 数虎图像



  同时借助3D全息投影技术,利用干涉和衍射原理记录并再现物体真实的三维图像,并使立体的空中幻象与Gaga产生互动,精准地再现David Bowie的众多经典造型,甚至让“活蜘蛛”都可以在Gaga脸上爬行。

  日本的Face Hacking

  在Lady Gaga的这一套炫酷动画效果的妆容之前,日本也有艺术家实现了面部投影技术Face Hacking。这项技术具备3D扫描、实时脸部追踪和投影映射等三大功能,投影先在两位模特的脸上勾勒出轮廓和纹理,然后通过技术调整到二人合适的脸部比例,在脸部的关键位置添加动作追踪器之后,开始加入动画、变换造型。



  可以看到,钢铁侠、非洲猎豹、机器人、骷髅丧尸、年轻女子等形象生动地出现在他们的脸上,并且还可以选择面部表情切换、变脸,或诡异或逗趣的表情都显得非常贴合和自然。

  Omote虚拟化妆术

  另一项由日本团队研发的Omote技术,同样把人脸当做一块特殊的显示屏,利用最基本的动态捕捉技术和投影映射技术相结合的原理,实时追踪人脸,从而改变脸部妆容。

  Omote技术中,首先运用三维激光扫描创建一个准确的脸部模型,模型配有详细的轮廓参数,然后在此基础上加入图样或者是图形动画,再在脸部的关键点装上动作追踪器,进而实现图像在脸部相应位置的实时跟踪投射,达到“化妆”的效果。

  RealSense、Face Hacking,或是Omote,这种使用有复杂面部骨骼结构的人脸投影,代替传统技术中需要耗费大量工作精力的计算机工作,就像古代的“易容术”那样真假难辨。那么未来,我们是不是可以享受“自带表情”出门,轻轻松松变脸了?