谷歌黑科技 一分钟在VR里再现你的表情

2017-02-22 10:23:55 来源:青亭网 热度:
image01

 

混合现实(MR)视频就是把人连同所处的VR环境一起拍摄进去,能够展现出人们在VR世界里的一举一动。

但是目前的方法都有一个障碍,那就是在拍摄过程中,由于人一般都是戴着一个较大的VR头盔的,因此人物的脸部基本都会被遮挡。人们的表情只能靠“脑补”来想象。

然而谷歌展示了一些新的研究成果,把这一技术带到了新的水准。谷歌结合了一系列的技术,包括HTC Vive和SMI眼部追踪,他们重新再现了被VR头盔遮挡住的人的脸部。

 

db

 

这一研究是谷歌研究团队、Daydream Labs和YouTube团队通力合作的成果。根据官方博客表示,这一研究的原理为:

技术核心是使用用户的脸部3D建模作为被遮挡面部的代替。这一代替物用来在MR(混合现实)视频中来同步人脸,从而打造出被头盔遮住的面部表情。

首先,我们会使用我们称之为“注视点动态外观(gaze-dependent dynamic appearance)”来捕捉用户的个性化3D脸模。首先是校准步骤,需要用户站在一个颜色+深度摄像机,还有一台显示器前面,然后用眼镜在显示器上去追看一个标记。

我们用这种一次性的校准(时间花费不到一分钟)来获得用户的3D脸模,然后获得不同的凝视方向、眨眼所映射的图像(或材质)的数据库。这一“注视数据库”(也就是通过眼睛注视来对应不同的脸模材质)让我们能够在同步中动态更换脸的形象,并且生成想要的凝视视线,让同步的脸部表情看上去自然、生动。

在这一项目背后包括科学家Vivek Kwatra和软件工程师Christian Frueh、Avneesh Sud。这一方法有很大的希望能够“应用于类似VR视频会议、多人视频游戏,与亲朋一起探索等,提高在VR里的沟通和社交性”。

责任编辑:饶军

相关推荐

美FCC欲与谷歌AT&T达成网络接入共识

据国外媒体报道,美国联邦通信委员会(以下简称“FCC”)办公室主任爱德华·拉扎鲁斯(EdwardLazarus)表示,FCC正在与谷歌、AT&T等公司进行协商,希望就网络接入规则达成共识,并拿出法律提案。拉扎鲁斯表示,通过协商,FCC将获得对高速互联网服务提供商的监管权力。他表示:“目前是合适的时机,各方能够对此达成统一意见。”不过他拒绝透露有哪些公司参与了协商。今年4月,美国一家法庭判决FCC无权监管网络接入服务提供商。FCC希望通过协商重新获得这一权力。FCC主席朱利亚斯·基纳考斯基(JuliusGenachowski)上周曾寻求各方对于监管规则的提议,这遭到美国共和党人,以及AT&T和C

谷歌中国ICP牌照获续签

虽然事隔一年多,但谷歌的去留仍然是各界关注的焦点。新快报记者昨日从谷歌新闻发言人王锦红处证实,谷歌中国近日已通过ICP牌照年检。这是继2010年7月谷歌中国ICP牌照通过后再次通过年检,意味着谷歌未来一年可继续在中国大陆开展商业运营。所谓ICP证是指各地通信管理部门核发的《中华人民共和国电信与信息服务业务经营许可证》,是网站经营的许可证,根据国家《互联网信息服务管理办法》规定,经营性网站必须办理ICP证,否则就属于非法经营。2010年谷歌将搜索服务由中国内地转至中国香港,用户访问google.cn会自动跳转到google.com.hk,但保留了广告、音乐、翻译和购物等本地业务。根据易观发布的2

谷歌高管:2012年Android面临危险处境

3月5日消息,据国外媒体报道,谷歌移动工程副总裁希罗史-洛克海默尔(HiroshiLockheimer)近日的发言表明,谷歌将会在今年秋季推出Android5.0操作系统。而Android4.0操作系统(即“冰激凌三文治”)自从面市以来,其市场份额仅占整个Android市场的1%。从目前形势来看,2012年Android将面临危险处境。目前Android4.0仅一小部分手机上运行,同时也仅在少数几种平板电脑上运行,不过现在使用Android4.0的手机或平板电脑很少得到升级。也许到今年秋季,Android4.0的市场份额可能会变成10%。但毫无疑问,到那时仍然会有使用Android2.3操作系

分析师称谷歌正在拓展自建互联网接入业务

北京时间7月10日早间消息,美国投资公司分析师罗里·马赫(RoryMaher)称,谷歌(微博)正在进行招聘,计划将其互联网接入业务GoogleFiber(谷歌光纤)拓展到美国堪萨斯城以外的地区。马赫利用Capstone的自有软件对2000多个工作岗位进行了分析,对谷歌、Facebook和职业社交网站LinkedIn的聘用趋势做出了对比。他在报告中指出:“初步迹象表明,GoogleFiber很可能正在拓展到堪萨斯城以外。在加利福尼亚州的山景城,我们看到一则有关内部销售岗位的广告,工作职责是向小型企业出售GoogleFiber。这则广告称,这个工作岗位的任务是建设一个团队来出售一个全国性的宽带网络