在VR里照镜子 Facebook实验室研发镜片捕捉技术
消息来源:baojiabao.com 作者: 发布时间:2024-05-21
对于开发者们来说,在VR/AR世界中重建镜子和玻璃并非一件易事。在本月举行的SIGGRAPH 2018大会上,Facebook Reality Labs (FRL)提出了一种能够提升3D场景和可信度和逼真感的镜面建模方案。
在Oculus的介绍下,FRL的部分成员向我们详细解释了他们是如何寻求能够提升计算机视觉和图形的方法,从而实现更加身临其境的世界模型。目前,管道重建技术最明显的缺陷是3D扫描系统会产生真实场景之外的伪影。
研究科学家托马斯·伟伦(Thomas Whelan)建议:“想要识别目标足够精准,那就需要进一步简化识别标示,易于检测的目标将提升反射性表面的真是反馈,目前通过识别镜像表面,团队可使用正确的几何和反射重新渲染场景”。
为此,FRL团队需要解决的问题是镜子类型和形状的多样性问题。他准备设计一个能够处理大部分或所有镜子形状和大小的系统。采用分类步骤实现不同镜像之间的相互关联。
研究科学家史提芬·洛夫格罗夫(Steven Lovegrove)表示:“为了创建可以支持各种真实空间中的3D重建,我们面临的挑战是采集一个有代表性的镜像样本,并创建一个可以在每个镜像上运行的强大算法。”
另一个方面,是镜面便捷的分割。如何将虚拟世界的镜像关系不多不少正好“装”在镜子中?专注于任意形状镜像边界的分割工作的研究院斯特劳勃解释道:“洛夫格罗夫构建了一个系统来校准和估算镜面与虚拟现实节之间的变数关系,并未其在指定环境中进行定位。这套装置需要红外深度摄像头,RGB彩色摄像头、用于估计运动的广角相机和用于显示标准AprilTag镜像的背光图形。
将上述的系统进行整合封装,最终我闷闷所看到的就是一个完整的虚拟镜面成像系统,这一系统具备高精度的边界定位,也可以将虚拟对象添加到场景中,同时也能够与现实世界的几何和反射器正确交互——这是一个从原生数据到最终重建的端到端系统。
研究员洛夫格罗夫说道:“在以往的虚拟世界建设工作中,镜子总会被忽视,我们目前能玩到的几乎所有游戏中的镜面只能按照开发者的意愿折射出有需要的成像,这是不真实的。所以在某种程度上,我们正面解决了3D重建中最古老的问题之一。”
FBL团队的许多成员都参与过全球研究实验室的3D重建,图形,机器人和本地化工作。他们正在用一套系统的解决方案来构建几近真实的镜面成像系统,在VR世界中,我们看到的镜面将不再是空无一物,这对于提升VR体验的真实感极为重要。
【87870原创文章,转载须注明来源及链接,否则将追究其法律责任!】
相关文章
- 中兴受美国制裁事件 被罚了20亿美元过程事件始末 中兴被制裁后公司现状
2023-11-02 22:12:46
- B站怎么炸崩了哔哩哔哩服务器今日怎么又炸挂了?技术团队公开早先原因
2023-03-06 19:05:55
- 苹果iPhoneXS/XR手机电池容量续航最强?答案揭晓
2023-02-19 15:09:54
- 华为荣耀两款机型起内讧:荣耀Play官方价格同价同配该如何选?
2023-02-17 23:21:27
- google谷歌原生系统Pixel3 XL/4/5/6 pro手机价格:刘海屏设计顶配版曾卖6900元
2023-02-17 18:58:09
- 科大讯飞同传同声翻译软件造假 浮夸不能只罚酒三杯
2023-02-17 18:46:15
- 华为mate20pro系列手机首发上市日期价格,屏幕和电池参数配置对比
2023-02-17 18:42:49
- 小米MAX4手机上市日期首发价格 骁龙720打造大屏标准
2023-02-17 18:37:22
- 武汉弘芯遣散!结局是总投资1280亿项目烂尾 光刻机抵押换钱
2023-02-16 15:53:18
- 谷歌GoogleDrive网云盘下载改名“GoogleOne” 容量提升价格优惠
2023-02-16 13:34:45
- 巴斯夫将裁员6000人 众化工巨头裁员潮再度引发关注
2023-02-13 16:49:06
- 人手不足 韵达快递客服回应大量包裹派送异常没有收到
2023-02-07 15:25:20
- 资本微念与李子柒销声匿迹谁赢? 微念公司退出子柒文化股东
2023-02-02 09:24:38
- 三星GalaxyS8 S9 S10系统恢复出厂设置一直卡在正在检查更新怎么办
2023-01-24 10:10:02
- 华为Mate50 RS保时捷最新款顶级手机2022多少钱?1.2万元售价外观图片吊打iPhone14
2023-01-06 20:27:09
- 芯片常见的CPU芯片封装方式 QFP和QFN封装的区别?
2022-12-02 17:25:17
- 华为暂缓招聘停止社招了吗?官方回应来了
2022-11-19 11:53:50
- 热血江湖手游:长枪铁甲 刚猛热血 正派枪客全攻略技能介绍大全
2022-11-16 16:59:09
- 东京把玩了尼康微单相机Z7 尼康Z7现在卖多少钱?
2022-10-22 15:21:55
- 苹果iPhone手机灵动岛大热:安卓灵动岛App应用下载安装量超100万次
2022-10-03 22:13:45