APP下载

你手机上的AR 居然以为世界是一张平面图?

消息来源:baojiabao.com 作者: 发布时间:2024-04-25

报价宝综合消息你手机上的AR 居然以为世界是一张平面图?

近日,美国 AR 特效服务公司 Octi 宣布获得 750 万美元种子轮投资。参投机构包括Shasta Ventures、I2BF Ventures、Bold Capital Partners、Day One Ventures、Human Ventures, Live Nation 及 AB InBev,个人投资者则包括前 Pandora 与 Snap 执行官 Tom Conrad、WeWork 首席产品官 Shiva Rajaraman、Adobe 首席产品官 Scott Belsky、A&E Networks 主席 Abbe Raven 与 Joshua Kushner。

目前市面上的大部分 AR 产品仍然是基于平面的,包括 Apple 的 ARKit。这就是说,AR看到并进行增强的世界是 2D 的,而非 3D 。用 2D 的方式去理解 3D 的现实世界,这导致 AR 无法识别物体或人体的的纵深,也很难捕捉并理解人体及其动作,削弱了用户使用过程中的真实感。

而 Octi 旗下的同名产品能够在不添加额外感测器的前提下,优化手机等低功率设备的 AR 效果。具体到人体识别方面,Octi 融合了多层神经网络技术,包括人体骨架检测、实例分割、3D 重构以及手势识别等,让智能手机仅仅依靠单目视觉,就能从场景中提取清晰的人体动作。底层技术的革新,将为 AR 技术的普及与落地带来更大空间。

人体识别得到的 2D 及 3D 模型

公司联合创始人兼 CEO?Justin Fuisz 表示,Octi 搭建了一套复杂的机器学习与机视觉技术体系。以人体动作为例,它需要先辨别出人体的关键点,如眼睛、鼻子、手肘和臀部等,然后用这些点构建骨架模型。这些模型将被进一步还原为 2D 或 3D 模型,帮助机器理解人体动作,使得更丰富、交互更流畅的 AR 效果成为可能。

Fuisz 认为,这一技术将能被运用到多个不同领域,如时尚、健身、娱乐及游戏业。

以一个最近的落地应用为例。近期 Octi 宣布与OneTeam Collective达成战略合作,后者是美国国家橄榄球联盟球员协会内部的加速器。这笔合作为 Octi 带来了一张大订单——为 NFLPA 超过 2000 名运动员创造 AR 形象,粉丝们可以与这些形象互动并进行视频创作。其实早在今年1月,Octi 就已在这个加速器的路演会上拔得“球员市场营销”项目的头筹。接下来,Octi 还将为 NFLPA 开发基于 AR 的 3D 体感游戏。

左:3D AR 效果示例,给运动中的人;右:基于深度估计模型,Octi 能够辨别远近

除了为企业提供 AR 方案之外,Octi 也发布了自己的 iOS APP。尽管目的是为了向潜在的企业客户提供直观的技术展示,但 Fuisz 表示,个人用户也可以下载这款 APP,在智能手机上体验 3D 版本的 AR 技术带来的更加流畅、真实感更强的体验。




2018-07-18 21:31:00

相关文章