谷歌公布移动端3D识别方案-可在2D图像中识别3D-VR之家

我的位置: 首页 > 资讯 > 产业 > 利用移动AR数据，谷歌训练了一款可在2D图像中识别3D的AI框架

利用移动AR数据，谷歌训练了一款可在2D图像中识别3D的AI框架

2020-03-13 09:00 来源:

VR之家作者：

The One

VR游戏盒子

游戏类型：平台应用

小编点评：汇集最新的手游福利、热门好玩的手游公益服、GM权限手游以及资讯攻略平台。

礼包论坛专区

游戏大小：6.47 MB

点击下载 VR游戏盒子二维码

扫描下载

　　VR之家消息：利用移动AR数据，谷歌训练了一款可在2D图像中识别3D的AI框架。这是一种全新的移动端3D识别方案：Objectron。感兴趣的话一起进来看看相关介绍吧。

识别3D的AI框架.png

　　其特点是可通过AI模型，在2D图像中预测物体在场景中的位置、尺寸和方向，可用于机器人、自动驾驶汽车、图像检索、AR等场景。

　　此外，Objectron的研发团队开发了一种图片标记工具，可以通过分屏视角显示2D视频帧，快速实现对3D边界框的手动标记。这些3D边界框将叠加在点云数据、摄像头画面和识别到的平面上面。

　　标记者在分屏视角（3D视角）中标记3D边界框后，可以在2D视频帧中进行验证，而对于静态图像，标记者只需在单个帧中进行标记。为了更精准定位目标物体，标记工具还会使用AR session数据中的实际摄像头信息来确定该物体在所有帧中的位置。

　　接下来为了训练AI模型，谷歌团队使用了移动端AR session数据（包括摄像头图像、稀疏3D点云、预测光线、平面区域等），弥补了移动设备不具备高端3D传感器的难题（市面上大多数3D数据依赖激光雷达等3D传感器，对日常物体的3D标记数据却很少）。

　　除了真实环境的数据外，还使用了合成的AR数据来提高AI预测准确性。为提高合成数据的质量（提升了10%准确性），谷歌研发了一个AR合成数据生成方案（AR Synthetic Data Generation），特点是可通过调整摄像头角度、识别平面、预测的光线数据，来生成符合物理规则的3D位置信息，以及符合场景的光线，让融入在具有AR session数据的场景中的虚拟物体看起来更自然。

　　同时，谷歌表示：由于SoC等硬件设备局限，用手机等移动设备识别3D目标是一个棘手的问题，而在2D视频、图片中识别物体的3D信息更是难上加难（由于缺乏深度数据，以及画面复杂性等因素），通常只能识别和标记2D信息。

　　因此利用开源跨平台框架MediaPipe，Objectron可实现在旗舰级移动设备中实时标记3D边界框的任务，比如在搭载Adreno 650移动图形芯片的LG V60 ThinQ、三星Galaxy S20+、索尼Xperia 1 II等手机上，刷新率约可达26fps。

　　以上就是小编为大家带来的谷歌公布移动端3D识别方案-可在2D图像中识别3D的介绍，想要了解更多VR资讯请关注本站。下载盒子即可享受一键下载游戏、搜索礼包、查找攻略等一站式服务，喜欢玩破解版的玩家就下载【破解游戏盒子】

　　更多精彩软件APP尽在热门APP大全

温馨提示：

第一时间获取最新最热门手游，及领取专属礼包，请点击下载>>> VR游戏盒安卓版丨 VR游戏盒IOS版

上一篇 : Oculus Quest连上耳机的体验如何？

下一篇 : 英国初创公司OVR推出VR社交疗法帮助患者克服社交恐惧症

VR游戏盒子攻略大全更多>>

gm游戏意思详解掌机配置详解好玩而不氪金的传奇手游不氪金的单机传奇手游有哪些单机版的传奇类手游好玩好玩的散人传奇手游推荐电脑里那些游戏盒怎么删除快玩游戏盒小游戏玩不了解决方法游侠云盒游戏卸载方法逗游游戏盒破限速方法删除7k7k游戏盒方法春节特卖活动时间监狱牢房钥匙获取攻略福卡获得方法游戏盒子打不开解决方法游戏盒下载教程游戏盒子介绍 epic12月免费游戏盘点任天堂沙盒建造游戏大全游戏盒子下载教程

点击收起