FacebookAI发力,2D照片变3D
发布时间:2024-05-13 06:23 作者:九州体育在线网址 点击: 【 字体:大 中 小 】
最先进设备的机器学习算法可以从照片中萃取二维物体,并在三维中心目中地呈现出它们。这种技术可以限于于增强现实的应用程序、机器人以及导航系统,因此它沦为Facebook的一个最重要研究领域。在近日于釜山举行的国际计算机视觉会议(ICCV)之前,Facebook在一篇博客文章中特别强调了其在智能内容解读方面的最新进展。
据透漏,它的系统甚至可以用来检测简单的前景和背景对象,如椅子腿或重合的家具。“我们研究的最新进展是创建在利用深度自学来预测和定位图像中的物体,以及用新的工具和架构来解读三维形状,如体素、点云和网格,”Facebook的研究人员GeorgiaGkioxari、ShubhamTulsiani和DavidNovotny在一篇博客中写到。“三维解读将在提升人工智能系统,更加切合地解读、说明和操作者现实世界的能力方面充分发挥核心作用。”其中一个亮点是MeshR-CNN,这是一种需要从杂乱和遮盖物体的图像中预测三维形状的方法。
Facebook的研究人员回应,他们在开源的MaskR-CNN的二维目标拆分系统上减少了一个网格预测分支,并用于一个包括高度优化的三维操作符的库(Torch3d),来更进一步反对该系统。MeshR-CNN有效地利用了MaskR-CNN对图像中有所不同的物体展开检测和分类,然后利用上述的预测器对三维形状展开推测。
Facebook回应,在公共能用的Pix3D语料库上展开评估后,MeshR-CNN顺利地检测到所有类别的物体,并在家具场景中估算它们的原始三维形状。在一个分开的数据集上(ShapeNet),MeshR-CNN比之前的研究有7%的比较优势。
Facebook研发的另一个系统是Canonical3DPoseNetworks,全称为C3DPO,解决问题了网格和适当图像无法用作训练的情况。创建三维关键点模型修复,利用二维关键点监控构建最先进设备的修复结果。(这里的关键点所指的是被追踪的物体部分,它们获取了一组关于几何图形及其视角变化的线索。)C3DPO利用修复模型预测适当摄像机视点参数和三维关键点方位。
辅助组件与模型一起自学,以解决问题在分解成三维视点和形状时引进的模糊性。Facebook认为,这种修复在以前是可以构建的,部分原因是内存容许。C3DPO体系结构可以在硬件无法捕捉的情况下展开三维重建,比如对大型的对象。“(三维)计算机视觉有许多对外开放的研究问题,我们正在试验多种问题陈述、技术和监督方法,以探寻推展该领域向前发展的最佳方式,就像我们在二维解读领域所做到的那样,”Gkioxari、Tulsiani和Novotny回应。
“随着数字世界适应环境并改向用于3D照片、沉浸式AR和VR体验等产品,我们必须大大推展简单的系统更加精确地解读视觉场景中的对象并与之对话。
本文关键词:FacebookAI,发力,照片,变,最,先进设备,的,机器,九州体育在线网址
本文来源:九州体育在线网址-www.motherstreusel.com
![](/skin/images/ndarrow.png)
猜你喜欢
![“积分钱包”重塑客户忠诚度_九州体育在线网址](/skin/images/default.jpg)
“积分钱包”重塑客户忠诚度_九州体育在线网址
![点击](/skin/images/watch.png)
![市民网上学做荔枝辣椒炒肉食用后口腔溃疡](/skin/images/default.jpg)
市民网上学做荔枝辣椒炒肉食用后口腔溃疡
![点击](/skin/images/watch.png)
![美防长再发荒唐言论:盯紧中国是五角大楼头号任务](/skin/images/default.jpg)
美防长再发荒唐言论:盯紧中国是五角大楼头号任务
![点击](/skin/images/watch.png)
![美国职业高尔夫巡回赛官方宣布Twitter将作为全球流媒体直播平台 为2017赛季提供](/skin/images/default.jpg)
美国职业高尔夫巡回赛官方宣布Twitter将作为全球流媒体直播平台 为2017赛季提供
![点击](/skin/images/watch.png)
![九州体育在线网址_刘国梁新年贺词感恩球迷 发问谁与他并肩战东京](/skin/images/default.jpg)
九州体育在线网址_刘国梁新年贺词感恩球迷 发问谁与他并肩战东京
![点击](/skin/images/watch.png)
![九州体育在线网址|郭川失联前航海日志曝光:风变大了 还好没撞到鲸鱼](/skin/images/default.jpg)
九州体育在线网址|郭川失联前航海日志曝光:风变大了 还好没撞到鲸鱼
![点击](/skin/images/watch.png)
![《动作游戏制作大师MV》新情报公开 今年夏季发售](/skin/images/default.jpg)
《动作游戏制作大师MV》新情报公开 今年夏季发售
![点击](/skin/images/watch.png)
![九州体育在线网址|英国母亲坚持母乳喂养5岁女儿 欲让其喝到10岁](/skin/images/default.jpg)
九州体育在线网址|英国母亲坚持母乳喂养5岁女儿 欲让其喝到10岁
![点击](/skin/images/watch.png)
![2012年03月16日肉毛鸡价格行情与分析:瞬间跌破,踯躅难进](/skin/images/default.jpg)
2012年03月16日肉毛鸡价格行情与分析:瞬间跌破,踯躅难进
![点击](/skin/images/watch.png)
![美称俄核动力巡航导弹5次试验均失败 俄专家:诋毁对手](/skin/images/default.jpg)
美称俄核动力巡航导弹5次试验均失败 俄专家:诋毁对手
![点击](/skin/images/watch.png)