http://www.steemxgh.com

当前位置: 必威体育APP > 科技资讯 > 腾讯优图提出半监督对抗单目深度估计被人工智

腾讯优图提出半监督对抗单目深度估计被人工智

时间:2020-03-13来源:未知 作者:admin点击:
作为国内计算机视觉人工智能领域的领先者,腾讯优图实验室团队在单目深度估计上取得了新的研究进展。 腾讯优图与厦门大学联合团队,共同提出了半监督对抗单目深度估计,有望充

  作为国内计算机视觉人工智能领域的领先者,腾讯优图实验室团队在单目深度估计上取得了新的研究进展。

  腾讯优图与厦门大学联合团队,共同提出了半监督对抗单目深度估计,有望充分利用海量的无标签数据所蕴含的信息,结合少量有标签数据以半监督的形式对网络进行训练。据悉,该研究成果已被人工智能领域最顶级的国际期刊TPAMI收录。

  长期以来,基于深度卷积神经网络的分类、回归任务大多依赖大量的有标签数据来对网络进行训练。而在实际的算法部署中,往往只有海量的无标签数据以及非常少量的标签数据。如何充分利用这些少量的标签数据,使其达到和大量有标签数据下训练的模型相近的效果,对学术界和工业界来说一直都是一个难题。

  据腾讯优图的研究员介绍,该项研究的核心难点在于,如何从无标签数据中获取监督信息。传统方法一般需要同一场景的图像序列作为输入,通过构建立体几何关系来隐式地对深度进行重建。这种方法要求同一场景至少包含两张以上的图像,一般需要双目摄像头或视频序列才可以满足。腾讯优图与厦门大学联合团队,提出在一个对抗训练的框架中,解除图像对判别器对真假样本必须为同一图像的要求,“真样本对”采用有标签数据的RGB图像以及对应的真实深度图,“伪样本对”采用无标签RGB图像以及用生成器网络预测出的深度图,由判别器网络区分预测出的深度图与对应RGB直接是否符合真实的联合概率分布,进而从无标签数据中收获监督信息。与此同时,通过添加深度图判别器,来约束预测的深度图与真实深度图的分布一致性。该方法输入可以为任意无关联图像,应用场景更加广泛。而从实验结果也发现,当主流的深度估计网络作为一个生成器网络安插在半监督框架中时,都可以收获显著的效果提升。

  (图1:腾讯优图与厦门大学联合团队提出的半监督对抗框架。图中的生成器网络接收两个判别器网络的反馈来更新自己的网络参数。)

  在研究的量化指标上,利用半监督对抗框架,当有标签数据很少(500张)的情况下,仅使用250张无标签RGB图像就可以收获优于其他state-of-the-art方法的效果。当固定有标签数据量(500张),持续增加无标签RGB图像可以进一步对效果带来提升,最终当利用五万张无标签RGB图像后,该方法在各项指标上都远超当前的state-of-the-art方法。

  (表1:当有标签数据很少(500张)的情况下,仅使用250张无标签RGB图像就可以收获优于其他SOTA方法的效果。)

  (图2:当固定有标签数据量(500张),持续增加无标签RGB图像可以进一步对效果带来提升)

  (图3. 仅使用500张有标签数据训练的模型效果。从左到右依次为RGB图像、真实深度图和优图算法预测的深度图。通过利用额外的无标签RGB数据,优图算法仅使用少量数据就可以达到较好的视觉效果)

  据腾讯优图的研究员介绍,该研究方法虽然以单目深度预测为实验,但过程中发现对于语义分割任务也有相似的效果提升。与此同时,当模型训练与算法部署的环境存在差异时(即存在Domain Shift),若有标签数据为源域中的数据,而无标签数据为算法部署的目标域中的数据,该方法还可以起到Domain Adaptation的效果,提升模型在目标域的部署效果,该观察也在非同源场景下的ReID任务中得到了初步的验证。

  总的来说,该项研究的核心在于充分挖掘无标签样本所蕴含的信息,减少对标签数据的依赖,未来有望在场景重建、非同源场景ReID等多个方案中进行应用。

  特别提醒:本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。

  科大讯飞正式宣布签约球星武磊 传以千万级费用代言翻译机UPWAN服务质量全面升级本文评论华为云“目录区块链”助力北京市精准防治…在过去的一个月里,全国人民都在用自己的方式与“看不见”的病毒作战,随着返程复工大军的...[详细报道]日期:02-25联通阿里联合抗疫:暖心流量包、精灵智慧课受到疫情影响,在线教育、在线健身/娱乐、在线办公等在线服务迎来爆发,这些原本不属于家庭场景的新...[详细报道]日期:02-25同济大学附属东方医院通过华为云WeLink连…位于东湖区宏图路8号的武汉客厅曾是武汉的文化地标建筑。从半个月前开始,这里成为了“方舱医...[详细报道]日期:02-25教学新方法get,天津大学通过华为云WeLin…2020年2月18日,由华为与天津大学智能与计算学部合作开设的《人工智能应用基础》校级选修课采用华为...[详细报道]日期:02-25合肥市产业项目“云签约”通过华为云WeLi…随着全国各地复工复产的有序推进,社会整体经济也在全面恢复。2月25日,合肥市2020年重大产业项目集...[详细报道]日期:02-25ABM+集客营销,助力To B企业获大单?[详细报道]日期:02-25vivo发布新海报:APEX 2020支持高倍率连…2月25日消息 今日午间vivo官方微博再度放出APEX 2020预告:全新APEX 2020将支持高倍率“连续光...[详细报道]日期:02-25英特尔发布全新第二代英特尔至强可扩展处…英特尔今天正式发布全新第二代英特尔至强可扩展处理器。全新第二代英特尔至强金牌处理器相比第一代...[详细报道]日期:02-25王自健回应“玄乎”手机没做成:投了钱但…2月25日下午消息,vivo旗下iQOO今日举行新品发布会,推出了5G手机iQOO 3。[详细报道]日期:02-25终于可以用游戏手柄弹出光盘了:微软正测…微软Xbox One游戏主机终于可以通过按击游戏手柄上的按钮来弹出光盘了。根据部分参与Xbox Insider项...[详细报道]日期:02-25三星宣布全球首发量产16GB LPDDR5内存 将…2月25日消息 据三星官方透露,三星电子今天宣布已经开始大规模生产业内第一个16GB 的 LPDDR5移动 DR...[详细报道]日期:02-25科达智慧教室 清华、浙大、交大等双一…宅家战疫情,停课不停学

  时至移动互联时代,我们获取信息依然需要经过某些必要的路径。种类繁多的APP给我们提供了更加多元化...

  基于三星5nm工艺的高通骁龙X60基带已发布,台积电下半年也将基于5nm(N5)为苹果代工A14、华为代工麒...

  继武汉体育馆方舱医院后,硚口区第二座方舱医院新华产业园方舱医院即将建成,预计近...

  今年1月初在拉斯维加斯举行的CES 2020展会上,英特尔曾表示与谷歌扩大合作,将Chromebook加入&ldquo...

  2月25日消息,据国外媒体报道,消息人士透露,苹果的下一代智能手机预计将被命名为iPhone 12,iPhon...

  随着疫情形势的逐渐好转,各行各业也逐渐开始进入复工状态。全新的生活即将开始,也更要保持自身及身...

  2月24日晚8点,苏宁召开了一场特殊的线上发布会。苏宁易购侯恩龙戴着口罩,化身主播,宣布自27日起...

  近日,全国各地进入复工高峰期。苏宁帮客大数据显示,自消杀功能上线以来,北京、上海、南京、广州...

必威体育APP

当前网址:http://www.steemxgh.com/kejizixun/2020/0313/763.html

顶一下
(0)
0%
踩一下
(0)
0%
------分隔线----------------------------
相关内容
推荐内容