信息无障碍通道
您的位置:首页>>业界动态

腾讯优图提出半监督对抗单目深度估计,被人工智能顶级期刊TPAMI收录

发布时间:2019-08-06 09:49:23  来源:智企新闻网    背景: 无障碍通道

  作为国内计算机视觉人工智能领域的领先者,腾讯优图实验室团队在单目深度估计上取得了新的研究进展。

  腾讯优图与厦门大学联合团队,共同提出了半监督对抗单目深度估计,有望充分利用海量的无标签数据所蕴含的信息,结合少量有标签数据以半监督的形式对网络进行训练。据悉,该研究成果已被人工智能领域最顶级的国际期刊TPAMI收录。

  长期以来,基于深度卷积神经网络的分类、回归任务大多依赖大量的有标签数据来对网络进行训练。而在实际的算法部署中,往往只有海量的无标签数据以及非常少量的标签数据。如何充分利用这些少量的标签数据,使其达到和大量有标签数据下训练的模型相近的效果,对学术界和工业界来说一直都是一个难题。

  据腾讯优图的研究员介绍,该项研究的核心难点在于,如何从无标签数据中获取监督信息。传统方法一般需要同一场景的图像序列作为输入,通过构建立体几何关系来隐式地对深度进行重建。这种方法要求同一场景至少包含两张以上的图像,一般需要双目摄像头或视频序列才可以满足。腾讯优图与厦门大学联合团队,提出在一个对抗训练的框架中,解除图像对判别器对真假样本必须为同一图像的要求,“真样本对”采用有标签数据的RGB图像以及对应的真实深度图,“伪样本对”采用无标签RGB图像以及用生成器网络预测出的深度图,由判别器网络区分预测出的深度图与对应RGB直接是否符合真实的联合概率分布,进而从无标签数据中收获监督信息。与此同时,通过添加深度图判别器,来约束预测的深度图与真实深度图的分布一致性。该方法输入可以为任意无关联图像,应用场景更加广泛。而从实验结果也发现,当主流的深度估计网络作为一个生成器网络安插在半监督框架中时,都可以收获显著的效果提升。

image.png

  (图1:腾讯优图与厦门大学联合团队提出的半监督对抗框架。图中的生成器网络接收两个判别器网络的反馈来更新自己的网络参数。)

  在研究的量化指标上,利用半监督对抗框架,当有标签数据很少(500张)的情况下,仅使用250张无标签RGB图像就可以收获优于其他state-of-the-art方法的效果。当固定有标签数据量(500张),持续增加无标签RGB图像可以进一步对效果带来提升,最终当利用五万张无标签RGB图像后,该方法在各项指标上都远超当前的state-of-the-art方法。

image.png

  (表1:当有标签数据很少(500张)的情况下,仅使用250张无标签RGB图像就可以收获优于其他SOTA方法的效果。)

image.png

  (图2:当固定有标签数据量(500张),持续增加无标签RGB图像可以进一步对效果带来提升)

image.png

  (图3. 仅使用500张有标签数据训练的模型效果。从左到右依次为RGB图像、真实深度图和优图算法预测的深度图。通过利用额外的无标签RGB数据,优图算法仅使用少量数据就可以达到较好的视觉效果)

  据腾讯优图的研究员介绍,该研究方法虽然以单目深度预测为实验,但过程中发现对于语义分割任务也有相似的效果提升。与此同时,当模型训练与算法部署的环境存在差异时(即存在Domain Shift),若有标签数据为源域中的数据,而无标签数据为算法部署的目标域中的数据,该方法还可以起到Domain Adaptation的效果,提升模型在目标域的部署效果,该观察也在非同源场景下的ReID任务中得到了初步的验证。

  总的来说,该项研究的核心在于充分挖掘无标签样本所蕴含的信息,减少对标签数据的依赖,未来有望在场景重建、非同源场景ReID等多个方案中进行应用。

特别提醒:本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页 本文来源:智企新闻网

本文评论
全球云计算大会 平安科技平安云上新私有云解决方案
在后疫情时代,云计算的发展将产生怎样的趋势?7月23日,随着第八届全球云计算大会的闭幕,此类问题持续获得...
日期:07-23
西人马董事长聂泳忠拜访芯恩集成董事长张汝京博士
7月17日,张汝京博士与西人马董事长聂泳忠博士在美丽的海滨城市青岛亲切会面。
日期:07-23
毕业生也能定义成功 泰康大健康事业合伙人招募计划让未来为你而来
《就业蓝皮书:2020年中国本科生就业报告》数据显示,2020年毕业生人数再创新高,达到874万,毕业生...
日期:07-23
践行“赋能开发者”使命,发掘表格技术最佳实践
2020年7月15日,由葡萄城携手行业用户共同发起的“表格技术应用开发案例大赛”正式开启。
日期:07-23
台积电有 3 名高管自公司成立至今一直在公司,已效力 33 年
7 月 23 日消息,据国外媒体报道,为苹果等众多公司代工芯片的台积电,近几年在芯片工艺方面走在行...
日期:07-23
亚马逊推新 Alexa 开发工具,利用语音控制苹果 iOS 应用
7 月 23 日消息,据外媒报道,美国当地时间周三,亚马逊宣布推出新 Alexa 开发工具 Alexa for Apps ...
日期:07-23
赋能高质量发展,信息产业先进制造高峰论坛成功举办
7月23日,由中国电子信息产业研究院主办,中科曙光与英特尔联合承办,沈阳新松机器人、天津大学、清...
日期:07-23
哈啰单车宣布与高德合作:开发一站式服务内容
7 月 23 日消息,今日,哈啰单车与高德宣布达成合作,双方将面向用户输出更多出行场景下的便捷体验...
日期:07-23
蚂蚁集团自研软硬件,蚂蚁链一体机正式发布
7 月 23 日,在蚂蚁集团全新发布蚂蚁链现场,蚂蚁链一体机正式发布。作为国内首款区块链领域的自研...
日期:07-23
官方爆料:realme V5 将于 8 月初发布
7月23日消息 realme 副总裁、全球营销总裁徐起今日在微博爆料称,新机 realme V5 将于 8 月初正式发...
日期:07-23
韩联社:三星下调 Galaxy Note 20 系列售价,约 7000 元起
7 月 23 日消息 据韩联社报道,据韩国移动运营商 23 日消息,三星电子和韩国三大移动运营商将 Galax...
日期:07-23
国际半导体产业协会:预计全球半导体制造设备今年销售额将到达 632 亿美元
据国外媒体报道,电脑、智能手机、智能手表等各类电子设备,在消费者日常生活中发挥的作用越来越大...
日期:07-23
SK 海力士二季度营收 71.83 亿美元:净利润同比大增 135%
7 月 23 日消息,据国外媒体报道,特斯拉等多家公司已发布了今年二季度的财报,存储芯片供应商 SK ...
日期:07-23
智能投影线上市场增幅明显,当贝投影稳居第一梯队
据IDC发布的报告显示,2019年中国投影仪市场总出货量累计达到462万台,同比增长6.3%,预计到2024年,中...
日期:07-23
飞腾发布国产腾云 S2500 服务器 CPU :16nm 工艺,Q4 大规模供货
7 月 23 日消息 飞腾新一代高可扩展多路服务器芯片腾云 S2500 正式发布,继承上代产品 FT-2000+ 的...
日期:07-23
315曝光手机窃贼插件,ColorOS 未雨绸缪全面保护用户隐私安全
近日,推迟数月之久的第 30 届 315 晚会于 7 月 16 日正式播出,节目中不仅涉及到了食品安全、日用...
日期:07-23
领跑轻资产运营模式 氪空间旗下独立品牌Kreator Space全新上线
日前,由氪空间内部孵化的独立品牌Kreator Space正式上线,以“让办公更敏捷”为服务愿景...
日期:07-23
华硕发布 Rog Strix XG16 便携式显示器:144Hz 刷新率,年底上市
7月23日消息 华硕今日晚些时候将在国内正式发布 ROG 游戏手机 3 。在此之前,华硕在海外发布了一些...
日期:07-23
2020 IPPA摄影大赛奖项公布
(原标题:2020 IPPA摄影大赛奖项公布 获奖摄影师教你如何拍照)
日期:07-23
Slack 指责微软将 Teams 非法植入 Office ,微软回应
北京时间 7 月 23 日早间消息,据外媒报道,欧盟反垄断机构可能会再次向微软发起反垄断调查,因为美...
日期:07-23
  专栏介绍
海露 的专栏
海露发表的文章
积分:
自我介绍 :