• 视频复原大赛这个联合团队一套算法夺四项冠军
    发布日期:2019-07-06 00:38   来源:未知   阅读:

  Workshop NTIRE 2019 视频复原比赛相关奖项,由中国科学院深圳先进技术研究院、商汤科技、香港中文大学、南洋理工大学组成的联合团队研发的

  深圳先进院、商汤科技、香港中文大学、南洋理工大学组成的联合团队获得Workshop NTIRE 2019 视频复原比赛冠军

  值得一提的是,这是该赛事举办以来首次以视频复原作为竞赛任务,而此前三届比赛都仅以图像复原为主题,六开彩开奖现场直播 开奖结果,这意味着任务的难度达到了全新高度。“这是计算机视觉领域一次革命性的比赛,相信行业内很快将掀起一场视频复原算法的潮流。”联合团队成员、深圳先进院数字所多媒体集成技术研究中心的董超博士接受采访时表示。

  此次视频复原比赛包含两个视频去模糊和两个视频超分辨率赛道。所谓视频去模糊,是将画面模糊的视频还原成清晰视频,而视频超分辨率则是将低清的小视频复原为高清的大视频。“与图像复原相比,视频复原有大量的时空冗余信息可利用,”董超说,“因此,清晰度能够比单一图像复原更高,相应的难度也更大。”

  在将EDVR算法与目前行业内最好的图像超分辨率算法RCAN对同一视频进行处理时,可明显看到EDVR算法能够还原出更多细节,这是因为传统图像算法仅将视频的每一帧进行了单一的图像复原,而EDVR算法则连续用了7帧画面的信息来恢复一帧图像。

  “视频复原必须解决图像对齐和时空信息融合两大问题。”据董超介绍,视频相邻帧存在一定的抖动,必须先对齐才能进行下一步处理。多帧图像对齐后,便需要将挖掘出的时空信息进行融合,EDVR算法中发明的多个模块很好地解决了这两大问题。“这两个步骤是所有视频底层处理的基础,解决了这两个问题再做视频的去模糊和超分辨率都可以。”董超表示,这也是为什么团队用一套算法便拿下了四个赛道的原因。

  从比赛结果来看,共有14支队伍进入最终的排名,联合团队的算法在大部分数据集上精度指标都是最高的。近日,团队已公布所使用的算法论文,并将代码全部开源。董超表示,将深度学习用于视频复原是近两年刚刚兴起的新技术,技术难度大、门槛高,将代码开源是希望引领技术潮流,让更多团队进入该领域,共同发展计算机视觉技术。

  谈及视频复原算法的应用,董超十分看好市场前景。据他介绍,该算法在视频直播、高清电视、手机拍摄、视频监控等领域均潜藏巨大的需求量。以视频直播为例,董超介绍说:“视频直播非常消耗流量,如果能把高清大视频压缩成低清小视频来传输,到客户端后再通过算法恢复成高清大视频,将节省成倍的流量。”

  不过,董超也表示,尽管最新算法达到了视频复原的效果,但距离实际产业化应用尚有一系列技术难题需要解决,而开源代码恰恰能加速这个过程,预计三五年内该领域会有大量论文涌现。

  不仅在视觉复原大赛中一骑绝尘,在同期举办的图像复原大赛中,联合团队论文同样获得冠军。据介绍,利用深度学习解决图像超分辨率问题,需要用到大量的训练数据,一般情况下,至少200个以上的图像对才能保证图像的超分辨率效果。而此次比赛仅提供60个图像对作为训练数据,大大限制了超分辨率的效果。团队的论文首次分析并解决了超分辨率网络中的过拟合问题,即便使用少量的图像数据,也可以获得出色的结果。

  这支在国际顶级计算机视觉大赛中脱颖而出的队伍,由深圳先进技术研究院、商汤科技、香港中文大学和南洋理工大学组成,专注于底层计算机视觉,包括图像和视频的超分辨率、去噪与增强等技术。2014年团队首次利用深度学习实现图像超分辨率,引起了深度学习在底层视觉领域应用的热潮。2017年,团队获得CVPR2017图像超分辨率的亚军,2018年,团队分别获得CVPR18和ECCV18两届图像超分辨率比赛单一赛道的冠军。今年成绩再创新高,也是联合团队多年深耕的结果。

  今年1月,深圳先进院与商汤科技进一步合作,共同成立“未来视觉技术联合实验室”,据联合实验室负责人、数字所所长乔宇介绍,该实验室将围绕复杂视觉信息的深度分析与理解方法,以及其它AI前沿技术研究、新产品开发、技术平台建设、人才培养等多层面展开广泛、深入合作,共同推进人工智能技术在各行业领域的示范应用和产业化协同发展。

  柴油在开采和运输的过程中,难免有不少泄漏到水体和土壤中,造成环境污染。一项新的技...[详细]

  2017年末,多名被害人纷纷来到大邑县公安局报案,称其银行卡账户余额有异常变动,公安民警通过侦查手段秘密摸排确定犯罪嫌疑人杨某等人并将其抓获归案。

  3月31日,来自珊瑚角的Bill Lussier和妻子Debbie一起出海,与他们同行的还有34岁的渔船船长Nick Stanczyk和船员Konnor Ross。他们抛下鱼饵后仅过了10分钟,这条大剑鱼就上钩了。即使是有着丰富捕鱼经验的Stanczyk船长也被剑鱼的体型惊呆了,他表示,这简直就是海洋怪兽。

  王女士告诉记者,当天清早,她杀了家养的一只母鸡准备给家人补身子。这只母鸡养了两年半,大约8斤重。清理完外面的鸡毛后,剖开母鸡肚子,里面竟然有一个团状肉球。这个怪东西外面包裹着一层薄薄的“细皮”,但它并不是母鸡体内原有的构造。“养鸡杀鸡几十年,从来没有见过这种东西。”她问了家人和左邻右舍,有人说这应该是“鸡宝”。家人上网查询了下,发现确实和许多媒体提到的“鸡宝”很像。

  利用从国外购买的复制银行卡高科技设备,通过非法手段获取银行卡的信息,便可在不到一分钟的时间内复制出一张新卡,从而在银行ATM上盗取钱财。

  骗子在行骗中,不仅能够“克隆”微信用户,还能获取大量用户的好友信息,这说明腾讯在安全方面是存在漏洞的,从民事诉讼的角度看,腾讯是要承担责任的。贵州某律师事务所律师如是说道。

Power by DedeCms