《海上钢琴师》、开国大典视频超清修复背后,AI超分算法的高光与阴影
|
除了谷歌,美国社交网站巨头Facebook、英伟达等芯片大厂、Adobe等图像软件巨头也在超分辨率技术上有着斐然成果,已将超分技术应用于修复老游戏、遥感优化、一键P图等场景。 虽然超分算法兴起于国外,国产却呈现出后来居上的趋势,这在学术界格外明显。 1、学术成果井喷,互联网巨头造势 据统计,计算机视觉领域三大顶会之一CVPR 2019收录“超分”主题的论文18篇,从一作的名字来看,18篇中只有2篇不是华人一作。哈工大的应对任意模糊核的即插即用深度超分辨率、旷视科技的Meta-SR、清华大学的二阶注意力网络方法等都是具有代表性的成果。 不仅国内研发成果在“超分”这一经典研计算机视觉究领域大放异彩,产业中的各路玩家也将超分算法作为AI技术的焦点和产业赋能的利器。 首先是互联网巨头,它们凭借资本和人才的金矿以及一呼百应的行业影响力,一边自研算法参与论文刷榜,一边办会、开放平台为“超分”造势、铺路。 这边,阿里刚在CVPR 2018等国际会议上发表“退化类型的卷积超分辨率”等新成果,在2019云栖大会上和优酷视频合办增强和超分辨率挑战赛,推出超分辨率算法平台及优酷数据集。
▲阿里 2019 优酷视频增强和超分辨率挑战赛成绩排名 那边,腾讯优图也在CVPR 2018、ICCV 2019等多场国际大会上发布《FSRNet:基于先验信息的端到端训练的人脸超分辨率网络》、《基于属性自光流域的非监督图像转换算法》等多篇论文自证研发实力。 早在2017年,腾讯就将其超分算法TSR应用于腾讯QQ空间适应手机处理速度,据称能为用户节省3/4流量。近日,腾讯科技配合深圳市科创委、鹏城实验室等单位举办全国人工智能大赛,直指超分技术的“AI+4K HDR”大赛成为两大赛项之一,奖金池达 268 万,成为今年国内奖金额最高的人工智能赛事。 互联网大咖办挑战赛、提供算法平台、开放数据包将为学界的“超分”研究提供强大的助力,不得不承认,资本对超分算法十分看好,商用化、生态化之心按捺不住。 2、手机厂商打头阵,智能终端成练兵场 早在2017年11月,华为就推出HiSR超分辨率技术。据称,该模型借助其第一款人工智能手机芯片 Kirin 970 和深度学习算法,首次实现了移动端的深度网络超分辨率算法,不仅达到了实时处理的速度,还保证了图片的效果,将能效比提升了 50%。
今年9月,荣耀在9X PRO中使用超能算法进行“超分辨率重建+Al HDR优化”,官方称拍照画面清晰度能提升10%至20%。除此之外,华为今年8月推出的智慧屏也采用超分算法,使得原本清晰度不够完美的影视图像变得更加清晰。 不约而同地,小米也在今年1月开源了“小而美”的FALSR超分算法,该算法以快速、精确、轻量级为特异性,具有很强的实用性。
近期,小米发布了1亿像素手机,据称这颗相机单单在算法这一个方向,就有超过1000人的研发人员,相当于一个中小型公司的总人数。 除了华为、小米,vivo也没有在这场超分之战中落后。 2018年12月,搭载了商汤AI超分技术的vivo X23幻彩版推出,被认为是基于深度学习算法的超分辨率技术在国内手机上的首次落地。 据称,使用vivo X23幻彩版拍照,照片在放大后远景细节也能真实呈现,可供用户用于局部裁剪、大画幅打印或者在其它高分辨率设备上查看。 3、AI创企的机会来了 “超分”潮为AI创企带来了千载难逢的机会。拿商汤科技来说,该公司自称最早于2014年在ECCV(欧洲计算机视觉大会 ) 提出了基于深度学习的超分辨率算法,2018年底终于在第四个年头落地vivo X23。 2018年,商汤科技在CVPR 2018中提出面向生成更自然真实纹理图像的超分辨率算法;今年,在CVPR 2019上凭借EDVR算法获NTIRE 2019 视频恢复比赛全部四项冠军;8月,商汤-港中文MMLab整合近两年的研究成果开源图像视频超分辨率工具箱MMSR。 除了商汤科技,旷视科技也将超分算法视为必争之地。2019年3月,旷视提出超分辨率新方法Meta-SR,据称可通过单一模型解决超分辨率的任意缩放因子问题。
(编辑:52刷机网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |





