Google的图像压缩黑科技:RAISR

在社交网络上,每天都有难以计数的图片被人们分享、存储。但有一个现实的问题是,大量的照片由于网络限制被人为压缩降低了画质。

而Apple在2010年的iPhone 4S推出了“视网膜”的概念后,各大手机商也推出了2K的手机,显示器也逐步走向了4K。但是高清显示一直缺乏内容,成了该行业发展的痛点。因为超分辨率技术受成本、硬件限制,未能广为普及。将低分辨率图片转化为高清版本,并可在多种设备上查看和分享,成了市场巨大的需求。

如今,Google为了解决这一痛点,发布了黑科技,让人们看到了希望。

Google发布RAISR技术

不久前,Google刚刚发布了一种名为RAISR(Rapid and Accurate Super Image Resolution,意为“快速、精确的超级图像分辨率技术”)的图像压缩技术,旨在保存宝贵的数据,而不牺牲照片质量;并在带宽受限的移动设备上提供清晰锐利的图像。

Google声称,该技术可以降低高达75%的带宽,RAISR分析同一图像的低分辨率和高分辨率版本,了解到高分辨率版本出众的原因,然后在低分辨率版本模拟出来。实际上就是使用机器学习创建一个类似Instagram的过滤器,欺骗你的眼睛,让你相信低分辨率与高分辨率图像是一致的。

RAISR的现状与未来

登陆Google+

早在2016年11月,Google已经将RAISR技术研发完成,希望可以在带宽有限的移动端上展现高清图片。

上周,即2017年1月中,这项技术已经应用于大多数Google+ 的Android版。Google产品经理John Nack声称,RAISR在Google+上每周处理超过10亿张图片,将这些用户的总带宽节省了约三分之一。

John Nack表示,当使用Android移动设备的用户观看Google+的图片时,Google+会发送一张仅为原图片大小的四分之一的版本,再通过RAISR算法来修复细节。最高时,RAISR可以为用户节省了大约75%的带宽。

  iOS端早有集成

早在2016年12月,Google在自家的iOS应用Motion Stills就已经集成了RAISR技术,这其实才是RAISR的首次亮相。彼时,RAISR来改善视频的分辨率,可以自动锐化用户导出的每段视频。

不过,目前尚不清楚具体何时会在iOS移动设备上为用户访问Google+时提供RAISR技术。Nack表示,Google将在未来几周内普及到iOS领域上。

下一个应用会是?

如果用户不想仅仅在Google+中使用RAISR,还得等一段时间。Google计划在未来几个月内将RAISR逐步部署到更多的应用,比如Google Photos。

RAISR实现原理:机器学习、无混叠效应

Google的这项黑技术利用了机器学习,它的效果能达到甚至超过现在的超分辨率解决方案,同时速度提升10~100倍,还能够在普通的移动设备上运行。Google还声称,他们的技术能够避免在重建低分辨率图像中产生混叠效应(aliasing artifacts)。

在“填充”图片时,传统的升采样技术是通过周围已有的像素值计算需要添加的新像素值。这些方法速度很快,但它们并不是在放大图像中显示生动的细节的最好方法。如下所示图片,左图是原始图片,右图是经升采样处理后的图片,看起来很模糊,远不能称之为画质提升。

RAISR与它们不同之处在于,它采用了机器学习,用一对低品质和高分辨率图片进行训练的系统,因此它知道如何重建应用于低分辨率图片中的每个像素的过滤器,生成媲美原始图片的细节。RAISR选择最佳方式来增强低分辨率照片中的每个“像素邻域”,以创建更多的分辨率。

换句话说,RAISR使用它从其他照片中学到的东西,以便有根据地猜测每个丢失像素区域中的高分辨率版本应该是什么样子。

Google表示:“当这些过滤器应用于较低分辨率的图像时,它们会重现出相当于原始分辨率的细节,这大幅优于现行、双三(Bicubic)、兰索斯(Lancos)的解析方式。”

  上图是原始图片,下图是经RAISR放大后的图片。

  左图是原始图片,右图是经RAISR放大后的效果。

以下是RAISR与Bicubic比较的一组示例:

  左边为Bicubic处理的图片,右边为RAISR处理的图片。

此外,RAISR可以消除照片中的混叠效应,如莫尔条纹(Moire patterns)和锯齿,恢复照片的原始结构。

如下图,左边是低分辨率的原始图片,3和5都有很明显的莫尔条纹,这就是混叠效应;右图是用RAISR算法恢复的图像。

左图为原始图像,右图为RAISR消除莫尔条纹的图片

Google声称,这种技术在未来,除了放大手机上的图片,还可以在低分辨率和超高清捕捉、存储、传输图像,使用更少的移动网络数据和存储空间,而且不会产生肉眼能观察到的画质降低。

感谢木环对本文的审校。

本文转自d1net(转载)

时间: 2024-12-22 13:02:18

Google的图像压缩黑科技:RAISR的相关文章

时至2017年,智能手机上的那些“黑科技”

时至2017年,智能手机上的那些"黑科技" 从 07 年的第一台 iPhone 到 08 年的第一台 Android 手机,十年过去智能手机领域早已今非昔比,无数指标的提升都有着不少 "黑科技" ,本文就讲介绍时至2017年,智能手机上的那些"黑科技". Soc 无论是 iPhone 的 A系列 处理器还是高通的骁龙系列以及华为海思的麒麟系列,都有着非常优越的性能以及通信表现.优秀的 Soc 是智能手机表现的基础.一般来说,4-8月是骁龙系列称霸

Amazon黑科技:披音箱外衣的Echo语音助理

    Sonos 可以松一口气了,因为亚马逊的"智能音响" Echo 不是专为音乐爱好者打造的设备,而是放在房间里的语音助理.Echo 的对手是苹果的 Siri.Google Now 以及微软的 Cortana 语音助理,只不过它的载体是家庭音箱,而不是手机或PC.甚至唤醒它的方式都如出一辙,对话之前先叫它名字"Alexa"即可,比如"Alexa,把牛奶加到我的购物清单". 亚马逊是一家具备多种"黑科技"实力的公司.Fire

大数据“黑科技”来袭 请拭目以待!

根据 IDC的一项调查报告中指出:企业中80%的数据都是非结构化数据,这些数据每年都按指数增长60%. 透过其增长速度,我们可见一斑.同时有 报道 也 指出 : 平均只有1% - 5%的数据是结构化的数据. 那么何为 非结构化数据 ? 顾名思义 , 是存储在文件系统上的信息,而 并非数据库 . 如今,这种迅猛增长的 且体积庞大的 数据 类型 在企业里消耗着复杂而昂贵的 系统资源, 如何更好的 挖掘这些 具有潜在价值的不同类型的 数据 文件,而不是因为处理它们却干扰日常的 业务 工作?当然 , 你

分析加速引擎黑科技 - LLVM、列存、多核并行、算子复用 大联姻 - 一起来开启PostgreSQL的百宝箱

标签 PostgreSQL , LLVM , OLAP , 列存储 , IMCS , cstore , column storage , Code Gen , 数据分析 背景 随着移动互联网的发展,数据爆炸性增长,企业对数据产生价值的渴望越来越多. 比如很多APP中会埋点(已经不是什么秘密),以此收集用户的行为数据,用户的位置变化,上了什么网站,浏览了哪些网页,和什么人聊天. 又比如汽车类的应用,汽车的轨迹,油耗,停留的时间,最喜欢去的商圈等. 金融方面,用户的付费行为,和哪个商铺发生的交易,交

盘点谷歌 I/O 大会上的重磅黑科技:人工智能终于智能!

IO2017的产品发布会已经结束,我们搜罗了各种重磅黑科技.废话不多说这就开始! Google Lens Google Lens无疑是这次IO大会最大的亮点!Google Lens第一次让人工智能来到我们身边,并且如此的真切.简单来说,Google Lens让你的手机摄像头成为了搜索 入口,你看到的任何东西,都可以通过Lens识别,瞬间为你提供更多信息. ▌比如,在路边看到的野花,Lens可以告诉你这是什么品种: ▌路过一家店面,只要用Google Lens一扫店门,就能找到这家店的各种信息,

黑科技|感官世界与人机交互的盛宴 --未来虚拟现实养成记

前言 什么是真实?在电影黑客帝国中,电脑接管了人类的视觉.听觉.嗅觉.触觉等讯号,让人们从出生开始就生活在虚拟世界中却浑然不知.这虽然是科幻片,但令人浮想联翩. 2014年,Facebook20亿美金收购了Ocumulus Rift.同年Google I/O,Google发布了Cardboard,一款利用廉价纸板和手机屏幕就可以实现虚拟现实的DIY设备.2015年初,Microsoft公开了一款介于虚拟与增强现实之间的头戴设备HoloLens,现场演示十分惊艳.此外各大公司与游戏厂商都纷纷在虚拟

重磅 | 谷歌无人驾驶自行车横空出世 我可能看了假的黑科技

早前,谷歌对外发布信息,表示已成功将无人驾驶技术应用到自行车驾驶上,假以时日,在自行车上就能实现办公.娱乐的智能驾驶时代就要到来-- 我们特地整了一箩筐 科技领域内有趣而新鲜的"黑科技", 请大家仔细浏览我们 为大家准备的影音图文资料, 别忘了在我们文末的互动专区告诉我们, 你觉得哪些不是真的-- 1.谷歌无人驾驶自行车横空出世 为了让骑车出行,变得"更智能.更简便.更安全",谷歌近期成功将"无人驾驶"运用在自行车行驶上,推出了"无人驾

Gartner预测2017年十大黑科技 人工智能、物联网列其中

Gartner公司最近公布了2017年具备战略意义的重大科技发展趋势.这十大技术趋势可以总结概括为:以智能为中心,通过数字化实现万物互联.Gartner预计,这些趋势在未来五年内迅速增长.高度波动.预计达到临界点. Gartner副总裁兼研究员David Cearley说,"这十大趋势中,前三个趋势体现了'智能无处不在',以将智能物理和基于软件的系统应用于机器学习和自适应.接下来的三个趋势聚焦数字世界,物理和数字世界日益纠缠.而最后四个趋势则着眼于智能数字网络所需的平台和服务网络."

探秘视频编码黑科技,窄带高清2.0视觉模型及场景实战

"黑科技"这个词已经成为了今年云栖大会的关键词.那么,在我们熟知的视频领域,什么才算是黑科技呢? 我们知道,在通常情况下,视频画质越好带宽费用肯定越高,带宽又是视频服务中占比很高的一项成本,很多开发者都在寻求效果与成本的平衡点.那么,有没有一种技术,能够在保证甚至提高视频画质的同时,降低带宽呢?如果有的话,小编觉得这一点可以算是黑科技了吧. 今天,小编就带大家来了解下刚刚在云栖大会上重磅发布的阿里云窄带高清2.0,看看它是如何超越压缩极限,在视觉效果和带宽成本中找到平衡的. 首先,我们