还敢吹「毫无PS痕迹」?小心被Adobe官方AI打脸

来源:量子位时间:2018-06-25 16:00:48

原标题:还敢吹「毫无PS痕迹」?小心被Adobe官方AI打脸

郭一璞 发自 麦拜德 
量子位 报道 | 公众号 QbitAI

自从有了PS,“有图有真相”就成了一句笑话。

比如朋友圈那些忽悠人的微商:





马爸爸为微商站台?

假的吧?

当阿里公关吃素的呀?





“貌美”的微商小姐姐和思聪他爸一起出席会议?

思聪呀,你爸爸糊成这样了你知道么?

不过,现在,马里兰大学与开发出PS的那家逗比公司(Adobe)合作,开发了一项新技术:

一个能找出PS痕迹的AI

这些P图骗人党彻底被打脸了。

火眼金睛:拼贴、复制、删除一招搞定

关于这个火眼金睛的AI技术的论文发表在了CVPR上。

这项技术能检测出多种P图手法,包括拼贴、复制和删除的元素。

拼接

这项技术可以找出那些后期加上去的元素。

比如,这张巨石前的向日葵:





其实是P的,原图长这样:





根本没有向日葵,只有光秃秃的岩石和海鸟,向日葵是后期P上去的。

复制

为了显得没有违和感,许多人喜欢把原图中的素材扣下来,复制一份,缩小一下再粘回原图的另一个位置。

比如,2008年的时候,伊朗为了吓唬人,发布了一张发射四枚导弹的照片:





然后被眼尖的吃瓜群众发现,从左至右第三枚导弹跟第二枚导弹长的一毛一样,甚至导弹烟雾尾巴上的渐变颜色都一样。

而且,发射导弹的地面上,中间那片云和右边那片云也一模一样,连空中飘的部分都不放过!

删除

看到不想出现在照片上的东西,那就把它抹掉,用周围的颜色材质盖住它。

比如这张照片,看起来……算了,看不出来是啥。





但它的中间被涂抹了一部分,原图长这样:





冒出了一条小鱼的头,大概是被设计师拿出来做剁椒鱼头了吧。

Adobe的新AI技术就可以识别出这3种P过的图,是否被添加了什么额外的东西、是否有复制的元素、是否被删除抹掉了什么东西。

找茬秘技の修炼法则

首先,需要准备一个Faster R-CNN网络,来执行端到端的训练,这个网络在检测语义对象时表现出了良好的性能。

现在,我们按照这样一个原理来侦破图片中的造假区域:





和普通的图片检测不同,Adobe家的这个技术用了双流检测的方法,即:

一个RGB流

RGB流用来寻找PS痕迹,比如,向日葵图中,向日葵边缘和背景的岩石之间明显不自然,对比度过高。





这就是RGB流需要寻找的“PS痕迹”。

同时,还需要用到区域提议网络(Region Proposal Network, RPN),它是Faster R-CNN的一部分,用来找那些看起来很可疑的部分。

一个噪声流

图片是有“噪声”的。

当一张图上的元素被扣下来放到另一张图上时,就会出现一个明显的噪声不同的区域。

当然,肉眼是无法看到的,但是机器可以判断出来。

比如这张图片上,格子地板上放了一个红色正方体。





这张图片看起来仿佛很正常,色调和谐,光影方向正常,没有什么异样的明暗对比。

但是,它的噪声流图片异常诡异:





正方体的前面出现了一个圆洞!

虽然在正方体和浅蓝色(本图为深色)地板上看不出什么问题,但是在黑色(本图为浅色)地板上格外明显。

有一个圆形的东西,在正方体的前方,凭空消失了。

所以,很明显,这片区域有鬼。

实际上,原图是这样的:





红色正方体前本来有一个黄球,在交给噪声流监测的图片上,黄球被P掉了。

池化&对比结合

在可疑图片经过RGB流和噪声流两条线索的监测之后,结果被放进了一个池化层进行池化。

分别对可疑区域得到不同的结果后,两种方法的结果加以对比,被P过的区域就可以明显找出来了。

实战演练

在实际应用中,双流效果的确不错。

比如这张图,看起来大概是日本的某个厂房旁边的停车场:





RGB流发现,左边蓝色的牌子上,两块牌子相邻处的上半部分(红框部分)实在是太诡异了。

放大看,是这样:





而噪声流则监测出了更多的bug:





一片黑漆漆!

整张图上的一个半蓝色广告牌,都不对劲。

一定是有人为了掩藏什么内容,把最左边的广告牌和第二个广告牌的上半部分涂成了蓝色。

所以真实的效果是下图,广告牌区域的确被P过。





再来看下一个例子,货架上的手包:





一眼看上去好像没什么毛病,就是同一款式深色浅色的两个包包而已。

但是,RGB流表示,两个包包都有问题:





而噪声流的结果有些不一样,右边的深色包包和它上面的标签都有问题:





既然你们意见不一样,那取个交集吧,右边的深色包包造假是石锤了:





来,公布正确答案:





找对了,本AI经验值+1。

可以看的出,相比此前的研究,马里兰大学和Adobe研发出的这个新型双流操作检测框架,不仅通过RGB流对视觉篡改伪像建模,而且能发现可疑区域噪声特征的差异。

作者在论文中写到,新研究的方法与此前最先进的方法相比,可以提高四个图像处理数据集的性能。

利空P图党

虽然,目前这项技术只是一篇论文,Adobe公司还没有将其产品化。不过Adobe官方对国外科技媒体THE VERGE说,他们准备继续推进该项技术,用来监测数字媒体中的虚假图片信息。

(*σ´∀`)σ 希望逗比家快点做出来,接入微信朋友圈,戳穿微商和蛇精脸们的真相。

最后,附论文传送门~
Learning Rich Features for Image Manipulation Detection
作者:Peng Zhou,Xintong Han,Vlad I. Morariu,Larry S. Davis
发表于CVPR 2018
arXiv:https://arxiv.org/abs/1805.04953
数据集:https://www.nist.gov/itl/iad/mig/nimble-challenge-2017-evaluation

实习生招聘

量子位正在招募市场运营实习生,策划执行AI明星公司CEO、高管等参与的线上/线下活动,有机会与AI行业大牛充分交流。

工作地点在北京中关村。简历欢迎投递到quxin@qbitai.com

具体细节,请在量子位公众号(QbitAI)对话界面,回复“实习生”三个字。

量子位 QbitAI · 头条号签约作者

վ"ᴗ" ի 追踪AI技术和产品新动态


相关阅读

推荐阅读

两连阳为啥还没回本?买入绩优、白马、中大盘股才能轻松获利

两连阳为啥还没回本?买入绩优、白马、中大盘股才

一、大盘点评展望周二沪深两市小幅低开后,沪深300权重带动指数震荡上行。最终沪指上涨0 53%报收3410点,K线上收出一根中阳线;深成指上涨1 更多

2017-11-22 16:17:00
2017百度世界大会李彦宏透露无人车2018年量产 无人驾驶概念股备受期待

2017百度世界大会李彦宏透露无人车2018年量产 无

一年一度的百度世界大会11月16日在北京举行,每年的百度世界大会,百度创始人李彦宏都会带来他对过去,现在和未来关于互联网和整个IT领域的 更多

2017-11-16 11:17:37
贵州茅台股价突破700元 贵州茅台股价为什么那么高?

贵州茅台股价突破700元 贵州茅台股价为什么那么

今日贵州茅台延续昨日强势走势,继续大幅攀升,盘中最高价突破700元整数关口,刷新上市新高纪录,截至发稿,最高价报704 97元,总市值超越8 更多

2017-11-16 10:32:47
百度世界大会今日召开聚焦智能硬件 百度世界大会受益概念股一览

百度世界大会今日召开聚焦智能硬件 百度世界大会

据怀新资讯报道,2017百度世界大会将于16日在北京举行。从邀请函上出现的神秘的盒子推测,本次百度将会有AI硬件以及诸多AI新技术发布。从今 更多

2017-11-16 10:17:03
中国财富总值全球第二但是超4亿人家庭没有卫生厕所 你拖后腿了吗?

中国财富总值全球第二但是超4亿人家庭没有卫生厕

瑞士信贷研究所(CSRI)最新出炉的《全球财富报告》显示,全球财富总额现已达到280万亿美元,比十年前金融危机爆发时高出27%。美国占全球财 更多

2017-11-16 10:07:07
比特币今日价格大幅反弹逾9% 比特币价格再次突破7000美元

比特币今日价格大幅反弹逾9% 比特币价格再次突破

在短短两周时间内,比特币价格呈现了非常惊险的过山车。由于对于这款加密货币未来趋势存在争议,上周比特币价格出现暴跌,曾一度低于6000美 更多

2017-11-16 10:04:14
油价调整最新消息:国内油价今日24时或迎年内最大涨幅 附92号/93号汽油最新价格

油价调整最新消息:国内油价今日24时或迎年内最大

新一轮成品油调价窗口将于16日24时开启。国际原油价格一度涨至近两年高位,受此影响,国内油价或迎年内最大涨幅。隆众资讯统计数据显示,以 更多

2017-11-16 09:22:17
国际油价调整最新消息:EIA原油及汽油库存双双增长 延长减产协议预期支撑油市反弹

国际油价调整最新消息:EIA原油及汽油库存双双增

美国能源信息署(EIA)周三(11月15日)公布的数据显示,上周美国原油库存意外录得增加,同时汽油库存也意外增长。EIA公布,截至11月10日当 更多

2017-11-16 09:21:49
+ 点击查看更多精彩
29日零时将上调汽柴油限价  每吨汽油上调170柴油上调165元
    人民网北京3月28日电 (朱江)今日,记者从隆众、卓创社会监测机构...
今年政策方向没有变,“三去一降一补”具体该怎么干?
    2018年,我国开启高质量发展新征途。中央经济工作会议把深化供给...
蓝筹股带动大盘继续上攻 沪指重返3400点
    【盘面简述】今日早盘,随着油气股的拉升上涨,中国石油和中国石...
白马股崛起补涨强烈 短期恐慌性抛盘并不大
    今日市场点评:沪深两市早盘各股指纷纷小幅低开,开盘之后一度呈...
市场再度面临重要的时间窗口 一板块有望迎来年末行情
    【今日小结】今日,两市小幅高开,开盘回撤后快速上行翻红,金融...
不离谱的回落 三理由力挺节后机会
    今日市场点评:大盘在节后第一天走出了高开低走的行情。在国庆期...