上周,Avatarify的爆火与下架再次将AI换脸技术带上风口浪尖。其实,这项技术早已出现,人们也不是第一次为AI换脸相关应用如此疯狂。
像是前阵子最流行的自拍模式——“迪士尼公主脸”和“二次元漫画脸”,就是利用AI生成的。
去年,腾讯光影研究室在QQ小世界、微视App、微博等社交平台上推出的“王者脸”、“童话脸”等各类AI特效应用。便结合了生成对抗网络GAN算法与3D卡通风格、游戏人物风格,可以将照片和直播视频中的人物立刻变成游戏角色、真人“芭比”或“在逃公主”。
百度的AI平台也基于生成对抗网络,结合人脸检测、头发分割、人像分割等技术,推出人像动漫化服务。 现已和B612咔叽美颜相机合作,为用户提供量身定做的二次元漫画头像定制。不少主播和网红都曾在直播中使用这类特效,运用这类贴纸来自拍,也作为一种新的“打码”方式形成潮流。
AI换脸热
AI换脸的兴起可追溯至2016年,德国研究团队研发出一款名为Face2Face的应用,可实现实时的面部图像转换。2017年,一位名为Deepfake的用户利用AI换脸技术将“神力女超人”Gal Gadot的脸“嫁接”到成人影片的角色上,引起轩然大波。代码开源后,这个被统称为DeepFake的技术开始流行。
国内的“AI换脸热”则是从2019年Bilibili上出现的一段将94年版《射雕英雄传》中朱茵饰演的黄蓉换成杨幂的视频开始,当时微博话题#将朱茵的黄蓉换成杨幂的脸#阅读量过亿。虽然这段影片因侵犯肖像权而下架,却无法阻挡AI换脸的热潮。
2019年八月底,陌陌公司推出了主打AI换脸视频制作的ZAO。这款应用支持用户将自己的脸“移植”到明星demo身上,上线后便迅速成为苹果App Store免费应用排行榜的第一名。
然而好景不常,上线不到一周,ZAO的运营方就因为用户隐私协议不规范,存在数据泄露风险等网络数据安全问题引发各界质疑,并被工信部约谈,该应用也遭到下架。
最近,类似的故事再度上演。
上周,以“Ma-i-a hi~Ma-i-a hu~Ma-i-a ho~Ma-i-a ha-ha……”这段欢快、洗脑的旋律为背景音乐的短视频在各大社交媒体上疯狂刷屏。
网上流行的影片中,做出夸张表情、摇头晃脑的有马斯克、扎克伯格、巴菲特、马云、马化腾等商界大佬;陈奕迅、甄子丹、吴京、蔡卓妍、宁静等一众明星;甚至还包含蒙娜丽莎、猫猫狗狗等画中人物及小动物。
制作出这款魔性特效,并让这首2003年在罗马尼亚发行的畅销老歌《Dragostea Din Tei》再次传遍世界的,是一款名为Avatarify的AI变脸软件。
Avatarify起初是俄罗斯程序员Ali Aliev为了捉弄一起开视频会议的同事而研发的玩笑之作。这款应用能将别人的照片“嫁接”到自己的脸上,还能藉由将静止的人脸套入视频demo,操纵照片中人物的表情,让他们“动起来”,并生成短影片。
去年7月,Avatarify正式登上苹果App Store。今年二月中旬,这款App在中国区的排名突然上升,并于二月二十五日超越微信、微博、抖音,成为IOS应用商店免费App下载排行榜第一名,且持续多天“霸榜”。
「智能相对论」看到,截至目前,应用这款App制作的特效在抖音话题#蚂蚁呀嘿#中的视频播放量超过27.8亿次;微博的相关话题#蚂蚁呀嘿视频大赛#也达到4500万阅读量。作为Avatarify视频制作辅助工具的“剪映”和“腾讯加速器”也随着Avatarify的爆红水涨船高,下载量也迅速攀升,在应用排行榜上名列前茅。
经历了七天的爆红后,现在,Avatarify已在App Store中国区遭到下架,官方并未说明下架原因。
即便ZAO和Avatarify昙花一现、DeepFake遭到美国国会限制,人类对“换脸”技术的热忱仍持续上涨。毕竟,这类充满话题的视频所引起的“病毒式”传播效应,对依附流量的影视创作、电商购物、短视频社交产业而言,是绝佳的引流渠道。近年来,AI对“脸”的改造依然主要应用在社交娱乐场景。随着相关技术的发展,各式各样的换脸、造脸App和服务也层出不穷。
据「智能相对论」观察,现有的AI换脸相关应用大致可分为三类:第一类是向腾讯“童话脸”、百度“人像漫画化”等商业应用较为成熟的人脸“虚拟化”,即通过人脸识别、图像生成技术,用户的脸变成客制化的卡通动漫形象。
由于“卡通化”的形象娱乐性强,与真人差异较大、易于分辨,因此这类技术的争议较小。大厂们面向B端出售这类技术服务,形成了按照使用量或不同功能付费的、较为成熟的商业模式。
第二类则是像Avatarify一样,在人像脸上做出“几可乱真”的表情与面部置换。 一般通过免费增值服务模式收费,或是作为引流手段吸引客群,引导用户为其他功能付费。
例如由在线家谱公司MyHeritage开发的Deep Nostalgia(深度怀旧),便是一款具有“生成动态表情”功能的AI应用。这项服务能将静态的旧照片制作成几秒的小视频,利用科技让用户观看逝者栩栩如生的表情,希望能借此慰藉用户对亲人的思念之情。
想要让静止的照片动起来,需要先使用生成对抗网络GAN对低频图像进行降噪、重建,补全图像中有关高频细节的内容,提高图片的分辨率,使之变得清晰。现在的照片修复技术也是利用这类深度生成算法还原图像细节,甚至连马赛克的部份都能还原。
接下来,使用动作迁移算法,利用训练过的AI模型实时提取视频人物中的关键点,并为照片中的人脸标记上相应的关键点,再将二者对应,便能做到让另一段影片中的人物动作迁移到照片中的人物上。
现在,MyHeritage公司的AI模块已能在Twitter上使用,作为营销手段引发Twitter用户跟风怀旧。腾讯微视也曾上线“老照片竟然可以动起来”的功能,通过上传照片,就能基于照片内容制作出一段动态影像,有如《哈利波特》中的魔法照片。
Bilibili和Youtube上也曾经出现利用AI技术让杜甫、朱元璋、徐悲鸿、林黛玉、戴珍珠耳环的少女、蒙娜丽莎、维纳斯等一系列画作中的人像“动起来”的视频与教程。国内也有up主利用百度飞桨的开源项目PaddleGAN和 DFDNet让黑白人物照片“恢复色彩”并作出动态面部表情。
载舟亦能覆舟的DeepFake
无论是Avatarify、Deep Nostalgia还是ZAO,这些AI换脸应用惹人争议的原因皆是由于DeepFake技术的以假乱真与面部识别带来的个人隐私泄露及滥用。
自2014年生成式对抗网络(GAN)出现至今,电脑图像和影片合成技术不断取得惊人效果。虽说技术是中立的,但从2017年Reddit用户使用此技术来伪造神力女超人的*开始,Deepfake造假逐渐渗透到政治、娱乐、传媒等多个领域,甚至还对美国总统大选造成威胁。
据安全分析公司Sensity调查显示,2018年12月以来,Deepfake伪造品数量逐年增长,约半年就增长一倍。截至2020年6月,造假影片多达49,081个,同比增长330%以上。其中,以*占比最高,目标对象大多来自影视娱乐业、政治界与商业界。
去年,一名马来西亚政治家因为一段涉嫌从事同性恋活动的影片而被判入狱,但后来证实影片为Deepfake伪造。虽然以这项技术为基础制作的搞笑影片曾带来一些欢乐,但就目前使用结果而言,Deepfake技术对人们的影响似乎是弊大于利。
因此,Facebook、Google、微软等互联网巨头开始致力于开发与Deepfake抗衡的检测技术。Facebook释出有史以来最大的Deepfake数据库,甚至举办了Deepfake侦测竞赛(Deepfake Detection Challenge)。AI换脸相关的第三类应用——“假脸甄别”产品与API就此诞生。
由于肉眼已难以分辨较为成熟的Deepfake造假影片,要破解AI换脸技术还得依靠AI。已有的方法如检测影片目标的心跳、血液流动等生物学信号,藉由分析该信号的残差来确定真假,目前该方法的准确率已达到97.29%,同时还可以检测背后所用的Deepfake模型。
国内大厂也纷纷推出此类应用,如百度大脑AI开放平台推出的“人脸检测”、“H5视频活体检测”、“在线活体检测”API ,具备人脸合成图鉴别能力。基于深度学习算法,可识别摩尔纹、成像畸形等图像特征,防止静态图片、屏幕或视频翻拍等作弊攻击,提升业务安全性。目前此功能已广泛应用于房产交易身份认证;保险投保、核保及理赔辅助核验;运营商实名制开卡,汽车租赁等各种业务。
阿里安全图灵实验室也为此打造了基于多实例学习的检测算法Sharp-MIL(S-MIL), 只需视频级别的标注,就能对deepfake作品进行检测。
腾讯云AI视觉则推出AntiFakes假脸甄别技术,基于图像算法和视觉AI,可对图片或视频中的人脸真伪进行检测分析,鉴别图片中的人脸是否为AI换脸算法、App所生成的假脸,最终对图像或视频的风险等级进行评估。
情绪辨识网络(Emotion Recognition Network) 也是测定方法之一,透过检测脸部情绪是否与场景上下文或音讯内容相匹配,来确定影片真伪。其他还有对比人脸区域与背景区域,寻找微小差异以辨别真假的背景差异检测;以及将假脸重新混入目标图像或影片,以从中寻找边界的人脸X 射线(Face X-ray)检测。经过FaceForensics 数据集上测试,人脸X 射线的精准度可达99% 以上。
虽然基于Deepfake的AI换脸技术可制造巨大流量,能作为不错的营销手段。在发展出相应的监管制度之前,这类无法确保用户隐私数据安全的应用仍无法逃离下架的命运,反而为Deepfake防治软件带来许多商机。除了上述产品,还有Sensity、Deepware,以及微软Video Authenticator等商业用的应用程序编程接口。
AI换脸技术可说是打开了潘多拉的魔盒,在为一些人带来消遣的同时,也成为不法之徒伤害他人的工具。如何妥善运用这把双面刃,在娱乐消遣和隐私安全中取得平衡,是人类在科技发展过程中必须面对的问题。
此内容为【智能相对论】原创,
仅代表个人观点,未经授权,任何人不得以任何方式使用,包括转载、摘编、复制或建立镜像。
部分图片来自网络,且未核实版权归属,不作为商业用途,如有侵犯,请作者与我们联系。
文/ 智能相对论(ID:aixdlun)
作者/ 离离
申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!
2023年7月6日,第六届世界人工智能大会(WAIC2023)在上海开幕,“人工智能大模型”是本届大会的备受瞩目的话题,据悉,在昇腾AI大模型的创新研发中,华为联手26家行业领军企业,组建了一支协同创新的“AI明星队”,云天励飞作为中国人工智能企业的杰出代表,和互联网大厂、运营商、科研院所等优秀团队
这几个月来,以ChatGPT为代表的生成式AI展现出的能力令世界惊叹。自从2016年AlphaGo战胜李世石掀起了一波AI浪潮后,AI仿佛已经沉寂了很久,ChatGPT的横空出世就如同一束耀眼的光芒,让AI这个名词重回C位。过去在AI1.0时代,主要通过训练模型来实现图像识别、声音识别、语言处理等特
文:互联网江湖作者:志刚2023年的IoT需要一个新故事。6月29日,涂鸦智能在开发者大会上,发布了企业级战略PaaS2.0,希望通过一个平台+四大开发服务,建立起IoT生态。对于这场发布会,市场的态度是积极的。美东时间6月29日收盘,涂鸦智能美股股价上涨5.6%,来到1.87美元/股。近日股价稳定
2020年底,王慧文在朋友圈写下这句话时,外界本以为这位伴随中国互联网发展而持续创业20年的人物即将告别创业舞台。但是,一个曾经多次创业,正值壮年的互联网老将心中的创业热情是难以熄灭的。
苹果16弄了两个版本,一个是专门给中国人用的,准备用百度的AI,还要交钱。第二个是全世界都可以用的,用了ChatGPT,包括台湾、香港、澳门都可以用。以后都这样了。好,问题就出在这,苹果和百度的合作出现问题了,新闻连起来看,才能明白其中含义。新闻一:苹果正在和腾讯、字节初步接洽,考虑将二者的AI模型
“技术日新月异,人类生活方式正在快速转变,这一切给人类历史带来了一系列不可思议的奇点。我们曾经熟悉的一切,都开始变得陌生。”计算机之父约翰·冯·诺依曼曾这样说到。
“人工智能的商业模式,是要创造一个市场,而非一个算法”。这是世界AI泰斗MichaelI.Jordan的观点。而当前的全球AI市场,占据主导地位的中美双方,却也走出了两条截然不同的技术路径,前者执着于前沿技术的探索,后者则发力应用优化和商业化落地。南辕北辙的两个方向,或许已经无法直接进行排位先后、优
智能体进化发展了一年,现在的RPAAgent迭代到什么程度了?从实在智能最新发布的实在Agent7.0,看RPAAgent的迭代升级抓取豆瓣信息、自己制作PPT,这款AIAgent真的实现了流程全自动化AIAgent构建到执行全自动化,持续进化RPAAgent再次降低智能体应用门槛实在智能重磅发布实
崔大宝|节点财经创始人进入2024年,大模型似乎有熄火之势:资本市场,与之关联的概念炒不动了,英伟达股价动辄暴跌重挫,引发“泡沫戳破”的担忧;消费市场,BATH们的推新活动少了,产品更新迭代的速度慢了,民众的关注度降了……热闹的大概只剩下两场酣仗:自5月15日字节跳动宣布“以厘计费”,打响国内大模型
文|智能相对论作者|陈泊丞好消息!你心心念念的事业单位发录取公告了!坏消息!他们没录你,录了个数字人。图片来源网络随着数字人技术的突破,越来越多的传统企业和机构开始用上了“数字员工”。甚至很多中国人心心念念的“铁饭碗”,也被这些数字人给捧上了。数字人捧上了“铁饭碗”简单翻看一下全国各地事业单位的“录
黑芝麻智能敲钟后,港交所门口又有一些智驾芯片企业引发关注。据悉,近日地平线已通过中国证监会IPO备案,拟发行不超过11.5亿股境外上市普通股并在香港联合交易所上市,预计筹集约5亿美元资金。从天眼查可以了解到,该公司成立于2015年,是一家乘用车高级辅助驾驶(ADAS)和高阶自动驾驶(AD)解决方案供
8月21日,万众瞩目的2024世界机器人大会暨博览会在北京亦创国际会展中心盛大开幕。这场为期5天,集“展览”“论坛”“赛事”于一体的机器人盛会,反映了当下机器人领域的繁荣生态。据官方统计数据,今年现场逛展观众高达25万人次,比去年增加25%。机器人行业有多火?看看2024世界机器人大会火爆程度便可知