研究人员详细介绍了可以用于创建深层伪造的纹理交换AI

发布时间:2020-07-08 13:16:07 【来源:

在预印纸张上Arxiv.org发表,研究人员在加州大学伯克利分校和Adobe研究大学描述交换来实现自动编码,机器学习模型专为图像处理设计。他们声称,它可以通过多种方式修改任何图像,包括纹理交换,同时与以前的生成模型相比,“实质上”保持更高的效率。

研究人员承认,他们的工作可以用于制作深造或合成媒体,用现有的图像或视频中的人替换为其他人的肖像。在一项人类感知研究中,使用交换自动编码器创建的图像使对象蒙骗了31%的时间。但是他们还说,建议的检测器至少可以在73.9%的时间内成功发现由该工具操纵的图像,这表明“交换自动编码器”没有比其他AI驱动的图像操纵工具更有害。

“我们证明,基于自动编码器模型的方法与以前的工作相比具有许多优势,因为它可以实时准确地将高分辨率图像嵌入到将纹理与结构分开并产生真实感的嵌入空间中输出图像……表示中的每个代码都可以独立修改,以使生成的图像看起来既逼真又反映未修改的代码,”研究的合著者写道。

研究人员的方法并不是新颖的,因为许多AI模型可以编辑部分图像以创建新图像。例如,麻省理工学院的IBM Watson AI实验室发布了一个工具,该工具使用户可以上传照片并自定义图景的建筑物,植物和固定装置的外观,而Nvidia的GauGAN可以创建栩栩如生的风景图像。但是,这些模型在设计上往往具有挑战性,并且运行起来计算量大。

相比之下,交换自动编码器是轻量级的,它使用图像交换作为“借口”任务来学习对图像处理有用的嵌入空间。它将给定的图像编码为两个单独的潜在代码(“结构”代码和“纹理”代码),用于表示结构和纹理,并且在训练过程中,结构代码学会了与场景的布局或结构相对应。纹理代码捕获有关场景整体外观的属性。

在一项实验中,研究人员在包含教堂,动物脸,卧室,人,山脉和瀑布的图像的数据集上训练了交换自动编码器,并构建了一个可对上传的照片进行细粒度控制的Web应用程序。该应用程序支持使用画笔工具替换图像另一部分中的结构代码的全局样式编辑,区域编辑以及克隆。

共同作者写道:“创造性表达工具是人类文化的重要组成部分……基于学习的内容创建工具(例如我们的方法)可用于使内容创建民主化,使新手用户可以合成引人入胜的图像。”

中国联通:已累计开通5G基站33.2万站 到今年年底预计超过38万个
饿了么现已入驻1000所高校食堂 校园内平均20分钟送达
谷歌在西雅图附近规划新园区 在亚马逊和微软总部所在地扩大触角
我国国家顶级域名“.CN”数量超过2300万个 IPv6规模化部署提速
邬贺铨:截至8月我国IPv6活跃用户达3.65亿 占互联网用户之比达40.32%
苹果、谷歌、英特尔等公司已经加入行业组织美国“6G联盟”
微软今天正式终止Win7嵌入式系统支持 花钱可买三年补丁
OPPO将发布首款概念级应用OPPO CybeReal 针对AR领域

[ 最新资讯 ]

始祖鸟之家双面派对,设计师系列惊艳亮相

  11月24日,被誉为户外爱马仕的始祖鸟(ARC’TERYX)全新概念店——始祖鸟之家在全国顶级商圈北京国贸开业了。现场门店实拍图片   ...

曝小米显示器34寸本月最后一单出货后将暂停供应 因三星无屏供应原因

  本月初,视讯堂消息称小米的 34 寸带鱼屏显示器型号,之后可能无法再保持 1999 元的价格进行销售。今天,视讯堂发布最新消息,称小 ...

微星Stealth 15M超轻游戏本纯净白即将上架 屏幕为15.6英寸

  根据微星笔记本官方的消息,微星 Stealth 15M (纯净白)即将上架预约,这款笔记本是首款采用 11 代低压酷睿 + RTX 2060 配置的 ...

EG7今天宣布收购《机甲战士5》开发商Piranha Games 增加其游戏公司种类

  Enad Global 7(EG7)今天(11 27)宣布收购《机甲战士5》开发商Piranha Games,增加了其游戏公司的种类。  EG7已同意以2410万美元的 ...

华米将推出GTS 2 mini手表:将于12月1日发布 外观更轻薄更精致

  根据华米创始人黄汪的消息,华米将推出 GTS 2 mini 手表,外观更轻薄更精致。    根据华米微博的消息, GTS 2 mini 手表将 ...

冬季必看的小黑裤穿搭指南|九牧王男裤专家

  伴随着秋冬而来的除了购物欲还有穿搭热情,但如果你正苦于衣服少、缺乏穿搭灵感,那么,一条百搭、舒适的九牧王小黑裤,或许可以帮到你,只 ...