建设银行理财网站,开封建设局网站,怎么查网站的空间商,个人现在可以做哪些网站本文转载自公众号“夕小瑶的卖萌屋”#xff0c;专业带逛互联网算法圈的神操作 -----》我是传送门 关注后#xff0c;回复以下口令#xff1a; 回复【789】 #xff1a;领取深度学习全栈手册#xff08;含NLP、CV海量综述、必刷论文解读#xff09; 回复【入群】#xf… 本文转载自公众号“夕小瑶的卖萌屋”专业带逛互联网算法圈的神操作 -----》我是传送门 关注后回复以下口令 回复【789】 领取深度学习全栈手册含NLP、CV海量综述、必刷论文解读 回复【入群】加入卖萌屋深度学习/NLP/CV/搜广推等方向的技术交流与内推社群大V、顶会审稿人云集 回复【0511】领取算法岗面试手册刷offer神器 回复【0424】领取刷论文神器挖掘每日、每月必刷重磅论文 文 | 小戏 让我们先来看一组漂亮的小姐姐 如果说这四张照片里有一张并不是真人而是由 GAN 生成的虚拟人像大家可以看出是哪一张吗 答案揭晓在这一组照片中由 GAN 生成的虚拟人像是二号小姐姐。可以看到无论如何目前由 GAN 及其衍生技术所生成的虚拟人像已经完全可以达到以假乱真的程度其生成的人脸很难被人类从视觉上进行分辨。这自然是人像生成领域的一大进步然而这种可以被以极低成本大量生产的虚拟人像很容易被滥用于诸如虚假信息欺诈、社交媒体头像等等地方。 在这些场景下如何从大量图片信息中分类出真实人脸与虚拟人像便成为了一个新的问题。其实初想或许会觉得这是一件很容易的二分类的问题可以如果仔细一想一个二分类的判别器很难在 GAN 的训练机制下对分类真实人脸与虚拟人像取得良好的分类效果与鲁棒性。 在这样的背景下来自 UAlbany 的学者们另辟蹊径提出了一种基于物理的方法通过暴露出 GAN 模型本身与真实物理世界交互的缺陷来巧妙识别出真实人脸与虚拟人像的方法即通过识别瞳孔的形状来判断人脸的真实与否。让我们来看看这篇论文吧 论文题目EYES TELL ALL: IRREGULAR PUPIL SHAPES REVEAL GAN-GENERATED FACES 论文链接https://arxiv.org/abs/2109.00162 Arxiv访问慢的小伙伴也可以在 【夕小瑶的卖萌屋】订阅号后台回复关键词 【0915】 下载论文PDF~ 从上图可以看到我们的眼睛中心是虹膜与瞳孔白色的区域是巩膜。对于一个健康的成年人而言瞳孔的形状一般是圆形的。如上图下方左侧的图像从正面看瞳孔趋于正圆。而论文作者发现使用 GAN 等技术生成的人脸其瞳孔形状是不规则的放大由 GAN 生成的虚假人像可以清楚的看到其瞳孔的形状呈现了明显的不规则。 论文作者推断出现这种现象的根本原因在于类似 GAN 等模型实质上缺乏对人眼结构的真正理解换而言之GAN 等模型在生成人像时仍然缺乏从人类生理结构出发的约束。而这种机制上的缺陷为判别真实人像与虚拟人像提供了可能。 总的来说论文提出的虚拟人像检测方法分为三步如下图所示对于一张输入的人像a首先需要定位到人像的瞳孔部分得到如下图b的结果接下来论文使用 EyeCool 算法从b中提取得到瞳孔掩膜(Pupil Mask)勾勒出瞳孔边界如下图c所示同时论文提出了一种基于最小二乘的椭圆拟合方法得到理想情况下真实人像的椭圆形瞳孔掩膜d这里使用椭圆而非正圆的原因在于由于人像拍摄角度的印象导致一般而言图片人像瞳孔趋于椭圆。最后通过改进的考虑边界的 IoU 算法BIoU计算得到图像与理论上真实瞳孔形状之间的差异从而判断输入人像是否是真实人像。 根据这种方法作者选用 Flickr-Faces-HQ (FFHQ) 数据集的一千张人脸作为真实人脸使用 StyleGAN2 创建了一千张虚拟人脸进行实验。 实验发现使用瞳孔形状可以有效的区分真实人脸与虚拟人脸算法的 AUC 分数达到了0.94其评估指标——即 BIoU 值在真实人脸与虚拟人脸之间的分布也呈现了较大的差异。 我们可以看到这篇论文提出了一个简单有效的方法区分真实人像与虚拟人像这种方法在保证了准确率的同时又提供了很好的可解释性甚至抛开算法这个思路对我们使用肉眼判断人像真实与否都有很好的实践价值。 目前无论是图像生成还是文字生成其实质上都是一种自下而上的重复模仿或多或少都缺乏一些如这篇论文所描述的一样真实人脸的生理约束或是自然语言领域的语法句法。如何在进行生成时能更多的考虑这样自上而下的先验信息使得这种先验信息不仅可以作为评价真实与否的方式方法更能作为图像或文字生成时的内在约束或许是更为有意义的问题吧 本文转载自公众号“夕小瑶的卖萌屋”专业带逛互联网算法圈的神操作 -----》我是传送门 关注后回复以下口令 回复【789】 领取深度学习全栈手册含NLP、CV海量综述、必刷论文解读 回复【入群】加入卖萌屋深度学习/NLP/CV/搜广推等方向的技术交流与内推社群大V、顶会审稿人云集 回复【0511】领取算法岗面试手册刷offer神器 回复【0424】领取刷论文神器挖掘每日、每月必刷重磅论文 萌屋作者小戏 边学语言学边学NLP~ 作品推荐 千呼万唤始出来——GPT-3终于开源 Linux 程 序 员 失 业 警 告 后台回复关键词【入群】 加入卖萌屋NLP/IR/Rec与求职讨论群 后台回复关键词【顶会】 获取ACL、CIKM等各大顶会论文集
