ICLR2020|华为诺亚:巧妙思想,NAS与「对抗」结合,速率提高11倍
作者丨dwilimeth
编辑丨Camel
本文转载自知乎专栏:AutoML随笔
今天介绍一篇 ICLR 2020 的工作 Adversarial AutoAugment。作者是来自华为的 Xinyu Zhang, Qiang Wang, Jian Zhang, Zhao Zhong。
之前的那些 NAS 做数据增强的工作,例如 AutoAugment,算法流程大致是这样的:用强化学习训练一个 policy generator ,从样本空间中采样,产生大量的 policy 。每一个 policy 会对应一个做分类任务的子网络,子网络使用这个 policy 来做数据增强,在数据集上随机初始化训练完后,测一下验证集上的准确率作为强化学习的 reward 更新 policy generator。
本文作者指出,这样做存在的不足之处:
计算开销大,policy generator 要从样本空间中产生大量的 policy,每一个 policy 都对应一个从头开始训练的子网络,更新 policy generator 还必要要等到整个网络训练完。为了给 AutoAugment 加速,有一些方法会提出一些 proxy tasks,比如说用小模型在数据集的一个小的子集上面搜。但是这样做存在一个 proxy tasks 和原始的任务之间的 gap,在 proxy tasks 上面最优不能保证在原始任务上也是最优的;
在分类子网络训练的过程中,policy 是静态、一成不变的。这样做可能也不是最优的。
针对这些不足,本文就提出了一种新的方法,policy generator 和分类网络能同时并行训练;此外,在分类网络的训练过程中,还能动态调整 policy 。这种方法和 AutoAugment 相比,在 ImageNet 数据集上的计算开销减少了12倍,训练时间缩短了11倍。
怎么做到的呢?作者引入了 GAN 里面的“对抗”思想,引入了 adversarial loss。整个网络可以看做两部分:一个是 policy generator,优化目标是生成那些让分类器的分类 loss 最大的数据增强 policy;一个是分类器,优化目标是在给定 policy 之后对应的分类 loss 最小。
具体的网络结构如下图所示,就是一个分类网络 target network,和一个生成 policy 的 policy network。
在训练的过程中,policy network 会生成 M 个不同的 policy,并把这 M 个 policy 作用于相同的数据上,得到 M 个分类 loss,并更新分类网络 target network 的权重。而这 M 个分类 loss 也会收集起来,根据 Williams的REINFORCE算法拿来更新 policy network 的权重,目的是最大化分类 loss。如此迭代进行。
加入 adversarial loss 的好处可以看做是两方面:一方面是大大减少了训练所需的时间;另一方面,可以认为policy generator 在不断产生难样本,从而能帮助分类器学到 robust features,从而学的更好。
作者也可视化了学到的 policy ,如下图。可以看出随着 epoch 数量的增加,policy generator 会倾向于产生更难的数据增强 policy,如 TranslateX, ShearY and Rotate 这些几何转换会被更多使用。
作者的这种方法需要比较大的 batch size,一般来说大的 batch size + BN 能涨点,因此直接和 AutoAugment 比较似乎不太公平。针对这一点,如 table 4 所示,作者做了大 batch size + 随机搜索的对照实验,证明自己的搜索策略的有效性。
此外,作者也证明了搜到的 policy 具有很好的迁移性能。如下表所示,用 ResNet 50 在 ImageNet 上搜到的 policy,换到其他模型、其他数据集上也能有不错的结果。
个人感觉 NAS 和 adversarial loss 结合的这个 idea 是很巧妙的,在其他任务中也能借鉴。比如说搜 loss function 的时候用 adversarial loss 或许也能有不错的结果。
更多ICLR 2020信息,将在「ICLR 2020 交流群」中进行,加群方式:添加AI研习社顶会小助手(AIyanxishe2),备注「ICLR」,邀请入群。
ICLR 2020 论文解读系列:
相关文章
-
提供AI知识产权整体解决方案“墨丘科技”获数百万Pre-A轮融资
-
潮科技|请回答,2020
-
【苹果CEO库克2019年薪酬总额超过1.33亿美元】
-
吃出4000亿规模,谁阻碍了小龙虾的“巨头”梦?
-
微信显示“对方正在输入”,在这种情况下才会出现,原因还挺无奈
-
马化腾青腾大学演讲:人口红利正在向创新红利转变
-
无序的微博:尤文女球迷的“死而复生”
-
特斯拉组建中国技术团队,上海工厂首辆白车身已下线
-
【网友爆料】莱西信息港真好,发帖还获得现金奖励
-
微信和QQ终于能互通了?可是微信和QQ的缺点让用户难以忍受
-
微信「死于」印度,抖音日本 C 位出道,中国互联网公司出海几家欢喜几家愁
-
【钛晨报】英伟达第三季度营收32亿美元,净利同比增47%
-
腾讯正努力成为一台后驱车
-
互联网巨头贪腐史:阿里八年7位高管贪腐 联想华为腾讯百度均未幸免于难
-
国产航母进行第三次海试!开展舰载机舰上调度检验!
-
实操干货:提升短信营销ROI,这3个方面是重点
-
元宇宙对未来网络技术的挑战
-
【虎嗅晚报】蚂蚁金服不再持有趣店股份;传腾讯进军出行领域,已申请“腾讯打车”等多个商标
-
要不是这些沙雕插件,我早就被公司开除了
-
科大爷看到了当前的营销问题,但可能没有看透问题
-
百度网盘关闭种子下载,微信推出信用分,苹果上线免息分期
-
增长乏力,海外购能否帮亚马逊中国打赢突围战?
-
大耀王牌布,坯布中的王者!质量优秀,无后顾之忧!专注高端!
-
2019“马云乡村人才计划”20日起接受申报三项目均有变化
-
森马:一年想卖800亿,不能光靠中国小镇青年
-
搜狗2019年Q4净利润增44%,接下来将持续布局互联网医疗|看财报
-
2018年四季度移动支付市场排名:支付宝腾讯金融分列一二位
-
“上瘾”的风口:电子烟300天生死时速
-
技术变聪明会场更智慧