编辑太阳
出品|人工智能顶(公众号ID:AI_Thinker ) ) ) ) ) ) ) ) )。
【导言】国际机器学习大会(IMLS )、国际机器学习大会现已发展为国际机器学习学会(IMLS )主办的年度机器学习国际顶级会议。 今天，第35届ICML大会在瑞典斯德哥尔摩正式召开，与大家分享这一年来该领域的突破。 在ICML 2018上发表了2473篇论文，621篇论文被选为获奖者名单，接受率接近25%。 其中谷歌强势领先，Deep Mind、FaceBook、微软也是非常棒的高中，UC Berkeley、Stanford、CMU近30篇名列前茅。
今年不得不说是我国国内的成绩。 清华共收录了12本，与此相比还有差距，但在往年的数量和今年这样激烈的竞争下，进步不可忽视。 特别是今年，复旦大学的1篇论文和DeepMind、斯坦福大学的2篇论文一起获得了Runner Up奖，腾讯AI Lab也收录了10篇以上的论文，对国内的研究寄予了很高的期待
(会议游览日程
Tutorial Session是后续主要技术开始前的教程日
接下来的三天是主要技术的丰富多彩的场面，包括深度学习、强化学习、有限学习、变分贝叶斯、优化方法、自动机器学习等内容。
(论文收集录
最佳论文1 :来自MIT的Anish Athalye和来自UC Berkely的Nicholas Carlini和David Wagner获得了最佳论文。 在这项研究中，我们定义了被称为“混淆梯度”(obfuscated gradients )的现象。 在面对基于强大优化的攻击时，可以实现对对抗样本的鲁棒性防御。 今年2月，该研究突破了ICLR 2018篇对抗样本防御论文的研究，曾引发深度学习社区的热烈讨论。
论文链接：
https://arxiv.org/abs/1802.00420
项目链接：
359 github.com/anishathalye/obfuscated-gradients
最佳论文UC Berkeley EECS的Lydia T. Liu、Sarah Dean、Esther Rolf、Max Simchowitz和Moritz Hardt的论文同样获得了最佳论文奖。 该研究将关注机器学习公平性的静态分类标准如何与临时利益指标相互作用。 总结了三个标准标准的延迟影响，强调了评价公平性标准的测量和时间序列建模的重要性等一系列新的课题和权衡问题。
论文链接：
https://arxiv.org/abs/1803.04383
(Runner Up论文
Runner UP论文1 :复旦大学数据科学学院副教授殷勤前辈完成的在线流(online streaming )算法，是与DeepMind、斯坦福大学两篇论文共同获得的。
Runner Up 奖。在该论文讨论的这种在线流算法可以在只有非常小的协方差误差的情况下，从大型矩阵抽取出最能近似它的小矩阵。
论文地址：
http://203.187.160.132:9011/www.cse.ust.hk/c3pr90ntc0td/~huangzf/ICML18.pdf
Runner UP 论文2：来自 DeepMind 和牛津大学的研究者在研究中开发了新的技术来理解和控制一般博弈中的动态。主要的结果是将二阶动态分解为两个部分。第一个和潜博弈（potential game）相关；第二个和cqdhj博弈相关，这是一种新的博弈类型，遵循一种守恒定律——类似于经典力学系统中的守恒定律。
论文地址：
https://arxiv.org/abs/1802.05642
Runner UP 论文3：来自斯坦福大学的研究者在研究中首先展示了为解决经验风险最小化（ERM）使最初公平的模型也变得不公平了这一问题，提出了一种基于分布式鲁棒优化（distributionally robust optimization，DRO）的方法，可以最小化所有分布上的最大风险，使其接近经验分布。
论文地址：
https://arxiv.org/abs/1806.08010
颁发的两项最佳论文奖来表彰一些最有前途的论文技术方案的研究。最好的论文还将被邀请参加《机器学习杂志》。
▌国内未来可期
而今年腾讯 AI Lab也是取得了十余篇入选的好成绩，相比去年的 4 篇入选，这个成绩不仅是国内企业研究、高校研究的榜首，在国际排名上也是有了很大的进步。
在十余篇的研究中，主要分为三类：新模型与新框架、分布式与去中心化及机器学习的理论研究与优化方法。本次为大家介绍三种新模型与新框架。
用于强化学习的基于反馈的树搜索
研究者还使用深度神经网络实现了这种基于反馈的树搜索算法并在《王者荣耀》1v1 模式上进行了测试。为了进行对比，研究者训练了 5 个操控英雄狄仁杰的智能体，结果他们提出的新方法显著优于其它方法。
论文链接：
https://arxiv.org/abs/1805.05935
通过学习迁移实现迁移学习
迁移学习的三个核心研究问题是：何时迁移、如何迁移和迁移什么。为特定的迁移任务选择合适的迁移算法往往需要高成本的计算或相关领域的专业知识。为了能更有效地找到适合当前任务的迁移算法，研究者根据人类执行迁移学习的方式，设计了一种可根据之前的迁移学习经历提升新领域之间的迁移学习有效性的新框架：学习迁移（L2T：Learning to Transfer）。
论文地址：
https://ai.tencent.com/ailab/media/publications//icml/148_Transfer_Learning_via_Learning_to_Transfer.pdf
通过强化学习实现端到端的主动目标跟踪
目标跟踪的目标是根据视频的初始帧中的目标标注定位该目标在连续视频中的位置。对于移动机器人和无人机等视角会变动的平台或目标会离开当前拍摄场景的情况，跟踪目标时通常还需要对摄像头的拍摄角度进行持续调整。该论文提出了一种使用强化学习的端到端的主动目标跟踪方法，可直接根据画面情况调整摄像头角度。具体而言，研究者使用了一个 ConvNet-LSTM 网络，其输入为原始视频帧，输出为相机运动动作（前进、向左等）。
上图展示了这个 ConvNet-LSTM 网络的架构，其中的强化学习部分使用了一种当前最佳的强化学习算法 A3C。因为在现实场景上训练端到端的主动跟踪器还无法实现，所以研究者在 ViZDoom 和 Unreal Engine 进行了模拟训练。
论文地址：
https://arxiv.org/abs/1705.10561
更多详细论文解读可以参考学习：
https://ai.tencent.com/ailab/paper-list.html
https://mp.weixin.qq.com/s/xpX7eDG5ivk8ZYRjAEsH5g
▌国外大咖云集
Google AI & Deep Mind
这个数量多到不知道几时人工智能头条才能给大家推荐完，无论是机器学习理论，深度学习、强化学习、经典算法都有研究，利用架构与工具在语音、语言、翻译、音乐、视觉处理等领域也都有解决的的问题与挑战。只能说 Google 真是高度活跃在方方面面，有质有量，不愧是本届大会的白金复杂的黄蜂。届时 Google 还将与大家分享 TensorFlow、Magenta等项目的最新工作，开展有关机器学习、强化学习等相关专题研讨会。DeepMind 于近日提出的多智能体的教程也将会在大会于大家进行分享，人工智能头条也在上周为大家介绍过这个最新研究。
Google 论文收录与研讨会：
https://ai.googleblog.com/2018/07/google-at-icml-2018.html?m=1
Deep Mind 论文收录与研讨会：
https://deepmind.com/blog/deepmind-papers-icml-2018
Microsoft
本届 ICML 大会微软通过26篇论文，一个个人健康机器学习的教程与两个研讨会；研究中涉及通过紧凑的潜在空间聚类进行半监督学习、提出 Katyusha X 的简单动量方法、GAN、SBEED（收敛强化学习）、探索加速 CNN 的隐藏维度、增强 CycleGAN等理论与算法的研究。两个研讨会的主题分别关于个性化AI 与 FAIM‘18 Causal ML。
Microsoft 论文收录与研讨会：
https://deepmind.com/blog/deepmind-papers-icml-2018
FaceBook 收录作品的数量与 Google、DeepMind 、微软相比较少，不过在神经机器翻译、人工智能代理、强化学习、语音、端到端的对话模型、GAN及多智能体的强化学习等领域也都有出色的研究。在强化学习中引入 SCAL 算法并证明显著优于现有的 UCRL、PSRL 等算法；在具有 Attention 机制的RNN网络中很多使用简单形式的编码器，Facebook 在研究中提出了一种聚焦 RNN 编码器的机制，用于序列建模任务，用于根据需要关注输入的关键部分，在合成任务上有更好的改进；在多智能体的强化学习中提出 SOM （Self Other-Modeling）的方法，在三个不同任务上评估此方法，表明代理能够在合作与对抗环境中使用它们对其他玩家隐藏状态的估计来学习更好的策略。除了理论研究、方法的创新，在本届大会，Facebook 也组织了一场研讨会，和大家一起一起探讨在强化学习中的预测模型与强化模型。
Facebook 论文收录与研讨会：
https://research.fb.com/facebook-research-at-icml-2018
▌结束语
直播已经开始，人工智能头条先去前方为大家收集情况，精彩内容后续为大家报道。