UAI 2019教程《深度学习数学基础》,附112页PPT下载

2019 年 7 月 26 日 专知

【导读】目前深度学习在学术界和工业界都得到了广泛的关注和应用。虽然TensorFlow、PyTorch等深度学习框架大大降低了深度学习模型实现的门槛,深度学习的应用仍离不开背后数学基础的指导。本文介绍UAI 2019的教程《深度学习数学基础》。


虽然TensorFlow、PyTorch等深度学习框架大大降低了深度学习模型实现的门槛,让研究者或开发者可以像搭积木一样通过组合和尝试(调参)来研发新的深度学习模型,目前深度学习的发展仍离不开背后数学基础的指导。机器学习中的一些数学理论,如泛化误差、VC维等对深度模型的构建依然有着非常重要的指导意义。例如现有的一些深度网络容易受到对抗样本的攻击,从工程角度来说,这些模型可能在大部分数据上能够达到满意的指标,但是人们可以利用这些网络理论上的漏洞和缺陷对其进行攻击,对自动驾驶等系统产生严重的影响。


在人工智能不确定性会议(UAI)2019中,特拉维夫大学的教程《MATHEMATICS OF DEEP LEARNING》(《深度学习数学基础》)介绍了与深度学习相关的一些数学基础。该PPT首先介绍了目前一些成功的基于深度学习的应用,如疾病诊断、自动翻译、视频分类、图像降噪等。但作者认为,目前数学理论并不能很好地解释为什么深度学习可以达到如此好的效果。一些数学理论尝试解释深度网络的工作原理,例如深度网络需要多少训练数据、池化层的作用是什么、网络深度的作用等。后面,作者着重介绍了泛化误差、对抗攻击、输入边界、数据和模型的不变性等理论。


请关注专知公众号(点击上方蓝色专知关注

  • 后台回复“UAIMDL” 就可以获取《深度学习数学基础》完整版PPT载链接~


附部分预览:



参考链接:

  • http://auai.org/uai2019/tutorials.php#tutorial4



-END-

专 · 知

专知,专业可信的人工智能知识分发,让认知协作更快更好!欢迎登录www.zhuanzhi.ai,注册登录专知,获取更多AI知识资料!

欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程视频资料和与专家交流咨询

请加专知小助手微信(扫一扫如下二维码添加),加入专知人工智能主题群,咨询技术商务合作~

专知《深度学习:算法到实战》课程全部完成!560+位同学在学习,现在报名,限时优惠!网易云课堂人工智能畅销榜首位!

点击“阅读原文”,了解报名专知《深度学习:算法到实战》课程

登录查看更多
0

相关内容

The Conference on Uncertainty in Artificial Intelligence (UAI) is the premier international conference on research related to representation, inference, learning and decision making in the presence of uncertainty within the field of Artificial Intelligence. UAI is supported by the Association for Uncertainty in Artificial Intelligence (AUAI).
一份循环神经网络RNNs简明教程,37页ppt
专知会员服务
168+阅读 · 2020年5月6日
深度学习自然语言处理概述,216页ppt,Jindřich Helcl
专知会员服务
209+阅读 · 2020年4月26日
MIT-深度学习Deep Learning State of the Art in 2020,87页ppt
专知会员服务
61+阅读 · 2020年2月17日
WSDM 2020教程《深度贝叶斯数据挖掘》,附257页PPT下载
专知会员服务
153+阅读 · 2020年2月7日
深度强化学习策略梯度教程,53页ppt
专知会员服务
176+阅读 · 2020年2月1日
【EMNLP2019教程】端到端学习对话人工智能,附237页PPT下载
专知会员服务
67+阅读 · 2019年11月25日
基于深度学习的文本生成【附217页PPT下载】
专知
35+阅读 · 2018年11月24日
机器学习数学基础【附PPT下载】
专知
45+阅读 · 2018年9月17日
【下载】TensorFlow机器学习教程手把手书谱
专知
38+阅读 · 2017年12月22日
Arxiv
35+阅读 · 2020年1月2日
Arxiv
3+阅读 · 2018年3月27日
VIP会员
相关VIP内容
一份循环神经网络RNNs简明教程,37页ppt
专知会员服务
168+阅读 · 2020年5月6日
深度学习自然语言处理概述,216页ppt,Jindřich Helcl
专知会员服务
209+阅读 · 2020年4月26日
MIT-深度学习Deep Learning State of the Art in 2020,87页ppt
专知会员服务
61+阅读 · 2020年2月17日
WSDM 2020教程《深度贝叶斯数据挖掘》,附257页PPT下载
专知会员服务
153+阅读 · 2020年2月7日
深度强化学习策略梯度教程,53页ppt
专知会员服务
176+阅读 · 2020年2月1日
【EMNLP2019教程】端到端学习对话人工智能,附237页PPT下载
专知会员服务
67+阅读 · 2019年11月25日
Top
微信扫码咨询专知VIP会员