直播预告| CIKM2021 Best Short Paper 获得者来啦!

2022 年 1 月 4 日 THU数据派


  
  
    
来源:AI TIME论道

  本文约2182字,建议阅读4分钟

本文介绍 了1月 5日晚7:30CIKM2021 Best Short Paper获得者毛海涛带来的主题分享:《基于信息瓶颈理论的神经元竞争初始化策略》


1月5日晚 7:30-8:30

AI TIME 特别邀请CIKM2021 Best Short Paper获得者——毛海涛,给大家带来分享:《基于信息瓶颈理论的神经元竞争初始化策略》

哔哩哔哩直播通道


★ 嘉宾简介 ★


毛海涛


电子科技大学信息与软件工程学院四年级本科生。主要研究兴趣为:神经网络基础研究,自适应图神经网络,金融知识图谱


本篇工作为毛海涛于微软亚洲研究院实习期间由研究员杜仑,首席研究员付强共同指导完成,并荣获CIKM2021 Best Short Paper。


个人主页:ME - 悫躍 (huanhuqueyue.github.io)


分享内容:

基于信息瓶颈理论的神经元竞争初始化策略

报告简介:


神经网络初始化作为神经网络中训练不可或缺的一环,对神经网络优化过程有着重要的影响。先前的工作更多关注如何避免训练中出现梯度消失、梯度爆炸等现象,却很少关注怎样的初始化能加快神经网络的收敛速度,提高神经网络的泛化性能。我们从信息瓶颈理论出发,为神经网络初始化提供一种新视角,并设计出一套通用的基于神经元竞争的初始化策略。

论文博客: https://zhuanlan.zhihu.com/p/398198523


直播结束后大家可以在群内进行提问,请添加“AI TIME小助手(微信号:AITIME_HY)”,回复“PhD-3”,将拉您进“AI TIME PhD 交流群-3”!

AI TIME微信小助手


主        办: AI TIME 
合作媒体: 学术头条、AI 数据派
合作伙伴:智谱·AI、中国工程院知领直播、学堂在线、蔻享学术、AMiner、 Ever链动

—— END ——


登录查看更多
1

相关内容

信息和知识管理会议(CIKM)为介绍和讨论信息和知识管理的研究以及数据和知识库方面的最新进展提供了一个国际论坛。会议的目的是确定未来知识和信息系统发展所面临的具有挑战性的问题,并通过征求和审查高质量的、应用的和理论的研究成果来确定未来的研究方向。会议的一个重要部分是讲习班计划,它侧重于及时的研究挑战和倡议。 官网地址:http://dblp.uni-trier.de/db/conf/cikm/
【CIKM2021】用领域知识增强预训练语言模型的问题回答
专知会员服务
16+阅读 · 2021年11月18日
【CIKM2021-Tutorial】图挖掘公平性,166页ppt
专知会员服务
30+阅读 · 2021年11月5日
专知会员服务
16+阅读 · 2021年8月24日
专知会员服务
19+阅读 · 2021年8月24日
【快讯】KDD2020论文出炉,216篇上榜, 你的paper中了吗?
专知会员服务
50+阅读 · 2020年5月16日
麻省理工学院MIT-ICLR2020《神经网络能推断出什么?》
专知会员服务
50+阅读 · 2020年2月19日
直播预告 | 推荐系统中的异构关系学习
THU数据派
0+阅读 · 2021年12月28日
开播倒计时|DevFest 2021 京津冀直播专场 就在明天!
谷歌开发者
0+阅读 · 2021年12月18日
直播预告 | IJCAI 2021 专场来啦!
THU数据派
0+阅读 · 2021年12月15日
邀请函:CNCC2021中国计算机大会
CCF计算机安全专委会
0+阅读 · 2021年12月14日
直播预告 | 迈向常识知识的高级语义理解
THU数据派
2+阅读 · 2021年12月10日
CIKM2021推荐系统论文集锦
机器学习与推荐算法
1+阅读 · 2021年10月20日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
5+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
9+阅读 · 2011年12月31日
Disturbance of questionable publishing to academia
Arxiv
0+阅读 · 2022年4月19日
Arxiv
30+阅读 · 2021年7月7日
VIP会员
相关VIP内容
相关资讯
直播预告 | 推荐系统中的异构关系学习
THU数据派
0+阅读 · 2021年12月28日
开播倒计时|DevFest 2021 京津冀直播专场 就在明天!
谷歌开发者
0+阅读 · 2021年12月18日
直播预告 | IJCAI 2021 专场来啦!
THU数据派
0+阅读 · 2021年12月15日
邀请函:CNCC2021中国计算机大会
CCF计算机安全专委会
0+阅读 · 2021年12月14日
直播预告 | 迈向常识知识的高级语义理解
THU数据派
2+阅读 · 2021年12月10日
CIKM2021推荐系统论文集锦
机器学习与推荐算法
1+阅读 · 2021年10月20日
相关基金
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
5+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
9+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员