【MIT博士论文】高维贝叶斯线性建模:层次建模、推理和评价的进展,250页pdf

2022 年 10 月 1 日 专知


跨越科学、社会科学和工程,应用统计学家寻求从日益庞大的数据集中建立对复杂关系的理解。例如,在统计遗传学中,我们在数千个个体中观察到多达数百万个基因变异,并希望将这些变异与疾病的发展联系起来。对于像这样的“高维”问题,线性建模和贝叶斯统计语言很有吸引力,因为它们提供了可解释性、一致的不确定性和跨相关数据集共享信息的能力。但与此同时,高维数引入了一些现有方法无法解决的挑战。


本文解决了在高维应用贝叶斯方法时出现的三个挑战。第一个挑战是如何应用层次模型(贝叶斯推断的支柱),在多个线性模型之间共享具有多个协变量的信息(例如,多种相关疾病的遗传研究)。论文的第一部分论证了默认的分层线性建模方法在高维情况下的失败,并提出了一种新的有效的模型。论文的第二部分解决了高维贝叶斯推理所带来的计算挑战——现有的方法要求时间与协变量的数量成超线性关系。我们提出了两种算法,通过利用(i)数据的低秩逼近或(ii)跨特定类别的马尔可夫链蒙特卡洛算法的并行性,允许快速、准确的推理。论文的最后部分探讨了评价的挑战。现代统计学为估计未知参数提供了广泛的工具,典型的贝叶斯分析通过相信主观先验假设来证明其估计。我们通过引入新的估计的置信度(“c值”)来解决这个问题,它可以诊断贝叶斯估计的准确性,而不需要这种主观主义。



专知便捷查看

便捷下载,请关注专知公众号(点击上方蓝色专知关注)

  • 后台回复“S127” 就可以获取【牛津大学博士论文】视觉目标结构表示的自监督学习,127页pdf》专知下载链接

                       
专知,专业可信的人工智能知识分发 ,让认知协作更快更好!欢迎注册登录专知www.zhuanzhi.ai,获取100000+AI(AI与军事、医药、公安等)主题干货知识资料!
欢迎微信扫一扫加入专知人工智能知识星球群,获取最新AI专业干货知识教程资料和与专家交流咨询
点击“ 阅读原文 ”,了解使用 专知 ,查看获取100000+AI主题知识资料
登录查看更多
2

相关内容

【MIT博士论文】机器学习中的稀疏性:理论与应用,122页pdf
【华盛顿大学博士论文】因果模型的似然分析,190页pdf
专知会员服务
33+阅读 · 2022年11月14日
【牛津大学博士论文】深度迁移学习贝叶斯推断,157页pdf
【MIT博士论文】因果推论在社会和工程系统应用,348页pdf
【哥伦比亚大学博士论文】深度概率图建模147页pdf
专知会员服务
85+阅读 · 2021年4月27日
【Nature】贝叶斯统计与建模综述,26页pdf
专知会员服务
72+阅读 · 2021年1月21日
【ETH博士论文】贝叶斯深度学习,241页pdf
专知
9+阅读 · 2022年1月16日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
4+阅读 · 2011年12月31日
Arxiv
40+阅读 · 2022年9月19日
Knowledge Embedding Based Graph Convolutional Network
Arxiv
24+阅读 · 2021年4月23日
Arxiv
15+阅读 · 2020年2月5日
Arxiv
30+阅读 · 2019年3月13日
VIP会员
相关VIP内容
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
3+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
4+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员