简介： 宾夕法尼亚大学计算逻辑研究院Jean Gallier等人近期在之前发布的书的基础上进行修改，于2019年10月24日发布了一本长达753页的书籍，详细地列出了对机器学习等领域有重要意义的数学理论基础知识。近年来，计算机视觉、机器人、机器学习和数据科学一直是推动技术重大进步的一些关键领域。任何看过上述领域的论文或书籍的人都会被一个奇怪的术语所困扰，这些术语涉及核主成分分析、岭回归、lasso回归、支持向量机(SVM)、拉格朗日乘子、KKT条件等奇怪的术语。但人们很快就会发现，行话背后总是伴随着一个新的领域，背后隐藏着许多经典的“线性代数和优化理论技术”。我们面临的主要挑战是：要从机器学习、计算机视觉等方面了解和使用工具，必须具备线性代数和优化理论的坚实背景。
本书的主要目标是介绍线性代数和优化理论的基本原理，同时考虑到机器学习、机器人和计算机视觉的应用。这项工作由两部分组成，第一个是线性代数，第二个优化理论和应用，尤其是机器学习。 第一部分涉及经典的线性代数，包括主分解和Jordan形式。除了讨论标准的一些主题外，我们还讨论了一些对应用很重要的主题。这些主题包括：
- Haar基和相应的Haar小波
- Hadamard矩阵
- Affine maps
- 规范和矩阵规范
- 向量空间中序列和序列的收敛性。矩阵指数e_A及其基本性质
- The group of unit quaternions, SU(2), and the representation of rotations in SO(3) by unit quaternions
- 代数与谱图论简介
- SVD和伪逆的应用，尤其是主成分分析
- 特征值和特征向量的计算方法，重点是QR算法
另外有比平常更详细介绍的四个主题：
- Duality
- Dual norms
- The geometry of the orthogonal groups O(n) and SO(n), and of the unitary groups U(n) and SU(n)
- 谱理论
作者介绍： Jean Gallier是宾夕法尼亚大学的教授，拥有法国和美国双国籍，1978年取得博士后学位就从事于计算机领域工作，发表过许多研究论文和书籍，其中《Computational geometry》、《Low-dimensional topology》、《Discrete mathematics》、《Discrete mathematics》等书籍的作者就是Jean Gallier
成为VIP会员查看完整内容
相关内容
本书涵盖了这些领域中使用Python模块演示的概率、统计和机器学习的关键思想。整本书包括所有的图形和数值结果，都可以使用Python代码及其相关的Jupyter/IPython Notebooks。作者通过使用多种分析方法和Python代码的有意义的示例，开发了机器学习中的关键直觉，从而将理论概念与具体实现联系起来。现代Python模块(如panda、y和Scikit-learn)用于模拟和可视化重要的机器学习概念，如偏差/方差权衡、交叉验证和正则化。许多抽象的数学思想，如概率论中的收敛性，都得到了发展，并用数值例子加以说明。本书适合任何具有概率、统计或机器学习的本科生，以及具有Python编程的基本知识的人。
成为VIP会员查看完整内容
高斯过程(GPs)为核机器的学习提供了一种有原则的、实用的、概率的方法。在过去的十年中，GPs在机器学习社区中得到了越来越多的关注，这本书提供了GPs在机器学习中理论和实践方面长期需要的系统和统一的处理。该书是全面和独立的，针对研究人员和学生在机器学习和应用统计学。
这本书处理监督学习问题的回归和分类，并包括详细的算法。提出了各种协方差(核)函数，并讨论了它们的性质。从贝叶斯和经典的角度讨论了模型选择。讨论了许多与其他著名技术的联系，包括支持向量机、神经网络、正则化网络、相关向量机等。讨论了包括学习曲线和PAC-Bayesian框架在内的理论问题，并讨论了几种用于大数据集学习的近似方法。这本书包含说明性的例子和练习，和代码和数据集在网上是可得到的。附录提供了数学背景和高斯马尔可夫过程的讨论。
成为VIP会员查看完整内容
本备忘单是机器学习手册的浓缩版，包含了许多关于机器学习的经典方程和图表，旨在帮助您快速回忆起机器学习中的知识和思想。
这个备忘单有两个显著的优点:
-
清晰的符号。数学公式使用了许多令人困惑的符号。例如，X可以是一个集合，一个随机变量，或者一个矩阵。这是非常混乱的，使读者很难理解数学公式的意义。本备忘单试图规范符号的使用，所有符号都有明确的预先定义，请参见小节。
-
更少的思维跳跃。在许多机器学习的书籍中，作者省略了数学证明过程中的一些中间步骤，这可能会节省一些空间，但是会给读者理解这个公式带来困难，读者会在中间迷失。
成为VIP会员查看完整内容
斯坦福大学Stephen Boyd教授与加州大学Lieven Vandenberghe教授合著的应用线性代数导论：向量、矩阵和最小二乘法《Introduction to Applied Linear Algebra – Vectors, Matrices, and Least Squares》在2018年由剑桥大学出版社发行，开源书包含19章，473页pdf，这本书的目的是提供一个介绍向量，矩阵，最小二乘方法，应用线性代数的基本主题。目标是让学生通俗易懂，入门学习。让学习者了解在包括数据拟合、机器学习和人工智能,断层、导航、图像处理、金融、和自动控制系统的应用。是一本不可多得好教材。
Stephen P. Boyd是斯坦福大学电子工程Samsung 教授，信息系统实验室电子工程教授，斯坦福大学电子工程系系主任。他在管理科学与工程系和计算机科学系任职，是计算与数学工程研究所的成员。他目前的研究重点是凸优化在控制、信号处理、机器学习和金融方面的应用。 https://web.stanford.edu/~boyd/
Lieven Vandenberghe,美国加州大学洛杉矶分校电子与计算机工程系和数学系教授
这本书的目的是提供一个介绍向量，矩阵，最小二乘方法，应用线性代数的基本主题。我们的目标是让很少或根本没有接触过线性代数的学生快速学习,以及对如何使用它们在许多应用程序中, 包括数据拟合、机器学习和人工智能, 断层、导航、图像处理、金融、和自动控制系统。
读者所需要的背景知识是熟悉基本的数学符号。我们只在少数地方使用微积分，但它并不是一个关键的角色，也不是一个严格的先决条件。虽然这本书涵盖了许多传统上作为概率和统计的一部分来教授的话题，比如如何将数学模型与数据相匹配，但它并不需要概率和统计方面的知识或背景。
这本书涉及的数学比应用线性代数的典型文本还少。我们只使用线性代数中的一个理论概念，线性无关，和一个计算工具，QR分解;我们处理大多数应用程序的方法只依赖于一种方法，即最小二乘(或某种扩展)。从这个意义上说，我们的目标是知识经济:仅用一些基本的数学思想、概念和方法，我们就涵盖了许多应用。然而，我们所提供的数学是完整的，因为我们仔细地证明了每一个数学命题。然而，与大多数介绍性的线性代数文本不同，我们描述了许多应用程序，包括一些通常被认为是高级主题的应用程序，如文档分类、控制、状态估计和组合优化。
这本书分为三部分。第一部分向读者介绍向量，以及各种向量运算和函数，如加法、内积、距离和角度。我们还将描述如何在应用程序中使用向量来表示文档中的字数、时间序列、病人的属性、产品的销售、音轨、图像或投资组合。第二部分对矩阵也做了同样的处理，最终以矩阵的逆和求解线性方程的方法结束。第三部分，关于最小二乘，是回报，至少在应用方面。我们展示了近似求解一组超定方程的简单而自然的思想，以及对这一基本思想的一些扩展，可以用来解决许多实际问题。
成为VIP会员查看完整内容
【473页pdf】Introduction to Applied Linear Algebra Vectors, Matrices, and Least Squares
Python Language Companion to Introduction to Applied Linear Algebra: Vectors, Matrices, and Least Squares
由Marc Peter Deisenroth，A Aldo Faisal和Cheng Soon Ong撰写的《机器学习数学基础》“Mathematics for Machine Learning” 最新版417页pdf版本已经放出，作者表示撰写这本书旨在激励人们学习数学概念。这本书并不打算涵盖前沿的机器学习技术，因为已经有很多书这样做了。相反，作者的目标是通过该书提供阅读其他书籍所需的数学基础。这本书分为两部分：数学基础知识和使用数学基础知识进行机器学习算法示例。值得初学者收藏和学习！
目录
Part I: 数据基础
- Introduction and Motivation
- Linear Algebra
- Analytic Geometry
- Matrix Decompositions
- Vector Calculus
- Probability and Distribution
- Continuous Optimization
Part II: 机器学习问题
- When Models Meet Data
- Linear Regression
- Dimensionality Reduction with Principal Component Analysis
- Density Estimation with Gaussian Mixture Models
- Classification with Support Vector Machines
成为VIP会员查看完整内容
相关VIP内容
相关资讯
相关论文
Shuai Shao,Yan-Jiang Wang,Bao-Di Liu,Weifeng Liu
4+阅读 · 2019年3月7日
Leland McInnes,John Healy,James Melville
7+阅读 · 2018年12月6日
Dinghan Shen,Martin Renqiang Min,Yitong Li,Lawrence Carin
6+阅读 · 2018年8月30日
Filip Radenović,Giorgos Tolias,Ondřej Chum
4+阅读 · 2018年7月10日
Jian Liu,Naveed Akhtar,Ajmal Mian
3+阅读 · 2018年5月1日
Wenhao Jiang,Lin Ma,Xinpeng Chen,Hanwang Zhang,Wei Liu
6+阅读 · 2018年4月3日
Dianqi Li,Xiaodong He,Qiuyuan Huang,Ming-Ting Sun,Lei Zhang
4+阅读 · 2018年4月3日
Lior Friedman,Shaul Markovitch
4+阅读 · 2018年1月31日
微信扫码咨询专知VIP会员