最新《自动微分手册》77页pdf

这本书的目标是介绍自动微分的基本算法，以及流行的数学和统计函数的自动微分规则的百科全书式的集合。

自动微分是一种通用的技术，用于将函数的计算值转换为可计算导数的值。导数计算只给用于计算函数值的每个操作增加一个常数的开销，因此可微函数与原始函数具有相同的复杂度阶数。在描述了自动微分的标准形式之后，这本书提供了一个百科全书收集的正切和伴随规则的前向模式和后向模式自动微分，涵盖了最广泛使用的标量，向量，矩阵和概率函数。附录包含正向模式、反向模式和混合模式自动区分的工作示例代码。