【凸优化】凸集、凸函数与凸优化基本概念

2018 年 1 月 17 日 机器学习研究会
数学模型与基本概念


目标函数或约束函数至少有一个不是决策变量的线性函数。即

2
梯度与海塞矩阵

梯度和海塞矩阵是在非线性规划中用得较多的概念,其定义如下:

梯度


对于一元函数,其梯度就是其一阶导数。

海塞矩阵


海塞矩阵的定义与梯度类似,但是求的是二阶偏导,并且结果是一个矩阵,如下所示


转自:机器学习算法与自然语言处理


完整内容请点击“阅读原文”

登录查看更多
2

相关内容

机器学习速查手册,135页pdf
专知会员服务
345+阅读 · 2020年3月15日
面试时让你手推公式不在害怕 | 梯度下降
计算机视觉life
14+阅读 · 2019年3月27日
机器学习中的最优化算法总结
人工智能前沿讲习班
22+阅读 · 2019年3月22日
博客 | 机器学习中的数学基础(凸优化)
AI研习社
14+阅读 · 2018年12月16日
【直观详解】支持向量机SVM
机器学习研究会
18+阅读 · 2017年11月8日
Learning to Importance Sample in Primary Sample Space
Meta-Learning with Latent Embedding Optimization
Arxiv
6+阅读 · 2018年7月16日
VIP会员
相关VIP内容
相关资讯
面试时让你手推公式不在害怕 | 梯度下降
计算机视觉life
14+阅读 · 2019年3月27日
机器学习中的最优化算法总结
人工智能前沿讲习班
22+阅读 · 2019年3月22日
博客 | 机器学习中的数学基础(凸优化)
AI研习社
14+阅读 · 2018年12月16日
【直观详解】支持向量机SVM
机器学习研究会
18+阅读 · 2017年11月8日
Top
微信扫码咨询专知VIP会员