在数据挖掘中,异常检测(英语:anomaly detection)对不符合预期模式或数据集中其他项目的项目、事件或观测值的识别。通常异常项目会转变成银行欺诈、结构缺陷、医疗问题、文本错误等类型的问题。异常也被称为离群值、新奇、噪声、偏差和例外。 特别是在检测滥用与网络入侵时,有趣性对象往往不是罕见对象,但却是超出预料的突发活动。这种模式不遵循通常统计定义中把异常点看作是罕见对象,于是许多异常检测方法(特别是无监督的方法)将对此类数据失效,除非进行了合适的聚集。相反,聚类分析算法可能可以检测出这些模式形成的微聚类。 有三大类异常检测方法。[1] 在假设数据集中大多数实例都是正常的前提下,无监督异常检测方法能通过寻找与其他数据最不匹配的实例来检测出未标记测试数据的异常。监督式异常检测方法需要一个已经被标记“正常”与“异常”的数据集,并涉及到训练分类器(与许多其他的统计分类问题的关键区别是异常检测的内在不均衡性)。半监督式异常检测方法根据一个给定的正常训练数据集创建一个表示正常行为的模型,然后检测由学习模型生成的测试实例的可能性。
【机器学习】从入门到第一个模型
产业智能官
1+阅读 · 2017年10月10日
城市大脑背后的技术有哪些?
阿里技术
1+阅读 · 2018年8月24日
边缘计算应用:传感数据异常实时检测算法
计算机研究与发展
11+阅读 · 2018年4月10日
AI时代,我们离AIOps还有多远?
StuQ
0+阅读 · 2017年8月5日
京东云监控系统设计及落地之路
InfoQ
1+阅读 · 2019年11月6日
数据库运维的那些难题,我们用机器学习解决了
DBAplus社群
0+阅读 · 2018年11月29日
【智能金融】机器学习在反欺诈中应用
产业智能官
34+阅读 · 2019年3月15日
在看不见的地方,AI正在7×24为你在线服务
微软研究院AI头条
0+阅读 · 2018年2月8日
新手|机器学习:从入门到第一个模型
全球人工智能
1+阅读 · 2017年10月17日
开源分布式跟踪方案概览
InfoQ
0+阅读 · 2019年8月14日
重磅 | 华大在无创单病领域获重大技术突破
未来产业促进会
0+阅读 · 2018年1月17日
参考链接
微信扫码咨询专知VIP会员