参考异常值数据预警分析
1 异常检测
1.1 适用场景
异常检测算法适用的场景特点有:
(1)无标签或者类别极不均衡;
(2)异常数据跟样本中大多数数据的差异性较大;
(3)异常数据在总体数据样本中所占的比例很低。
常见的应用案例如:
金融领域:从金融数据中识别”欺诈用户“,如识别信用卡申请欺诈、信用卡盗刷、信贷欺诈等;
安全领域:判断流量数据波动以及是否受到攻击等等;
电商领域:从交易等数据中识别”恶意买家“,如羊毛党、恶意刷屏团伙;
生态灾难预警:基于天气指标数据,判断未来可能出现的极端天气;
医疗监控:从医疗设备数据,发现可能会显示疾病状况的异常数据;
1.2 存在的挑战
异常检测是热门的研究领域,但由于异常存在的未知性、异质性、特殊性及多样性等复杂情况,整个领域仍有较多的挑战:
1)最具挑战性的问题之一