Linux.中国 - 开源社区

 找回密码
 骑士注册

QQ登录

微博登录


Twitter开源流量异常侦测工具:AnomalyDetection

2015-1-11 08:31    评论: 5 分享: 16    

Twitter本周宣布开源流量异常侦测工具AnomalyDetection,该工具可以发现那些能够影响网站服务质量的异常活动,例如流量拥堵或垃圾信息机器人。

AnomalyDetection是一个R语言程序包,Twitter通常会在重大新闻和体育赛事期间用AnomalyDetection扫描入站流量,发现那些使用僵尸账号发送大量垃圾(营销)信息的机器人。

流量异常侦测figure_localglobal_anomalies

AnomalyDetection异常扫描

据Twitter透露,AnomalyDetection与Twitter去年10月开源的BreakoutDetection存在互补关系。

流量异常侦测对于号称“地球脉搏”的Twitter来说非常具有挑战性,因为对流量进行长周期跨度(例如一年)的扫描分析时,一些异常活动往往会掩盖掉。此外,流量异常的原因也各有不同,有的是健康的,例如重大新闻事件导致的流量异常,而有的是不好的,例如QPS(每秒查询量)中point-in-time实时性下降可能意味着硬件或数据采集方面出了问题。

Twitter流量异常侦测-长期figure_longterm

长周期流量异常侦测

AnomalyDetection通过GNU公众授权许可协议开源,目前可以在GitHub上下载到源码。

发表评论


最新评论

我也要发表评论

jenwang_ 2015-1-13 14:03  新浪微博网友评论
@我的印象笔记
回复
tinycedar 2015-1-11 13:03  新浪微博网友评论
Repost
回复
把持不住的四妹 2015-1-11 11:03  新浪微博网友评论
@我的印象笔记
3 回复
cscq188 2015-1-11 10:03  新浪微博网友评论
@selisia
回复
王依依 2015-1-11 09:33  新浪微博网友评论
时间序列分析
回复

热点评论

把持不住的四妹 2015-1-11 11:03
@我的印象笔记
3
返回顶部

分享到微信朋友圈

打开微信,点击底部的“发现”,
使用“扫一扫”将网页分享至朋友圈。