基于垃圾短信发往方向频次流量的大数据相关性分析

http://www.c114.com.cn ( 2018/6/8 16:54 )

秦保根，男，1985年毕业于南京邮电学院电信工程系，高级工程师，享受国务院特殊津贴，中国联通科技成果评审专家、结算专家、评标专家，江西联通高级经理。

摘要：

垃圾短信纷繁多样，给电信运营商的拦截带来极大的困扰，通过基于短信发往的所属本地网方向、频次及流量的垃圾短信大数据相关性分析，解决了这一难题，供各电信运营商参考。

作者简介：

1.前言

根据相关资料显示，仅有0.7%以下的用户表示没有收到过垃圾短信，用户每周平均收到的垃圾短信数量为12 条。此外，电信运营商每月退网用户中垃圾短信用户占近一半，并造成大量欠费，尤其是后付费用户漫游异地后，其话单记录需要过一定时间后，方能向其归属地发回账单，造成欠费！因此，依法治理垃圾短信，是促进社会主义政治文明及精神文明建设、构建和谐社会、净化社会环境、打击违法犯罪的必然需要，是保障人民群众合法权益的根本使然。

垃圾短信诈骗和传播违法短信等活动日益猖獗，主要表现如下：

假冒银行或银联名义发送手机违法短信进行诈骗或者敲诈勒索公私财物；

散布淫秽、色情、赌博、暴力、凶杀、恐怖内容或者教唆犯罪、传授犯罪方法；

非法销售枪支、弹药、爆炸物、走私车、毒品、***、淫秽物品、假钞、假发票或者明知是犯罪所得赃物；

发布假中奖、假婚介、假招聘，或者引诱、介绍他人卖淫嫖娼的；

多次发送干扰他人正常生活的，以及含有其他违反宪法、法律、行政法规禁止性规定的内容；

极少数境内外敌对势力、敌对分子和对社会心怀不满的人，编造、传播一些明显带有诽谤、煽动性内容的手机违法短信，企图破坏社会稳定。

2.建议的技术方案

2.1以前垃圾短信防范系统存在的缺点：

仅通过对短信关键字进行匹配识别拦截；

仅对某一时段超频发送短信的用户进行识别拦截。

以上方式，易造成对正常用户的误判，且对垃圾短信的识别量非常有限。

2.2 实施的组网及处理流程

为在公众通信网上，提高垃圾短信判别的准确率，大幅减少垃圾短信的传送，使经济诈骗、垃圾广告、不法短信传播得到及时的甄别堵截，建议如下的垃圾短信拦截方案：

垃圾短信判别系统组网图，如图1所示，判断可疑垃圾短信的流程，如图2所示。

3．实施的主要步骤

在此,我们首先定义“可疑短信接收方向”，它是指：在某一时间段内，某A地之某一电信运营商发往其他异地本地网（Bn地）短信数量X，若大于或接近其发往所在地（A地）的本地网短信数量Y，则该异地本地网（Bn地）称为“可疑短信接收方向”，“可疑短信接收方向”（Bn地）可能同时存在不止一个,即n>=1。比如：假设南昌联通（A）发往长沙（B1）、海口（B2）、东莞(B3)所有三个运营商（联通、电信及移动）的短信数量，若大于或接近其发往南昌本地三个运营商（联通、电信及移动）的短信数量，则长沙、海口、东莞称为“可疑短信接收方向”，如表1所示。

“可疑短信号码”：是指可疑短信接收方向的所有发信号码中，剔除电信运营商设定的白名单号码和吉祥号码后的发信号码。

具体来说：参照图1所示的可疑短信判别系统组网图，按照图2所示的判断可疑垃圾短信的流程，除重大节日：如春节、元宵、端午、中秋、国庆、元旦、五一、圣诞平安、情人节、父亲节、母亲节等外，垃圾短信分析判别服务器的短信话单采集模块,从短信中心采集短信话单,统计分析及判别模块分析某一个或多个时间段内超频发信号码的可疑短信接收方向及其可疑短信号码，对可疑垃圾短信方向发信号码的关联情况进行统计分析，再从计费帐务系统中提取该部分发信号码的用户信息资料进行鉴别，将判定为垃圾短信的号码列为黑名单，放入短信中心限制其短信发送，具体步骤如下：

步骤1，短信话单采集模块通过FTP从短信中心实时获得原始话单数据，对某一或多个时间段内（如每日8：00－12：00、13：00－17:00、19：00－23：00或按天等等）发信号码的超频短信话单（如在设定的某个时间段内超频发送100条以上短信，其他时间段超频发送短信数可以设定为150条等）进行分拣；