ENGLISH 中 文
首页 | | | | | |
  产品与解决方案 >> 大数据 >> 数据合成系统
数据合成系统

基本概述

百卓数据合成系统负责接收采集解析设备的上报的原始数据及单接口XDR,对这些数据进行合成处理,然后将处理后的数据上报给应用层。我司数据合成系统按照《中国移动上网日志留存系统数据合成服务器设备规范》《中国电信数据合成服务器设备规范》《中国联通数据合成服务器设备规范》等运营商规范定制化开发,不同系列的数据合成服务器可同时满足三家运营商的数据合成器要求。针对LTE系统,数据合成系统从采集解析设备接收各接口信令XDR(Uu、X2、S1-MME、S11、S6a、SGs),S1-U接口业务XDR,MR XDR(小区级MR XDR和用户级MR XDR),统一封装之后的原始(原始信令数据和原始业务包头数据)等类型数据并做处理,生成以下类型数据并上报给应用层:

1.关联同一个端到端信令流程中各接口信令的合成信令XDR
2.关联同一个业务传输过程的合成业务XDR
3.对UE_MR XDR进行定位和用户信息回填后的合成UE_MR XDR
4.Cell_MR XDR,数据合成服务器对小区级MR XDR并不进行任何处理
5.完成用户回填的完整的各接口信令XDR及S1-U接口业务XDR
6.统一封装之后的原始数据,包括原始信令数据和原始业务包头数据

适用场景

 

应用框图

功能亮点

1.支持全量原始数据输出接口,将全量原始数据输出至省内自建系统;
2.支持DR关联功能、XDR回填功能、 MR数据处理功能、XDR合成功能、原始数据转发功能等;
3.支持通过SDTP协议接收采集解析设备的XDR数据和原始码流;
4.支持对采集解析设备上报的原始码流数据进行存储;
5.支持提供各种数据的共享功能,这包括经过回填的完整的单接口XDR、合成XDR及原始码流,用于供第三方系统进行查询及调用;
6.支持基于IPv6和IPv4协议的原始XDR的接收、合成、上报等功能要求;
7.支持应用系统通过KPI数据订阅接口向数据合成服务器订阅KPI指标数据;
8.支持手机恶意软件监测系统样本监测采集模块(DA)上报及重报接口;
9.支持用户在线状态及用户日志查询、告警上报、访问日志上报、访问日志重报等功能,协议包含但不限于http、https、ftp、smtp、imap、pop3、dns、snmp等。

软件方案

数据合成系统内部架构图

 

数据合成系统内部组件结构图

 

1.IF1SDTP服务层
接收来自采集系统的XDR及原始码流,并根据各接口特征值进行分发处理。软采信令进入软采合成模块;硬采信令进入硬采合成模块;信令原始码流及S1-U数据进入合成关联组件。

2.软采合成模块
进行软采合成预处理;完成MR位置定位计算;计算结果送往合成关联组件。

3.硬采采合成模块
进行硬采合成预处理,完成硬采相关流程的初步合成;提取UE级别的标识信息;将计算结果送往关联合成组件。

4.合成关联组件
接收软采、硬采初步合成的计算结果及相应的单接口XDR(如果有),进行LTE信令全面合成;回填各信令XDR缺失的用户标识信息;回填UE位置信息;对XDR中特定信息如MSISDN进行加扰;将处理后或未处理的XDR送往KPI实时统计组件;自IF1接口接收S11/S1-U数据,进行业务XDR的关联合成与回填;自IF1接口接收原始码流并透传给数据发送转换服务组件。

5.KPI实时统计组件
接收合成关联组件处理后的XDR,基于已设置KPI计算逻辑进行KPI特征提取及统计。
按照设定的上报周期将KPI统计数据交给数据发送转换服务。

6.告警管理组件
告警模块接收IF1/IF2接口质量告警及底层平台的设备级告警,按照要求的格式交数据发送转换服务进行上报。

7.数据发送转换组件
数据中转中枢。管理各类数据的订阅者及订阅数据类型;接收系统中所有处理完成的数据,根据数据订阅者的不同及所需数据类型,将数据(包括XDR、原始码流、告警信息、日志、KPI)进行数据转换,并交给相应的发送服务组件进行发送;对于转换后的日志文件按要求存入HDFS文件系统中;对于发送失败的某些数据如XDR、原始码流,将其送入Hadoop平台进行缓存;监控上述发送路径的状态,在链路回复后,自调用Hadoop API检索已缓存数据并再次进行发送。

8.统计分析服务/数据检索反查服务/Oracle
在使用完整大数据解决方案时,所有XDR均先存入HDFS中,由统计分析服务完成KPI统计分析并存入Oracle;由数据检索反查服务完成KPI、XDR的上报及反查服务。
 

 


关于百卓 | 联系百卓 | 资质与荣誉 | 友情链接 版权所有2005-2016 北京百卓网络技术有限公司 京ICP备09032160  京公网安备110108002133号