dasp数据服务平台
产品简介
数据服务平台基于网络协议解析系统(npr)协议解析数据、实时流数据、第三方接入数据等,对数据进行深度的清洗、加工,对数据提供实时快速响应。同时,以海量数据处理引擎和实时数据处理引擎为核心,并针对技侦、公安、网安、运营商等数据应用需求,打造智慧、可信的大数据平台,提炼行业中敏捷、高效的算法模型,让客户可以更快、更准、更稳的从各类繁杂无序的海量数据中发现价值点。通过自研的服务接口集,屏蔽底层数据异构,将复杂的业务统计和分析以mapreduce和spark等先进的数据分析框架进行整合,为业务层提供高效的数据服务。
产品功能模块
1、数据标准化
对数据进行提取、清洗、关联、比对、标注等一系列处理;
2、 数据中心平台
通过将数据存储和数据计算进行分布式构建,在计算中心集合碰撞、模型构建、深度挖掘,将数据进行内容、行为、意图、关系的对象化处理,并进行专题存储、索引存储、形成相应的结构和非结构化库。具体系统包括包括消息中心系统、任务调度系统、监控运维系统、资源管理系统、元数据管理等;
3、数据分析模型
包括异常行为分析模型、精准推荐分析模型、扩线模型、预测模型、虚拟身份拟合模型、社交关系模型等。
4、数据服务接口集
提供包括:查询服务、统计服务、分析服务、消息服务、策略服务、总线服务等一系列数据服务接口。