联通大数据公安情报应用技术方案_4VIP免费

联通“大数据”公安情报应用技术方案联通“大数据”公安情报应用技术方案中国联通贵州省分公司第1页共48页联通“大数据”公安情报应用技术方案2015年11月目录第1章概述.............................................................................................51.1项目背景..........................................................................................................51.2项目建设目标....................................................................................................51.3项目建设内容....................................................................................................6第2章系统总体架构..................................................................................6第3章系统网络及硬件环境..........................................................................7第4章数据能力开发..................................................................................84.1联通总部大数据平台能力介绍..............................................................................84.2数据采集..........................................................................................................94.2.1实时数据采集............................................................................................94.2.2定时数据采集............................................................................................94.2.3网页数据（非结构化）数据采集...................................................................94.3实时数据加工和处理.........................................................................................104.3.1Spark平台..............................................................................................104.3.2SparkStreaming实时数据加工.................................................................104.4定时数据存储及加工.........................................................................................114.4.1数据存储策略..........................................................................................114.4.2Hadoop存储与加工...................................................................................124.4.3Oracle数据展现......................................................................................17第5章应用功能开发................................................................................185.1数据查询........................................................................................................185.1.1号码位置查询..........................................................................................185.1.2详单查询模块..........................................................................................195.1.3号码轨迹查询模块...................................................................................205.1.4基站信息查询..........................................................................................21第2页共48页联通“大数据”公安情报应用技术方案5.1.5机主信息查询模块...................................................................................225.2数据推送........................................................................................................235.2.1用户基本信息推送...................................................................................235.2.2手机标记信息推送...................................................................................235....