大数据分析系统需求

目 录 大数据分析系统需求 天津绍闻迪康科技咨询有限公司 2018/5/28 仅为需求基本框架，需要根据贵公司产品、技术路线具体面议。 一、系统定位 ......................................................................................... 1 二、功能模块 ......................................................................................... 2 2.1 爬虫系统 ........................................................................................... 3 2.1.1 数据源 ...................................................................................... 3 2.1.2 爬虫系统功能 .......................................................................... 3 2.2 数据处理、存储、计算系统 ............................................................ 4 2.2.1 数据处理模块 .......................................................................... 4 2.2.2 数据存储模块 .......................................................................... 4 2.2.3 数据计算模块 .......................................................................... 5 2.3 数据分析、可视化系统 .................................................................... 9 2.4 对外接口 ......................................................................................... 10 2.4.1 会员制体系 ............................................................................ 10 2.4.2 其他 ........................................................................................ 10 2.5 其他 ................................................................................................. 11 2.5.1 数据痕迹 ................................................................................ 11 2.5.2 信息安全 ................................................................................ 11 2.5.3 注意事项 ................................................................................ 11 1 、系统定位 从数据接入到数据应用，我们需要【大数据分析系统】包括几大功能模块： （1）爬虫系统 （...