计算平台概要设计说明书文件编号受控编号版次1.0密级内部公开总页数42附录作者：日期：2013-01-28批准：日期：审核：日期：WORD格式可编辑（版权所有，翻版必究）专业技术知识共享WORD格式可编辑文件修改记录修改日期修改状态修改页码及条款修改人审核人批准人专业技术知识共享WORD格式可编辑目录1.引言...................................................51.1编写目的............................................................51.2术语与缩略词........................................................61.3对象及范围..........................................................81.4参考资料............................................................92.系统总体设计...........................................92.1需求规定............................................................92.1.1数据导入......................................................92.1.2数据运算......................................................92.1.3运算结果导出.................................................102.1.4系统监控.....................................................102.1.5调度功能.....................................................112.1.6自动化安装部署与维护.........................................112.2运行环境...........................................................122.3基本设计思路和处理流程.............................................132.4系统结构...........................................................142.4.1大数据运算系统架构图.........................................142.4.2hadoop体系各组件之间关系图..................................142.4.3计算平台系统功能图...........................................152.4.4系统功能图逻辑说明...........................................162.4.5计算平台业务流程图...........................................162.5尚未解决的问题.....................................................173.模块/功能设计.........................................173.1计算驱动模块.......................................................173.1.1设计思路.....................................................173.1.2流程图.......................................................193.1.3处理逻辑.....................................................203.2调度模块...........................................................203.2.1设计思路.....................................................203.2.2流程图.......................................................223.2.3处理逻辑.....................................................233.3自动化安装部署模块.................................................233.3.1设计思路.....................................................233.3.2处理逻辑.....................................................233.4调度模块与计算驱动模块交互流程.....................................243.4.1处理流程图...................................................243.4.2处理逻辑.....................................................243.4.3hadoop驱动模块调用驱动接口..................................25专业技术知识共享WORD格式可编辑3.4.4调度模块接收hadoop执行状态接口..............................253.5调度模块与kettle交互流程..........................................263.5.1处理流程图...................................................263.5.2处理逻辑.....................................................273.6对调度任务运行过程进行监控流程.....................................273.6.1处理流程图...................................................273.6.2处...
