电脑桌面
添加小米粒文库到电脑桌面
安装后可以在桌面快捷访问

数据整合方案VIP免费

数据整合方案_第1页
1/11
数据整合方案_第2页
2/11
数据整合方案_第3页
3/11
1. 信息资源标准化 数 据 标 准 化 主 要 实 现 了 数 据 格 式 、内容和语义的映射、转换,实 现 编码一致化 、面向主 题集成、数 据 聚合等功能。 通过数 据 交换、采集,形成的基础业务数 据 ,通过数 据 整合进一步的数 据ETL(数 据 抽取、转换、加载),按照定制的标 准 信息规范进行匹配映射(Match)、数 据 格 式 转换(Transform),并对重复数 据 进行数 据 清洗(Cleanse)、过滤(Filtrate)、聚合(Aggregate),最后多维加载(Load)后形成标 准 化 数 据 。 采用数 据 同步工具和 ETL 工具完成数 据 抽取、同步等整合工作,并通过任务调度管理实 现 对整合工具的集中管理和执行。 数 据 采集时可以按信息资源平台的要 求将数 据 标 准 化 。在采集抽取数 据 时没有按信息资源平台转换为标 准 数 据 的数 据 ,需要 按信息资源平台的要 求转换成标 准 的数 据 如字典的统一。 2. 数据加工管理 2.1. 数据抽取 数 据 抽取是利用抽取工具,建立抽取模型,将多个数 据 源数 据 汇总到一个数 据 库的过程。 2.2. 数 据 清 洗 由 于 数 据 来 自 多 个 业 务 系 统 , 而 且 包 含 历 史 数 据 , 需 要 按 照 一 定 的 规 划 把数 据 进 行 清 洗 , 整 个 数 据 清 洗 的 对 象 应 包 括 不 完 整 的 数 据 、错误的 数 据 、重复的 数 据 等三大类。 2.3. 数 据 转 换 数 据 转换主要 实现数 据 标准化的 过程, 信息资源平台的 数 据 , 来 自 多 个 业务 系 统 , 有些数 据 源没有按 照 统 一 的 标准规 范设计, 因此会造成数 据 难以与其他数 据 共享。数 据 转换应 实现按 照 统 一 的 数 据 标准和既定 的 格式转换规 则, 对数 据 的 整 理和格式统 一 。 2.4. 数 据 装 载 数 据 装载操作效率是数 据 资源平台需 要 考虑的 重要 环节。投标人应 详细描述针对 本项目的 不 同数 据 资源所应 采用的 数 据 装载策略。 2.5. 数 据 标 识 数 据 标识主要 为了突出数 据 的 关键性信息, 便于 实时的 统 计和更有效的 比对 , 进 而 获取符合用户业 务 办理相关的 结果。 3. 数 据 整 合处理系统 3.1. 数 据 处理流程 数 据 中心的...

1、当您付费下载文档后,您只拥有了使用权限,并不意味着购买了版权,文档只能用于自身使用,不得用于其他商业用途(如 [转卖]进行直接盈利或[编辑后售卖]进行间接盈利)。
2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。
3、如文档内容存在违规,或者侵犯商业秘密、侵犯著作权等,请点击“违规举报”。

碎片内容

数据整合方案

您可能关注的文档

确认删除?
VIP
微信客服
  • 扫码咨询
会员Q群
  • 会员专属群点击这里加入QQ群
客服邮箱
回到顶部