面向集团型企业的混合型分布式数据仓库构建VIP免费

第9卷第1期2003年1月计算机集成制造系统CIMSComputerIntegratedManufacturingSystemsV0l_9No．1Jan．2003文章编号：1．006—5911(2003)01一O08O—O5面向集团型企业的混合型分布式数据仓库构建韩览山，邵贝恩(清华大学自动化系国家CIMS工程技术研究中心，北京100084)摘要：越来越多的集团型企业迫切需要分布式数据管理和多层次决策支持，因而对数据仓库的实现技术提出了新的要求。本文的目的是寻求一种能适应集团型企业特点的数据仓库方案。分析了传统的集中式数据仓库的不足，在此基础上，提出混合型分布式数据仓库的概念和体系结构，结合Jw—DSS工程项目，讨论了该方案中的关键技术，包括元数据分布、数据抽取、联机分析处理、用户管理的策略等。关键词：数据仓库；元数据分布；联机分析处理中图分类号：TP311文献标识码：A为了更好地实现资源共享和提高市场竞争力，很多同行业企业进行了资产重组，组建企业集团。这种企业集团有以下特点：①各子公司均有相对自主的经营权，有的是独立法人；②集团总部主要负责整个集团的总体监控，是集团的决策和信息中心；③各子公司在地域上分布较广。为了提高集团总部的监控能力和各子公司的决策水平，集团型企业纷纷建立数据仓库，并在此基础上构建决策支持系统。本文结合Jw。_DSS制造工程项目，研究构建面向集团型企业的混合型分布式数据仓库的方法，主要包括以下内容：①构建混合型分布式数据仓库的原因；②混合型分布式数据仓库的体系结构；③混合型分布式数据仓库的元数据分布、数据加载、用户管理方案和联机分析处理(On-lineAnalysisandProcessing，OLAP)。1建立混合型分布式数据仓库的必要性1．1为何要建立分布式数据仓库集中式数据仓库是许多企业构建数据仓库时采用的方案，但对集团型企业来说，它并不是一个好的解决方案。在集团型企业中，各子公司有自己相对独立和完整的事务处理系统，需要建立自己的局部数据仓库，以支持经营决策活动；集团总部要对整个集团的经营活动进行监控，做出战略决策，也需要建立全局数据仓库，以支持集团的经营决策活动。如果采用集中式数据仓库的方案，会给数据仓库的使用和维护带来很多不便。对于集团型企业，建立集中式数据仓库不是合理的解决方案，而建立分布式数据仓库，虽然会带来全局数据仓库和局部数据仓库之间一定量的数据冗余，但是，它能够比较好地满足集团型企业的需要，其主要表现是：①各子公司根据自己的业务特点和需要，建立局部数据仓库，便于各子公司对数据的分析；②各子公司维护自己的局部数据仓库比较方便，数据也比较安全；③全局数据仓库按照总部的分析需求，从各局部数据仓库中抽取数据，不与各子公司的业务系统发生联系，工作比较单纯，不需要进行数据清洗和转换，抽取的效率高。1．2为何要建立混合型数据仓库数据仓库之父Inmon认为，数据仓库和多维DBMS既有区别，又互为补充，数据仓库中的数据不应该用多维的方式组织，而面向OLAP应用的数收稿日期：2002—04—19；修订日期：2002—09—23。作者简介：韩览山(1978一)，男，安徽芜湖人，清华大学自动化系国家CIMS工程技术研究中心硕士研究生，主要从事决策支持系统构建、数据挖掘等研究。E—mail：hanlsh99@mails．tsinghua．edu．cn。维普资讯http://www.cqvip.com第1期韩览山等：面向集团型企业的混合型分布式数据仓库构建81据集市中的数据应当用多维的方式组织口]。按照Inmon的理论，数据集市应当建立在数据仓库的基础上，从数据仓库中提取数据进行综合，并按照多维的方式组织起来，以便于OLAP分析。Inmon主要是从数据量的角度考虑的。我们认为，我国当前的信息化水平较低，企业数据量通常不是很大，数据仓库的规模较小，因此数据仓库中的数据也可以用多维方式组织。其好处是：减少了数据的冗余又不使系统性能变坏，减少了系统的开发和维护工作。因此，在Jw—DSS项目中，我们采用多维的方式来组织数据仓库中的数据。在当前的技术条件下，多维DBMS分两类：一类是建立在关系模型基础上的，用星型模型和雪花模型来存储数据，本文中称之为关系型数据仓库；另一类是建立在优化的“切片和分块”基础上的，用多维数组来存储数据，称...