基于Hadoop的云计算试验平台搭建研究

第 31 卷第 1 期沈阳师范大学学报(自然科学版)V01．31 No．12024 年 1 月_，o 越糯“o 厂懿 P，∞榭培 Norm 口 Z L 及 i 谢您 i 纱(№￡拉豫 Z&i 跏卯)Jan 2024文章编号：1673—5862(2024)01—0085 一 05基于 HadOOp 的云计算试验平台搭建讨论张岩 1，郭松 2，赵国海2(1．沈阳师范大学计算机与数学基础教学部，沈阳 110034；2．沈阳师范大学教育技术学院，沈阳110034)摘 要：Hadoop 是一个免费的开源云平台，是允许在集群计算机上分布式处理大数据的软 件框架。它是一种可靠、高效、可伸缩的云平台，很适合在实验室环境下进行模拟测试。以 Hadoop 为基础，借助虚拟机、强出粕 re 以及 Linux、ubuntu、Hadoop、java—jdk 等软件，详细地介绍 了单机环境下的虚拟云平台搭建过程，并给出具体的实例搭建过程。在设计实例中详细的论述了 虚拟机、java、Had∞p 等软件的安装、设置、测试过程。实现了在实验室环境对云平台的虚拟，并提 出了在搭建试验平台时应该注意的用户权限、路径配置和使用 ssH 服务程序等问题。该试验平 台为系统中间件和应用服务的开发提供了基础。关键词：Hadoop；云计算；虚拟；java 中图分类号：TP311文献标志码：A doi：10．3969／i．issn 1673—5862．2024．01．0190 引言云计算是继 1980 年大型计算机到客户端——服务器的大转变之后的又一种巨变。云是分布式计 算(distributed computing)、并行计算(parallel computing)、效用计算(utility computing)、网络存储 (network storage technologies)、虚拟化(virtualization)、负载均衡(10ad balance)等传统计算机和网络 技术进展融合的产物。云计算的核心思想是把大量的资源通过网络进行统一存储、调度和使用，形成一 个庞大的资源库，给用户提供服务。2024 年，工业和信息化部、国家进展和改革委员会联合印发《关于 做好云计算服务创新进展试点示范工作的通知》，确定在北京、上海、深圳、杭州、无锡等 5 个城市先行开 展云计算服务创新进展试点示范工作，显示出我国对于进展云计算的高度重视[1]。1开源云平台——HadoopHadoop 是一个在大型集群的廉价硬件设备上运行应用程序的开源云平台软件框架。Hadoop 为 应用程序透明的提供了一组稳定、可靠的接口和数据服务 [2|。Hadoop 中实现了 Gb091e 的MapReduce 算法，它能够把应用程序分割成许多很小的工作单元，每个单元可以在任何集群节点上执行或...