浅谈分布式计算一、引言在如今这个信息爆炸的时代，人们对大数据技术的需求越来越大，然而大数据是如何运作的呢，大数据的运作分为如下几步，首先是数据的采集，然后存储，之后计算，然后得到结论，但是这样就会出现一个问题，大数据需要的数据实在是太多了，并不是常规的 Mb 和 Gb,而是更大的 Pb、Eb 和 Zb,然后导致的就是数据的存储对于硬件的要求相当之大，数据移动一次的代价也相当大,这是无法接受的,所以为了解决这一难题,人们就研究出了分布式技术。二、分布式技术首先我们需要解决数据的存储,于是分布式存储技术诞生了,分布式存储系统,是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。这样大大减少了对硬件的需求,同时也解决了数据的移动代价问题，可以说如果没有分布式技术，那么大数据技术的发展绝对不会像现在这样迅猛发展。而分布式计算技术是什么呢,所谓分布式计算是一门计算机科学，它研究如何把一个需要非常巨大的计算能力才能解决的问题分成许多小的部分，然后把这些部分分配给许多计算机进行处理，最后把这些计算结果综合起来得到最终的结果。分布式网络存储技术是将数据分散的存储于多台独立的机器设备上。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，不但解决了传统集中式存储系统中单存储服务器的瓶颈问题，还提高了系统的可靠性、可用性和扩展性。三、分布式计算的普及随着计算机的普及，个人电脑开始进入千家万户与之伴随产生的是电脑的利用问题。越来越多的电脑处于闲置状态，即使在开机状态下 CPU 的潜力也远远不能被完全利用。我们可以想象，一台家用的计算机将大多数的时间花费在“等待”上面。即便是使用者实际使用他们的计算机时,处理器依然是寂静的消费，依然是不计其数的等待，比如说等待输入，但实际上并没有做什么。互联网的出现,使得连接调用所有这些拥有限制计算资源的计算机系统成为了现实。四、分布式计算项目那么，一些本身非常复杂的但是却很适合于划分为大量的更小的计算片断的问题被提出来，然后由某个研究机构通过大量艰辛的工作开发出...
