大数据Hadoop&云计算Cloud Computing

深碍√TFBOYSˉ_ 2023-07-02 04:26 103阅读 0赞

**  云计算(Cloud Computing)**是基于互联网的相关服务的增加、使用和交付模式，通常湾及通过互联网来提供动态易扩展且经常是虚拟化的资源。云是网络、互联网的种比喻说法，过去往往用云来表示网络，后来也用来表示联网和底层基础设施的抽象。狭义云计算指IT基础设施的交付和使用模式，指通过网络以按需、易扩展的方式获得所需资源：广义云计算指服务的交付和使用模式，指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关，也可以是其他服务。它意味着计算能力也可以作为种商品通过互联网进行流通。

**大数据（Hadoop）**或称海量数据，指的是所涉及的资料量规模巨大到无法通过目前的主流软件工具，在合理时间内达到撷取、管理、处理并整理成为帮助政府、企业经营决策的依据。

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一 样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式计算架构。它的特色在于对海量数据的挖掘，但它必须依托云计算的分布式处理，分布式数期库、云存储和虚担化技术。云计算和大数据的关系如图1-1所示。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDAxNTY2OQ_size_16_color_FFFFFF_t_70][]

简单来说，**云计算是硬件资源的虚报化**，而**大数据是海量数据的高效处理。**虽然从这个解释来看也不是完全贴切，但是却可以帮助对这两个名字不太明白的人很快理解其区别。当然，如果解释更形象一 点的话，云计算相当于我们的计算机和操作系统将大量的硬件资源虚报化后再进行分配使用。

可以说，大数据相当于海量数据的“数据库”，通观大数据领域的发展我们也可以看出，当前的大数据发展一直在向着近似于传统数据库体验的方向发展，句话就是， 传统数据库给大数据的发展提供了足够大的空间。

**大数据的总体架构包括三层**:**数据存储、数据处理和数据分析**。数据先要通过存储层存储下来，然后根据数据需求和目标来建立相应的数据模型和数据分析指标体系对数据进行分析产生价值，而中间的时效性又通过中间数据处理层提供的强大的并行计算和分布式计算能力来完成。三者相互配合，这让大数据产生最终价值。

云计算未来的趋势是:**云计算作为计算资源的底层，支撑着上层的大数据处理；**大数据的发展趋势是，**实时交互式的查询效率和分析能力。**

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDAxNTY2OQ_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200126140249604.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDAxNTY2OQ==,size_16,color_FFFFFF,t_70