您现在的位置: 首页 > 网站导航收录 > 百科知识百科知识

大数据一定要有云计算吗？

数据,互联网,分布式大数据一定要有云计算吗？

发布时间：2016-12-08加入收藏来源：互联网点击：

大数据一定要有云计算吗？

回答于 2019-09-11 08:43:50

回答于 2019-09-11 08:43:50

从技术的角度来说，云计算和大数据并不分家，所谓的大数据平台就是云计算技术的延伸。云计算的几个关键特点是多用户、虚拟化、分布式存储和分布式计算，其中分布式存储和分布式计算也是大数据平台的关键技术，所以从技术的角度来说，大数据是云计算的一个技术延伸，大数据本身更像是一个“管理概念”而不像是“技术描述”。

云计算的核心是服务，而服务也正是互联网的核心内容之一，随着服务的发展必然会产生大量的数据，这些数据来自于互联网的各个角落，有个人数据也有行业数据，更有物联网系统带来的非结构化数据，这些数据就构成了大数据的基础。

大数据的一系列技术都是围绕数据展开的，而这些数据正是来自于云计算平台，所以从这个角度来说，不是大数据一定要有云计算，而是云计算产生了大数据，没有云计算平台作为服务支持，大数据就无从谈起了。

从整合互联网领域的技术分布来看，往往从事云计算服务的公司也是大数据技术的提供者和推动者，比如亚马逊、谷歌、阿里等公司。所以，大数据是离不开云计算的，但是随着大数据产业链的不断发展，很多做数据分析细分业务的公司也在逐渐从云计算业务中剥离出来，这也是行业发展的一个必然结果。从这个角度来看，未来云计算与大数据的关系更像是一种上下游的合作关系，云计算提供存储服务，而大数据则提供分析服务。

未来，随着大数据的不断发展，云计算的重要程度将逐渐提升，大数据和云计算也必将互相推动、共同发展。

大数据是我的主要研究方向之一，目前我也在带大数据方向的研究生，我会陆续在头条写一些关于大数据方面的文章，感兴趣的朋友可以关注我，相信一定会有所收获。

如果有大数据方面的问题，也可以咨询我。

谢谢！

回答于 2019-09-11 08:43:50

云计算与大数据概述

云计算(cloud computing)是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云是网络、互联网的一种比喻说法。过去在图中往往用云来表示电信网，后来也用来表示互联网和底层基础设施的抽象。狭义云计算指IT基础设施的交付和使用模式，指通过网络以按需、易扩展的方式获得所需资源;广义云计算指服务的交付和使用模式，指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关，也可是其他服务。它意味着计算能力也可作为一种商品通过互联网进行流通。

大数据(big data)，或称海量数据，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。大数据的4V特点：Volume、Velocity、Variety、Veracity。

从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式计算架构。它的特色在于对海量数据的挖掘,但它必须依托云计算的分布式处理、分布式数据库、云存储和虚拟化技术。

大数据管理，分布式进行文件系统，如Hadoop、Mapreduce数据分割与访问执行;同时SQL支持，以Hive+HADOOP为代表的SQL界面支持，在大数据技术上用云计算构建下一代数据仓库成为热门话题。从系统需求来看，大数据的架构对系统提出了新的挑战：

1、集成度更高。一个标准机箱最大限度完成特定任务。

2、配置更合理、速度更快。存储、控制器、I/O通道、内存、CPU、网络均衡设计，针对数据仓库访问最优设计，比传统类似平台高出一个数量级以上。

3、整体能耗更低。同等计算任务，能耗最低。

4、系统更加稳定可靠。能够消除各种单点故障环节，统一一个部件、器件的品质和标准。

5、管理维护费用低。数据藏的常规管理全部集成。

6、可规划和预见的系统扩容、升级路线图。




云计算与大数据的关系

简单来说：云计算是硬件资源的虚拟化，而大数据是海量数据的高效处理。虽然从这个解释来看也不是完全贴切，但是却可以帮助对这两个名字不太明白的人很快理解其区别。当然，如果解释更形象一点的话，云计算相当于我们的计算机和操作系统，将大量的硬件资源虚拟化后在进行分配使用。

可以说，大数据相当于海量数据的“数据库”，通观大数据领域的发展我们也可以看出，当前的大数据发展一直在向着近似于传统数据库体验的方向发展，一句话就是，传统数据库给大数据的发展提供了足够大的空间。

大数据的总体架构包括三层：数据存储，数据处理和数据分析。数据先要通过存储层存储下来，然后根据数据需求和目标来建立相应的数据模型和数据分析指标体系对数据进行分析产生价值。

而中间的时效性又通过中间数据处理层提供的强大的并行计算和分布式计算能力来完成。三者相互配合，这让大数据产生最终价值。

不看现在云计算发展情况，未来的趋势是：云计算作为计算资源的底层，支撑着上层的大数据处理，而大数据的发展趋势是，实时交互式的查询效率和分析能力，借用Google一篇技术论文中的话：“动一下鼠标就可以在妙极操作PB级别的数据”，确实让人兴奋不能止。

回答于 2019-09-11 08:43:50


云计算与大数据概述

云计算(cloud computing)是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云是网络、互联网的一种比喻说法。过去在图中往往用云来表示电信网，后来也用来表示互联网和底层基础设施的抽象。狭义云计算指IT基础设施的交付和使用模式，指通过网络以按需、易扩展的方式获得所需资源;广义云计算指服务的交付和使用模式，指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关，也可是其他服务。它意味着计算能力也可作为一种商品通过互联网进行流通。

 1/2    1 2 下一页 尾页