操作系统
Hadoop与Spark相比有存在优势的方面吗？
Hadoop和Spark均是大数据框架，都提供了一些执行常见大数据任务的工具。但确切地说，它们所执行的任务并不相同，彼此也并不排斥。虽然在特定的情况下，Spark据称要比Had...
3年前 (2021-10-14) 719 0 linux系统 Hadoop
与Hadoop对比，如何看待Spark技术？
在大数据领域，hadoop和spark目前都占有举足轻重的地位，当然hadoop是大数据处理组件的开朝元老，Spark则是后起之秀，更有把前浪拍在沙滩上的趋势。 当然两者的对比，实...
3年前 (2021-10-14) 680 0 linux系统 Hadoop
什么是Hadoop分布式文件系统？
分布式文件系统（Distributed File System）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。Hadoop是Apache软...
3年前 (2021-10-14) 844 0 linux系统 Hadoop
在hadoop和spark之间如何取舍？
其实这两个工具之间一般并不存在取舍关系。 业界一般会结合试用这两个工具。 hadoop基于集群存储和分析调度的工具包，大家常用的有hdfs,mapreduce,yarn，属于平台基...
3年前 (2021-10-14) 798 0 linux系统 Hadoop
既然Spark比Hadoop性能好很多，Hadoop未来的发展方向是什么？
你好，这两个大数据组件都接触了一段时间，非常荣幸来交流这个问题。 首先要明确Spark比Hadoop的性能好，我个人认为只是说Spark的运算性能要比MapReduce强百倍。 而...
3年前 (2021-10-14) 703 0 linux系统 Hadoop
hadoop为什么大吞吐量要求低时间延延迟的数据访问？
Hadoop不是数据库技术。Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高...
3年前 (2021-10-14) 646 0 linux系统 Hadoop
大数据与Hadoop之间是什么关系？
谢谢邀请！ 大数据是一系列技术的统称，经过多年的发展，大数据已经形成了从数据采集、整理、传输、存储、安全、分析、呈现和应用等一系列环节，这些环节涉及到诸多大数据工作岗位，这些工作岗...
3年前 (2021-10-14) 654 0 linux系统 Hadoop
大数据Spark技术是否可以替代Hadoop？
Spark技术从之前和当前的技术路线上看不是为了替代Hadoop，更多的是作为Hadoop生态圈(广义的Hadoop)中的重要一员来存在和发展的。 首先我们知道Hadoop（狭义的...
3年前 (2021-10-14) 758 0 linux系统 Hadoop
hadoop和spark的区别？
Hadoop和Spark的区别解决问题的出发点不一样，Hadoop用普通硬件解决存储和计算问题。 Spark用于构建大型的、低延迟的数据分析应用程序，不实现存储。Spark是在借鉴...
3年前 (2021-10-14) 680 0 linux系统 Hadoop
spark真的要取代hadoop了么，还有阿里的flink未来会是一种趋势么？
大家好，我是LakeShen 作为一个软件开发工程师，我从事的方向主要是大数据方向，结合我的工作经验，我个人认为，Spark不会完全取代Hadoop，Hadoop还有很多其他方面的...
3年前 (2021-10-14) 757 0 linux系统 Hadoop
Hadoop还需要学吗？是选择拥抱云还是选择Hadoop？
这两个方向无一例外都是目前大家可以接触的非常有技术含量的两个业务方向，都需要你有深厚的技术功底，我说的不是那种四个月培训就能出来的所谓的大牛，而是你有良好的基础功底。比如分布式计算...
3年前 (2021-10-14) 743 0 linux系统 Hadoop
搭建私有云平台：Hadoop还是选择OpenStack？
首先建议题主描述清楚应用场景，否则别人做的方案可能都不符合需求。 就Hadoop和OpenStack的纠结而言，支撑数据分析用前者，做资源管理用后者。 ==============...
3年前 (2021-10-14) 720 0 linux系统 Hadoop
hadoop到底是什么？
Hadoop细分的话包含两部分，一部分是HDFS，这个是分布式文件系统，包含NameNode和DataNode，用于存储pb级数据，特点就是大，可以部署到上前台上万台机器上，用于存...
3年前 (2021-10-14) 632 0 linux系统 Hadoop
Hadoop如何快速入门？
简单来说下，我对hadoop的理解。 狭义上说: Hadoop1.x 版本是 hdfs+mapReduce Hadoop2.x 版本是 hdfs+yarn+mapReduce 广义...
3年前 (2021-10-14) 656 0 linux系统 Hadoop
为什么在数据量很大时（TB以上）需要利用hadoop系统？
当数据量很大时，单台机器已经不能够在存储和计算这么大量的数据，需要引用到分布式技术来处理这些数据。Hadoop 作为一种大数据处理系统，包括分布式文件存储、分布式计算、以及资源管理...
3年前 (2021-10-14) 951 0 linux系统 Hadoop
Spark和Hadoop对于大数据的关系？
1）hadoop简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 Hadoop实现了一个分布式文件系统HDFS。HDFS有高容错性的特点，并且设计用来部署在...
3年前 (2021-10-14) 796 0 linux系统 Hadoop
Hadoop一般用在哪些业务场景？
Hadoop可以做大数据量存储，它是分布式，可以存储离线的数据，不需要实时性的数据，就像云盘，网盘那样，你用的时候，可以直接读取就行。你也可以将历史数据存储在Hadoop上，通...
3年前 (2021-10-14) 654 0 linux系统 Hadoop
学习大数据Hadoop需要哪些基础？
Hadoop是目前被广泛使用的大数据平台，Hadoop平台主要有Hadoop Common、HDFS、Hadoop Yarn、Hadoop MapReduce和Hadoop Ozo...
3年前 (2021-10-14) 874 0 linux系统 Hadoop
Hadoop就业前景如何？
作为一名IT从业者，同时也是一名教育工作者，我来回答一下。 首先，从当前大数据领域的人才需求情况来看，掌握Hadoop相关内容还是比较容易实现就业的，而且不少岗位的岗位附加值还比较...
3年前 (2021-10-14) 827 0 linux系统 Hadoop
为什么说Hadoop是一个生态系统？
Hadoop 本身是一款开源大数据组件，它包括三个部分：MapReduce计算模型、HDFS 分布式文件系统、Yarn 资源管理系统。像现在其他 Hadoop 相关的大数据组件，比...
3年前 (2021-10-14) 767 0 linux系统 Hadoop
