Hadoop的基础知识点有哪些

技术Hadoop的基础知识点有哪些本篇内容主要讲解“Hadoop的基础知识点有哪些”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Hadoop的基础知识点有哪些”吧!一、had

本文主要讲解“Hadoop的基本知识点有哪些?”感兴趣的朋友不妨看看。本文介绍的方法简单、快速、实用。让边肖带你学习“Hadoop的基本知识点有哪些”!

00-1010有很多在线信息,这里就不浪费时间介绍了。有兴趣的话自己找“杜娘”。

注意:狭义的hadoop指的是单独的软件hadoop。从广义上讲,hadoop指的是大数据生态系统,包括许多其他软件。

在接下来的章节中,没有特别的说明,我们都会提到hadoop软件。

Hadoop生态大致包括以下技术

Hadoop的基础知识点有哪些

一、hadoop的发展历史

0.x系列版本:hadoop最早的开源版本,从1.x和2.x版本演变而来。

1.x版本系列:hadoop版本的第二代开源版本,主要修复0.x版本的一些bug等。

2.x版本系列:架构发生了重大变化,引入了纱线平台等诸多新功能,这也是生产环境中使用最多的版本。

3.x版本系列:在2.x版本的基础上,引入了hdfs的一些新特性,开发出了稳定的版本,公司未来会用到。

注意:我们未来的课程会以hadoop3.x版本3.x为例,有些地方的配置和概念与2.x不同。

二、hadoop的版本介绍

Hadoop三个发布版本:Apache、Cloudera和Hortonworks。

Apache版本是最原始(基础)的版本,对于初学者来说是最好的。

Cloudera广泛应用于大型互联网企业。

霍顿工程文件更好。

注:Cloudera和Hortonworks可以理解为Linux和Centos的关系。

三、 hadoop生产环境版本选择

Hadoop的基础知识点有哪些

Hadoop由三个模块组成:分布式存储HDFS、分布式计算MapReduce和资源调度引擎three。

Hadoop的基础知识点有哪些

HDFS模块:

名称节点:主节点主要负责HDFS集群的管理和元数据信息管理。

Datanode:从节点主要负责存储用户数据。

Secondarynamenode:协助namenode管理元数据信息和元数据信息的冷备份。

纱线模块:

ResourceManager:主节点,主要负责资源分配。

NodeManager:从节点主要负责执行任务。

至此,相信大家对“Hadoop的基本知识点有哪些”有了更深的理解,让我们在实践中去做吧!这是网站。更多相关内容,可以去相关渠道查询,关注我们,继续学习!

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/139127.html

(0)

相关推荐

  • servletservice方法的参数(如何将service注入到servlet)

    技术servlet.service()方法怎么调用这篇文章主要介绍“servlet.service()方法怎么调用”,在日常操作中,相信很多人在servlet.service()方法怎么调用问题上存在疑惑,小编查阅了各式

    攻略 2021年12月24日
  • LN3,若a=ln22 b=ln3

    技术LN3,若a=ln22 b=ln3b>a>ca/b=3ln2/2ln3=ln8/ln9<1,a<b
    b/c=5ln3/3ln5=ln243/ln125>1,b>c
    a/c=5ln2/2ln5=ln32/ln25>1,

    生活 2021年10月26日
  • 抖音刷千粉,抖音刷粉1000人多少钱?

    技术抖音刷千粉,抖音刷粉1000人多少钱?抖音快速增长粉料的方法抖音无疑是目前新媒体中增长粉料最简单、增长最快的平台。从前,成都小甜甜一夜涨粉五百万,后来,灵魂当铺一天涨粉七十五万。这样的涨粉速度在其他平台是难以想象的。

    测评 2021年10月19日
  • javascript内存泄漏有哪些原因

    技术javascript内存泄漏有哪些原因本篇内容介绍了“javascript内存泄漏有哪些原因”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔

    攻略 2021年11月20日
  • 红烧肉的做法窍门,家庭版红烧肉怎么做不油腻

    技术红烧肉的做法窍门,家庭版红烧肉怎么做不油腻您好红烧肉的做法窍门,我是嘴嘴深夜食堂家庭版红烧肉只需要一坛黄酒,一块老姜,再加上盐,酱油,冰糖这几样东西,就可以做得非常好吃了,这个是跟着黄磊老师的做法做的哦1:五花肉清洗

    生活 2021年10月22日
  • 为什么开发Deno

    技术为什么开发Deno本篇内容主要讲解“为什么开发Deno”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“为什么开发Deno”吧!0. 为什么开发 Deno?这是我上周做的一张

    攻略 2021年11月11日