CDH5.5.1环境部署
作为本际云服务器推荐网的小编小本本，发现Hadoop使用的是Cloudera公司（Hadoop的分发商）的CDH5版本，操作系统为Centos6.5版本。因为安装设备大多在内网环境中，所以需要配置自定义的YUM软件源。
部署规划
在部署规划阶段，要根据hadoop服务特点和设备配置情况作出整体规划，将hadoop相应的服务安装在合适的设备上。需要安装的服务有：NameNode，SecondaryNameNode或者StandbyNameNode，ResourceManager，StandbyResourceManager，DataNode，NFSServer，DNSServer和NTPServer。需要注意的是，一旦hadoop被部署完成，结构的调整将很难进行而且有一定的风险。
安装服务器需要启动HTTP服务，并在其他设备通过YUM安装的方式获取安装介质。只在安装或者升级的过程中使用安装服务器。管理监控服务在安装时控制安装的过程；hadoop运行时负责hadoop维护管理和系统监控。需要根据前期的部署规划，将hadoop服务安装在对应的主机设备中。
环境准备
在运行hadoop服务的每台设备上安装linux操作系统，使用Centos6.5的64位操作系统，并对设备进行网络配置。每个设备上要启动ntpd服务，关闭防火墙设置和SeLinux，设置主机路由和root密码，设置自定义YUM软件源，并将所有设置的设备重新启动，让设置生效。
安装ClouderaManager和CDH。使用admin用户登录ClouderaManager，选择ClouderaExpress，然后指定集群中hadoop使用的所有主机，安装介质包，选择安装的服务类型和将被安装的服务的主机设备。配置元数据存储的嵌入式数据库和HDFS和YARN的参数，最后启动相关服务，完成安装。
原创文章，作者：小编小本本，如若转载，请注明出处：https://www.benjiyun.com/yunzhujiyunwei/vps-yunwei/6428.html
相关推荐
-
什么是垂直电商网站(什么叫垂直电商？)
什么是垂直电商？ 垂直电商是指在某一个行业或细分市场深化运营的电子商务模式。简单的说，垂直电商平台的产品，基本上都是某一特定领域的产品。垂直电商的代表公司有红孩子、聚美优品、网酒网…
-
Jmeter参数化的几种方式
Jmeter参数化的几种方式 作为一名IT小编，我们需要了解Jmeter参数化的几种方式。当使用Jmeter进行测试时，不同的测试场景对所要发送的数据有一定的要求，有些字段需要进行…
-
开源SSH客户端推荐
什么是SSH客户端 SSH（Secure Shell）是一种安全协议，可以在不安全的网络中安全地传输数据和命令。SSH客户端是使用SSH协议与远程服务器进行通信的应用程序，可以通过…
-
QMS是什么(体系文件编号字母是什么意思？)
体系文件编号字母的含义 体系文件编号字母是制定质量管理体系(QMS)的标准，主要用于分类文件和方便理解文件的性质。以下是各字母的含义： Q: 代表质量 E: 代表环境 OHS: 代…
-
Weblogic诊断之文件句柄泄露问题
问题描述 业务繁忙时，可能会出现“too many open files”报错，其中“files”不仅仅指文件，还包括通讯链接（如socket）和监听的端口等，因此有时也叫做“句柄…
-
怎么使用python对图片进行批量压缩
介绍 你好，我是本际云服务器推荐网的小编小本本，今天要跟大家分享一些关于Python批量压缩图片的方法。 使用Python和Pillow模块压缩图片 使用Pillow进行图片压缩的…
-
Apache camel是什么（附：使用 Camel 方法将 JSON 转换为 POJO）
Apache Camel 是一款 开源的、基于Java编写的消息路由引擎。它提供了一系列的 企业级集成模式 来处理不同的协议、消息格式和数据源之间的通信。 Camel 拥有强大的路…
-
TFA工具简介
TFA工具简介 大家好，我是本际云服务器推荐网的小编小本本，今天给大家介绍一款Oracle日志收集工具，它就是TFA（TraceFileAnalyzerCollector）。 TF…
-
用Vue.js实现点击左右按钮图片切换代码演示
Vue.js实现点击左右按钮图片切换 本篇文章介绍如何使用Vue.js实现点击左右按钮实现图片切换，从多种角度实现展示给大家。 效果代码 通过v-for循环展示图片列表itemli…
-
基于VMware安装centos7
基于VMware安装centos7 在绝大多数JavaWeb项目的生产环境中，基本上都是使用的Linux系统作为服务器的操作系统，为了能够让我们的开发环境更接近生产环境，这里我们使…