一、安装前置条件说明1.1 JDK版本说明HBase 需要依赖JDK环境，同时HBase 2.0+ 以上版本不再支持JDK 1.7 ，需要安装JDK 1.8+ 。JDK 安装方式见本仓库： Linux环境下JDK安装 1.2 St...

一、集群规划这里搭建一个3节点的Storm集群：三台主机上均部署Supervisor和LogViewer服务。同时为了保证高可用，除了在hadoop001上部署主Nimbus服务外，还在hadoop002上部署备用的Nimbus服务。...

Storm单机版本环境搭建1. 安装环境要求 you need to install Storm’s dependencies on Nimbus and the worker machines. These are: Java 7...

一、集群规划这里搭建一个3节点的Spark集群，其中三台主机上均部署Worker服务。同时为了保证高可用，除了在hadoop001上部署主Master服务外，还在hadoop002和hadoop003上分别部署备用的Master服务，...

一、安装Spark1.1 下载并解压官方下载地址：http://spark.apache.org/downloads.html ，选择Spark版本和对应的Hadoop版本后再下载： 解压安装包： 12# tar -zxvf ...

一、高可用简介Hadoop 高可用 (High Availability) 分为 HDFS 高可用和 YARN 高可用，两者的实现基本类似，但 HDFS NameNode 对数据存储及其一致性的要求比 YARN ResourceMan...

一、集群规划这里搭建一个3节点的Hadoop集群，其中三台主机均部署DataNode和NodeManager服务，但只有hadoop001上部署NameNode和ResourceManager服务。 二、前置条件Hadoop的...

一、前置条件Hadoop的运行依赖JDK，需要预先安装，安装步骤见： Linux下JDK的安装 二、配置免密登录Hadoop组件之间需要基于SSH进行通讯。 2.1 配置映射配置ip地址和主机名映射： 1234vim /etc/h...

一、虚拟机静态IP配置1. 编辑网络配置文件1# vim /etc/sysconfig/network-scripts/ifcfg-enp0s3 添加如下网络配置： IPADDR需要和宿主机同一个网段； GATEWAY保持和宿主机一...

Linux下Python安装 系统环境：centos 7.6 Python版本：Python-3.6.8 1. 环境依赖Python3.x的安装需要依赖这四个组件：gcc， zlib，zlib-devel，openssl-devel...