现在位置: 首页 > Hadoop
+0°

大数据学习初级入门教程(十六) —— Hadoop 3.x 完全分布式集群的安装、启动和测试

2023年04月23日 17:24:39 Hadoop  ⁄ 共 2515字 暂无评论 ⁄ 被围观 1,338次
​好久没用 Hadoop 集群了,参考以前写的《大数据学习初级入门教程(一) —— Hadoop 2.x 完全分布式集群的安装、启动和测试》和《大数据学习初级入门教程(十二) —— Hadoop 2.x 集群和 Zookeeper 3.x 集群做集成》,下载了目前官网最新的版本 hadoop-3.3.5 再重温下集群部署。按步骤进行到格式化集群步骤时,发现不少和老版本不一致的地方,这里记录如下。 问题1)ERROR: Attempting to operate on *** as root [ro...
阅读全文
+0°

大数据学习初级入门教程(十二) —— Hadoop 2.x 集群和 Zookeeper 3.x 集群做集成

2020年04月14日 21:30:47 大数据  ⁄ 共 7237字 暂无评论 ⁄ 被围观 3,049次
在以前一篇《大数据学习初级入门教程(一) —— Hadoop 2.x 完全分布式集群的安装、启动和测试》中,详细写了 Hadoop 完全分布式集群的安装步骤,在上一篇《大数据学习初级入门教程(十一) —— Zookeeper 3.4.6 完全分布式集群的安装、配置、启动和测试》中详细写了 Zookeeper 完全分布式集群的安装步骤,所以这篇写一下如何让两个集群做集成,让 Zookeeper 保证 Hadoop 集群的高可用。 一、环境准备 上面两篇文章中已经...
阅读全文
+0°

大数据学习初级入门教程(一) —— Hadoop 2.x 完全分布式集群的安装、启动和测试

2018年12月08日 13:49:51 Hadoop  ⁄ 共 2989字 暂无评论 ⁄ 被围观 3,982次
大数据最基础的就是数据的存储和计算,而 Hadoop 就是为存储和计算而生,是最基础的大数据处理工具。这篇简单写写 Hadoop 2.x 的安装,启动和测试。 一、准备环境 大数据环境的部署,一般都是集群,机器数量为奇数,这里以 5 台机器为例,操作系统为 CentOS 6.9_x64;IP 分别为 192.1688.220.19,192.1688.220.18,192.1688.220.11,192.1688.220.12,192.1688.220.13;Hadoop 的安装包版本为 hadoop-2.5.1_x64.tar...
阅读全文
+0°

学习 HBase,应该选择哪个版本?

2018年07月22日 12:29:03 HBase  ⁄ 共 1875字 暂无评论 ⁄ 被围观 2,938次
作为一个 IT 农,是不是或多或少有些强迫症,比如用软件就用最新的~ HBase 从 2010-06-04 的 hbase-0.20.5 版本,到目前最新的 2018-07-18 的 2.1.0,不管是工作中用还是自学用,都不建议用老版本,也不建议用新版本。那到底用哪个版本最合适呢? 官网告诉你这些: HBase 和 JDK 兼容性 HBase VersionJDK 7JDK 8JDK 9JDK 102.0Not SupportedyesNot SupportedNot Supported1.3yesyesNot SupportedNot Supporte...
阅读全文
+0°

安装Hadoop2初学

2016年08月23日 23:52:57 Hadoop  ⁄ 共 4056字 暂无评论 ⁄ 被围观 2,909次
安装 Hadoop2 之前,需要先安装两个程序,那就是 JDK 和 SSH。 1. 安装 JDK1.6 或更高版本。 因为 Hadoop 是 Java 编写的,它的编译以及 MapReduce 的运行,都需要 JDK。 这里安装 JDK1.7,原因是太新的 JDK 不是很稳定,而 Hadoop 在升级的过程中不再支持低版本的 JDK,那么太老版本也最好别用,否则就会有很多预料不到的问题出现。 安装 JDK 的详细步骤网上一搜一大堆,这里就不再详述,给出两篇文章供参考:《Linux系统搭建W...
阅读全文