现在位置: 首页 > 博客文章 > 电脑相关 > IT开发 > 大数据 > Hadoop > 文章
+0°

大数据学习初级入门教程(十六) —— Hadoop 3.x 完全分布式集群的安装、启动和测试

2023年04月23日 17:24:39 Hadoop  ⁄ 共 2515字 暂无评论 ⁄ 被围观 635次
​好久没用 Hadoop 集群了,参考以前写的《大数据学习初级入门教程(一) —— Hadoop 2.x 完全分布式集群的安装、启动和测试》和《大数据学习初级入门教程(十二) —— Hadoop 2.x 集群和 Zookeeper 3.x 集群做集成》,下载了目前官网最新的版本 hadoop-3.3.5 再重温下集群部署。按步骤进行到格式化集群步骤时,发现不少和老版本不一致的地方,这里记录如下。 问题1)ERROR: Attempting to operate on *** as root [ro...
阅读全文
+0°

大数据学习初级入门教程(一) —— Hadoop 2.x 完全分布式集群的安装、启动和测试

2018年12月08日 13:49:51 Hadoop  ⁄ 共 2989字 暂无评论 ⁄ 被围观 3,411次
大数据最基础的就是数据的存储和计算,而 Hadoop 就是为存储和计算而生,是最基础的大数据处理工具。这篇简单写写 Hadoop 2.x 的安装,启动和测试。 一、准备环境 大数据环境的部署,一般都是集群,机器数量为奇数,这里以 5 台机器为例,操作系统为 CentOS 6.9_x64;IP 分别为 192.1688.220.19,192.1688.220.18,192.1688.220.11,192.1688.220.12,192.1688.220.13;Hadoop 的安装包版本为 hadoop-2.5.1_x64.tar...
阅读全文
+0°

安装Hadoop2初学

2016年08月23日 23:52:57 Hadoop  ⁄ 共 4056字 暂无评论 ⁄ 被围观 2,383次
安装 Hadoop2 之前,需要先安装两个程序,那就是 JDK 和 SSH。 1. 安装 JDK1.6 或更高版本。 因为 Hadoop 是 Java 编写的,它的编译以及 MapReduce 的运行,都需要 JDK。 这里安装 JDK1.7,原因是太新的 JDK 不是很稳定,而 Hadoop 在升级的过程中不再支持低版本的 JDK,那么太老版本也最好别用,否则就会有很多预料不到的问题出现。 安装 JDK 的详细步骤网上一搜一大堆,这里就不再详述,给出两篇文章供参考:《Linux系统搭建W...
阅读全文