现在位置： 首页 > 博客文章 > 电脑相关 > IT开发 > 大数据 > 文章
+0°

大数据学习初级入门教程（五） —— Kafka 2.3.0 完全分布式集群的安装、配置、启动和测试

2019年08月28日 19:36:15 ⁄ Kafka  ⁄ 共 2660字 ⁄ 暂无评论 ⁄ 被围观 2,150次
大数据学习初级入门教程（五） —— Kafka 2.3.0 完全分布式集群的安装、配置、启动和测试
在前两篇文章《大数据学习初级入门教程（三） —— Kafka 2.2.0 单节点的安装、启动和测试》和《大数据学习初级入门教程（四） —— Kafka 2.2.0 伪分布的安装、配置、启动和测试》中，已经对 Kafka 集群的单节点安装和伪分布式集群安装做了安装、配置、启动和测试，这篇文章主要对 Kafka 完全分布式集群安装进行详细的图文说明。 在没发表文章的这段时间，Kafka 最新版本已经从 2.2.0 升级到 2.3.0，所以这里也以官网最新的版...
      , , , , 阅读全文
+0°

Zookeeper 启动后的日志文件 zookeeper.out 路径修改

2019年08月26日 20:15:54 ⁄ ZooKeeper  ⁄ 共 474字 ⁄ 暂无评论 ⁄ 被围观 3,621次
Zookeeper 启动后的日志文件 zookeeper.out 路径修改
当你安装好 Zookeeper 集群后，迫不及待的用启动命令 zkServer.sh start 启动集群，用命令 zkServer.sh status 查看集群状态时，看到集群正常启动并运行，心里是不是美滋滋，不过当你查看安装目录时，可以看到在你运行启动命令的目录里，生成了 zookeeper.out 日志文件，心情一下就不爽了。 那么问题来了，这个目录是否可以自定义设置呢？答案当然是可以的，需要修改两个文件。 修改 ZK_HOME/conf/log4j.properties 文件...
      , , , , 阅读全文
+0°

大数据学习初级入门教程（四） —— Kafka 2.2.0 伪分布式集群的安装、配置、启动和测试

2019年05月21日 21:52:18 ⁄ Kafka  ⁄ 共 2489字 ⁄ 暂无评论 ⁄ 被围观 1,862次
大数据学习初级入门教程（四） —— Kafka 2.2.0 伪分布式集群的安装、配置、启动和测试
在前一篇文章《大数据学习初级入门教程（三） —— Kafka 2.2.0 单节点的安装、启动和测试》中，简要说明了在一台测试服务器上如何安装单节点 Kafka 并做了消息发送和获取的测试，这篇主要说明一下在一台机器上如何配置多个节点，需要在前一篇文章操作后的基础上，搭建 Kafka 伪分布式集群，这里配置 3 个代理节点。 第一步：创建配置文件 为每个代理节点创建一个配置文件，可以直接复制已有的配置文件，命令如下： # c...
      , , , , , , 阅读全文
+0°

大数据学习初级入门教程（三） —— Kafka 2.2.0 单节点的安装、启动和测试

2019年05月21日 20:46:59 ⁄ Kafka  ⁄ 共 3570字 ⁄ 暂无评论 ⁄ 被围观 2,238次
大数据学习初级入门教程（三） —— Kafka 2.2.0 单节点的安装、启动和测试
本篇文章主要介绍 Kafka 2.2.0 版本的单节点安装、启动及测试步骤，供初学者参考。测试系统为 CentOS 6.9，JDK 版本为 1.8.0_172。 第一步：下载安装包并上传到测试服务器 下载地址为官网地址：https://www.apache.org/dyn/closer.cgi?path=/kafka/2.2.0/kafka_2.12-2.2.0.tgz。 下载后上传到测试服务器，这里上传到路径：/root/kafka下。 第二步：解压安装包 # tar -zxvf kafka_2.12-2.2.0.tgz # cd k...
      , , , , 阅读全文
+0°

大数据学习初级入门教程（二） —— Redis 3.x 单节点的安装、启动和测试

2019年01月12日 16:15:14 ⁄ Redis  ⁄ 共 4271字 ⁄ 暂无评论 ⁄ 被围观 3,133次
大数据学习初级入门教程（二） —— Redis 3.x 单节点的安装、启动和测试
在日常开发中，为了满足系统的及时响应性，一般都会在开发中使用 Redis 做缓存，这篇主要介绍下 Redis 3.x 版本的安装、启动及测试。 一、下载 Redis 安装包 这里就不再赘述，本篇测试用的版本为：redis-3.2.9.tar.gz。 二、上传安装包到服务器 也不再赘述。 三、解压安装包 命令：tar -zxvf redis-3.2.9.tar.gz 四、进入安装包 命令：cd redis-3.2.9 五、指定安装目录并安装 命令：make PREFIX...
      , , , , , 阅读全文
+0°

大数据学习初级入门教程（一） —— Hadoop 2.x 完全分布式集群的安装、启动和测试

2018年12月08日 13:49:51 ⁄ Hadoop  ⁄ 共 2989字 ⁄ 暂无评论 ⁄ 被围观 3,471次
大数据学习初级入门教程（一） —— Hadoop 2.x 完全分布式集群的安装、启动和测试
大数据最基础的就是数据的存储和计算，而 Hadoop 就是为存储和计算而生，是最基础的大数据处理工具。这篇简单写写 Hadoop 2.x 的安装，启动和测试。 一、准备环境 大数据环境的部署，一般都是集群，机器数量为奇数，这里以 5 台机器为例，操作系统为 CentOS 6.9_x64；IP 分别为 192.1688.220.19，192.1688.220.18，192.1688.220.11，192.1688.220.12，192.1688.220.13；Hadoop 的安装包版本为 hadoop-2.5.1_x64.tar...
      , , , , , , , 阅读全文
+0°

学习 HBase，应该选择哪个版本？

2018年07月22日 12:29:03 ⁄ HBase  ⁄ 共 1875字 ⁄ 暂无评论 ⁄ 被围观 2,700次
学习 HBase，应该选择哪个版本？
作为一个 IT 农，是不是或多或少有些强迫症，比如用软件就用最新的~ HBase 从 2010-06-04 的 hbase-0.20.5 版本，到目前最新的 2018-07-18 的 2.1.0，不管是工作中用还是自学用，都不建议用老版本，也不建议用新版本。那到底用哪个版本最合适呢？ 官网告诉你这些： HBase 和 JDK 兼容性 HBase VersionJDK 7JDK 8JDK 9JDK 102.0Not SupportedyesNot SupportedNot Supported1.3yesyesNot SupportedNot Supporte...
      , , , , , 阅读全文
+0°

Elasticsearch 5.5.1的安装与配置

2016年12月26日 18:25:15 ⁄ Elasticsearch  ⁄ 共 2787字 ⁄ 暂无评论 ⁄ 被围观 2,809次
Elasticsearch 5.5.1的安装与配置
1      ES安装 1.1  安装Java ES需要Java 6或更高版本，但建议安装Java 7及以上版本。 1.2  安装ES 1.2.1       Window 在Window系统中安装ES特别方便，下载ES安装包后，直接解压即可。这里下载的是截止目前的最新版本elasticsearch-5.1.1.zip，直接解压到D盘根目录，如下图： 1.2.2       Linux 2      ES目录结构 3      ES配置与运行 打开ES配置文件目录config，可以看到有个名称为elasticsearch.yml的配置文件，打开该文...
      , , , , 阅读全文
+0°

安装Hadoop2初学

2016年08月23日 23:52:57 ⁄ Hadoop  ⁄ 共 4056字 ⁄ 暂无评论 ⁄ 被围观 2,439次
安装Hadoop2初学
安装 Hadoop2 之前，需要先安装两个程序，那就是 JDK 和 SSH。 1. 安装 JDK1.6 或更高版本。 因为 Hadoop 是 Java 编写的，它的编译以及 MapReduce 的运行，都需要 JDK。 这里安装 JDK1.7，原因是太新的 JDK 不是很稳定，而 Hadoop 在升级的过程中不再支持低版本的 JDK，那么太老版本也最好别用，否则就会有很多预料不到的问题出现。 安装 JDK 的详细步骤网上一搜一大堆，这里就不再详述，给出两篇文章供参考：《Linux系统搭建W...
      , , , 阅读全文
Copyright © 2010-2024 孟郎郎 辽ICP备19011093号