首页 存档 技术 查看内容

如何在E-MapReduce上使用引导操作安装kafka组件

2018-3-30 13:00 |来自: 互联网 388 0

摘要: 当前emr最新版本2.1.1没有kafka组件,需要额外安装。本文介绍如何用E-MapReduce引导操作来安装kafka_2.10-0.10.0.0版本。 什么是引导操作 关于E-MapReduce上引导操作的概念和使用方式请参考文档。 编写安装Kafka ...

当前emr最新版本2.1.1没有kafka组件,需要额外安装。本文介绍如何用E-MapReduce引导操作来安装kafka_2.10-0.10.0.0版本。


什么是引导操作


关于E-MapReduce上引导操作的概念和使用方式请参考文档。


编写安装Kafka组件的脚本


在E-MapReduce中编写安装Kafka组件脚本主要有以下几步:


  1. 下载Kafka-0.10.0.0安装包

  2. 修改Kafka配置文件

  3. 创建Kafka Log目录

  4. 启动Kafka daemon进程


以下是安装Kafka组件的脚本简单示例:


#!/bin/bash

isMaster=`hostname --fqdn | grep emr-header`


if [ -n "$isMaster" ] ;then

echo "Master Node does not need to start kafka!"

else

echo "=

声明:文章版权归原作者所有 部分文章转自互联网 如有侵权请联系 [邮箱地址] 删除

路过

雷人

握手

鲜花

鸡蛋

相关分类

返回顶部