阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

Storm的安装步骤

449次阅读
没有评论

共计 2234 个字符,预计需要花费 6 分钟才能阅读完成。

Storm 的安装步骤

1、正常安装 JDK,测试 JKD 是否安装正常。

$ Java -version

2、正常安装 Python,测试 Python 是否安装正常。

$ python

3、正常安装 Zookeeper。

$ cd apache/

$ tar -xvf zookeeper-3.4.5.tar.gz

$ cd zookeeper-3.4.5/

$ mkdir data

$ mkdir logs

$ cd conf/

$ cp zoo_sample.cfg zoo.cfg

$ vim zoo.cfg

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/home/wcbdd/apache/zookeeper-3.4.5/data

dataLogDir=/home/wcbdd/apache/zookeeper-3.4.5/logs

clientPort=2181

server.1=localhost:2888:3888

$ cd ..

$ echo “1” > data/myid

$ cd ~

$ vim .bashrc

exportZOOKEEPER_HOME=/home/wcbdd/apache/zookeeper-3.4.5

exportPATH=$PATH:$ZOOKEEPER_ HOME/bin

$ su – wcbdd

$ cd apache/zookeeper-3.4.5/bin/

$ vim zkEnv.sh

if [“x${ZOO_LOG_DIR}” = “x” ]

then

   ZOO_LOG_DIR=”$ZOOKEEPER_HOME/logs”

fi

if [“x${ZOO_LOG4J_PROP}” = “x” ]

then

    ZOO_LOG4J_PROP=”INFO,ROLLINGFILE”

fi

4、启动 Zookeeper,并检查其工作状态。

$ zkServer.sh start

$ jps

$ zkServer.sh status

Storm 的安装步骤

备注:标红的是刚才开启的 Zookeeper 进程,HQuorumPeer 是 Hbase 内置的 Zookeeper 进程,因为以前配置的 Hbase 是由内置 Zookeeper 托管的,其实工作环境中一般都是把 Hbase 交给外部 Zookeeper 集群来托管。

5、安装 Storm。

$ cd apache/

$ tar -xvf apache-storm-0.9.6.tar.gz

$ cd apache-storm-0.9.6/

$ mkdir data

$ vim conf/storm.yaml

storm.zookeeper.servers:

    – “localhost”

 storm.zookeeper.port: 2181

 nimbus.host: “localhost”

 storm.local.dir:”/home/wcbdd/apache/apache-storm-0.9.6/data”

 supervisor.slots.ports:

    – 6700

    – 6701

    – 6702

    – 6703

备注:设置了从节点 slots 有 4 个端口,即最多一个节点能开启 4 个 worder,每个 worker 是一个进程,一个进程又可开启很多个线程 task。这个值可根据节点资源配置情况和业务需求进行设置。

$ cd ~

$ vim .bashrc

exportSTORM_HOME=/home/wcbdd/apache/apache-storm-0.9.6

exportPATH=$PATH:$STORM_HOME/bin

$ su – wcbdd

6、启动 Storm。

$ storm nimbus >/dev/null 2>&1 &          // 启动主节点

$ storm supervisor >/dev/null 2>&1&    // 启动从节点

$ storm ui >/dev/null 2>&1 &                    // 启动后台 UI 管理界面

7、查看 Storm 是否正常启动。

$ jps

Storm 的安装步骤

备注:上图的 nimbus 为 storm 主节点进程,supervisor 为从节点进程,core 为后台管理界面进程。

8、通过浏览器查看 Storm 后台管理界面。

Storm 的安装步骤

备注:第一个红框显示了 storm 的版本号、主节点运行时间、从节点数量、slots 使用情况、任务数量等;第二个红框显示当前没有拓扑任务;第三个红框显示从节点信息,由图可知,这个 storm 集群只有一个从节点,运行在 wcbdd 主机上,有 4 个 slots,当前使用的 slots 数量为 0。

9、执行 Storm 的示例程序 WordCountTopology。

$ cd apache/apache-storm-0.9.6/examples/ storm-starter/

$ storm jar storm-starter-topologies-0.9.6.jarstorm.starter.WordCountTopology wordcount

备注:此命令的作用是用 storm 将这个 jar 包发送给 storm 去执行,后面的 wordcount 是定义的 topology 名称。

10、停止拓扑任务 wordcount。

$ storm deactivate wordcount

Kafka-Storm 集成部署 http://www.linuxidc.com/Linux/2016-03/129063.htm

Storm 在 Ubuntu 环境下的单机部署 http://www.linuxidc.com/Linux/2016-03/129060.htm

本文永久更新链接地址 :http://www.linuxidc.com/Linux/2016-08/134184.htm

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-21发表,共计2234字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

星哥玩云

星哥玩云
星哥玩云
分享互联网知识
用户数
4
文章数
19352
评论数
4
阅读量
8160079
文章搜索
热门文章
星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
再见zabbix!轻量级自建服务器监控神器在Linux 的完整部署指南

再见zabbix!轻量级自建服务器监控神器在Linux 的完整部署指南

再见 zabbix!轻量级自建服务器监控神器在 Linux 的完整部署指南 在日常运维中,服务器监控是绕不开的...
飞牛NAS中安装Navidrome音乐文件中文标签乱码问题解决、安装FntermX终端

飞牛NAS中安装Navidrome音乐文件中文标签乱码问题解决、安装FntermX终端

飞牛 NAS 中安装 Navidrome 音乐文件中文标签乱码问题解决、安装 FntermX 终端 问题背景 ...
星哥带你玩飞牛NAS-2:飞牛配置RAID磁盘阵列

星哥带你玩飞牛NAS-2:飞牛配置RAID磁盘阵列

星哥带你玩飞牛 NAS-2:飞牛配置 RAID 磁盘阵列 前言 大家好,我是星哥之前星哥写了《星哥带你玩飞牛 ...
阿里云CDN
阿里云CDN-提高用户访问的响应速度和成功率
随机文章
300元就能买到的”小钢炮”?惠普7L四盘位小主机解析

300元就能买到的”小钢炮”?惠普7L四盘位小主机解析

  300 元就能买到的 ” 小钢炮 ”?惠普 7L 四盘位小主机解析 最近...
我用AI做了一个1978年至2019年中国大陆企业注册的查询网站

我用AI做了一个1978年至2019年中国大陆企业注册的查询网站

我用 AI 做了一个 1978 年至 2019 年中国大陆企业注册的查询网站 最近星哥在 GitHub 上偶然...
欧洲无限速云盘免费10GB永久存储 + WebDAV部署+图床搭建,多平台联动一步到位!

欧洲无限速云盘免费10GB永久存储 + WebDAV部署+图床搭建,多平台联动一步到位!

欧洲无限速云盘免费 10GB 永久存储 + WebDAV 部署 + 图床搭建,多平台联动一步到位! 大家好,我...
如何免费使用强大的Nano Banana Pro?附赠邪修的用法

如何免费使用强大的Nano Banana Pro?附赠邪修的用法

如何免费使用强大的 Nano Banana Pro?附赠邪修的用法 前言 大家好,我是星哥,今天来介绍谷歌的 ...
一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸

一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸

一句话生成拓扑图!AI+Draw.io 封神开源组合,工具让你的效率爆炸 前言 作为天天跟架构图、拓扑图死磕的...

免费图片视频管理工具让灵感库告别混乱

一言一句话
-「
手气不错
还在找免费服务器?无广告免费主机,新手也能轻松上手!

还在找免费服务器?无广告免费主机,新手也能轻松上手!

还在找免费服务器?无广告免费主机,新手也能轻松上手! 前言 对于个人开发者、建站新手或是想搭建测试站点的从业者...
星哥带你玩飞牛NAS-14:解锁公网自由!Lucky功能工具安装使用保姆级教程

星哥带你玩飞牛NAS-14:解锁公网自由!Lucky功能工具安装使用保姆级教程

星哥带你玩飞牛 NAS-14:解锁公网自由!Lucky 功能工具安装使用保姆级教程 作为 NAS 玩家,咱们最...
把小米云笔记搬回家:飞牛 NAS 一键部署,小米云笔记自动同步到本地

把小米云笔记搬回家:飞牛 NAS 一键部署,小米云笔记自动同步到本地

把小米云笔记搬回家:飞牛 NAS 一键部署,小米云笔记自动同步到本地 大家好,我是星哥,今天教大家在飞牛 NA...
如何安装2026年最强个人助理ClawdBot、完整安装教程

如何安装2026年最强个人助理ClawdBot、完整安装教程

如何安装 2026 年最强个人助理 ClawdBot、完整安装教程 一、前言 学不完,根本学不完!近期,一款名...
零成本上线!用 Hugging Face免费服务器+Docker 快速部署HertzBeat 监控平台

零成本上线!用 Hugging Face免费服务器+Docker 快速部署HertzBeat 监控平台

零成本上线!用 Hugging Face 免费服务器 +Docker 快速部署 HertzBeat 监控平台 ...