-
1月05日
-
首先确定由jdk scala环境
JAVA_HOME=/System/Library/Frameworks/JavaVM.framework/Versions/CurrentJDK/Home export PATH=${PATH}:${JAVA_HOME}/bin SCALA_HOME=/Users/luping/develop/dev/scala-2.10.3 export PATH=${PATH}:${SCALA_HOME}/bin
zookeeper
wget http://mirrors.cnnic.cn/apache/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz tar zxvf zookeeper-3.4.6.tar.gz cd zookeeper-3.4.6cp -rf conf/zoo_sample.cfg conf/zoo.cfg
修改zoo.cfg的dataDir
dataDir=/Users/lu/develop/bigdata/zookeeper-3.4.6/zkdata
kafka配置,单机其实没什么配置的,直接按官方链接,下载解压
tar zxvf kafka_2.10-0.8.2-beta.tgz
启动
cd kafka_2.10-0.8.2-beta bin/kafka-server-start.sh config/server.properties
storm配置, 这里本来打算用还未release的0.9.3,发现zip,gz都不可用,最后只好用了0.9.3-rc1版 storm.yaml配置
storm.zookeeper.servers: - "127.0.0.1" nimbus.host: "127.0.0.1"storm.messaging.transport: "backtype.storm.messaging.netty.Context" storm.messaging.netty.server_worker_threads: 1 storm.messaging.netty.client_worker_threads: 1 storm.messaging.netty.buffer_size: 5242880 storm.messaging.netty.max_retries: 100 storm.messaging.netty.max_wait_ms: 1000 storm.messaging.netty.min_wait_ms: 100
配置Storm home
export STORM_HOME=/Users/lu/develop/bigdata/storm-0.9.3 export PATH=$PATH:$STORM_HOME/bin
可以启动起来了,这里kafka 不用自带的启动zk
标签:storm 实时处理 安装部署
除非注明,文章均为博客虫-数据虫巢|大数据博客原创,转载请注明本文地址:http://www.blogchong.com/post/73.html
当前位置: 首页 >> 原创-Storm实时处理 >> 正文
- 评论:(0)
- 隐藏评论
【评论很精彩,有内幕、有真相!】