在四台虚拟机上完成了Jstorm和Zookeeper集群的搭建,并向JStorm提交官方demo,运行成功。搭建过程中遇到的问题和解决方案:
1. 虚拟机上启动不了supervisor服务,经排查发现,是当前登录用户没有日志写入权限导致的,用sudo chown user:user –R *命令修改权限后,启动supervisor节点上的服务成功;
2. 如果JStorm的配置文件storm.yaml文件修改,要及时用最新的storm.yaml文件替换当前用户根目录下 ~/.jstorm文件夹下的storm.yaml文件,否则,会导致JStorm启动失败;
3. 每台虚拟机上的JStorm配置文件storm.yaml必须一致,特别是配置文件中的日志输出路径storm.zookeeper.root必须一致,否则即便supervisor上的JStorm服务成功启动,也会导致JStorm UI不能展示supervisor节点;
4. 在nimbus节点上重启JStorm服务之前,必须先在每个supervisor节点上重启JStorm服务,否则可能导致nimbus server启动失败;
5. 向JStorm提交的任务的jar包必须包含第三方依赖jar包(如果任务包含第三方依赖jar包),否则即便任务提交成功,也会出现ClassNotFound错误。

Logo

华为开发者空间,是为全球开发者打造的专属开发空间,汇聚了华为优质开发资源及工具,致力于让每一位开发者拥有一台云主机,基于华为根生态开发、创新。

更多推荐