Storm Hadoop 实时流处理 批量处理 无状态 有状态的 具有基于 ZooKeeper 协调的主/从架构。主节点称为 nimbus和从节点称为 supervisors. 具有/不具有基于 ZooKeeper 的协调的主从架构。主节点是 job tracker从节点是 task tracker. Storm 流式处理可以在集群上每秒访问数万条消息。 Hadoop 分布式文件系统 (HDFS) 使用 MapReduce 框架来处理需要数分钟或数小时的大量数据。 Storm Topology会一直运行,直到用户关闭或出现不可恢复的意外故障。 MapReduce 作业按顺序执行并最终完成。 两者都是分布式和容错的 如果 nimbus / supervisor 死了,重新启动会使其从停止的地方继续,因此不会受到任何影响。 如果 JobTracker 死了,所有正在运行的作业都将丢失。版权声明:
本文来源网络,所有图片文章版权属于原作者,如有侵权,联系删除。
本文网址:https://www.bianchenghao6.com/java-jiao-cheng/13871.html