Standalone是什么，进程类型有哪些-群英

上一篇：matplotlib颜色映射表怎么查看，颜色映射表有几类下一篇：Python语言优点和缺点分别是什么，为何火爆

这篇文章给大家介绍了“Standalone是什么，进程类型有哪些”的相关知识，讲解详细，步骤过程清晰，有一定的借鉴学习价值，因此分享给大家做个参考，感兴趣的朋友接下来一起跟随小编看看吧。

Standalone是什么

Standalone模式是Spark自带的一种集群模式，不同于前面本地模式启动多个进程来模拟集群的环境，Standalone模式是真实地在多个机器之间搭建Spark集群的环境，完全可以利用该模式搭建多机器集群，用于实际的大数据处理。

StandAlone 是完整的Spark运行环境,其中: Master角色以Master进程存在, Worker角色以Worker进程存在 Driver和Executor运行于Worker进程内, 由Worker提供资源供给它们运行。

Standalone是什么

StandAlone集群在进程上主要有3类进程:

Master角色, 管理整个集群资源，并托管运行各个任务的Driver

Worker角色, 管理每个机器的资源，分配对应的资源来运行Executor(Task); 每个从节点分配资源信息给Worker管理，资源信息包含内存Memory和CPU Cores核数。

Spark Application运行完成以后，保存事件日志数据至HDFS，启动HistoryServer可以查看应用运行相关信息。Spark的历史服务器, 功能: 将Spark运行的程序的历史日志记录下来, 通过历史服务器方便用户查看程序运行的历史信息。

这篇关于“Standalone是什么，进程类型有哪些”的文章就介绍到这了,更多相关的内容，欢迎关注群英网络，小编将为大家输出更多高质量的实用文章！

标签： Standalone是什么

免责声明：本站发布的内容（图片、视频和文字）以原创、转载和分享为主，文章观点不代表本网站立场，如果涉及侵权请联系站长邮箱：mmqy2019@163.com进行举报，并提供相关证据，查实之后，将立刻删除涉嫌侵权内容。

上一篇：matplotlib颜色映射表怎么查看，颜色映射表有几类下一篇：Python语言优点和缺点分别是什么，为何火爆