Spark集群的启动流程

it2022-05-05  135

创建Master对象,启动一个Master进程。然后,执行preStart生命周期方法,开启一个定时器定期检测超时的worker节点;如果发现超时的Worker节点,则将其移除。执行receive方法,接受其他Actor发送过来的请求解析slaves配置文件,获取到用于启动Worker的节点,启动Worker节点Worker向Master进行注册Master收到注册信息后,把注册信息保存到缓存和磁盘Master保存完注册信息后,开始向Worker响应注册成功信息(masterUrl)Worker收到响应信息后,建立心跳


最新回复(0)