hadoop客户端长连接hadoop高可用集群的启动顺序

太平洋在线手机版 9 0

Alluxio客户端和Master采用的是长连接在凌晨计算高峰期hadoop客户端长连接,Master端的服务线程会被打满hadoop客户端长连接,从而导致客户端的请求都被堵住Alluxio。

选择距离客户端最近的datanodehadoop客户端长连接,建立连接来读取当前block的数据如果连接的DataNode正好属于慢节点hadoop客户端长连接,则极有可能导致读取文件。

hadoop客户端长连接hadoop高可用集群的启动顺序-第1张图片-太平洋在线下载

在客户端连接 HS2 的时候,我们会对任务优先级判定,高优先级的任务会被路由到核心集群,低优先级的任务会被路由到一般集群。

hadoop客户端长连接hadoop高可用集群的启动顺序-第2张图片-太平洋在线下载

标签: hadoop客户端长连接

抱歉,评论功能暂时关闭!