当map任务与reduce任务处于不同阶段时, reduce任务需要从远端节点下载map任务的中间输出, RpcHandler的实现类NettyBlockRpcServer提供打开blocks, 即下载block文件功能; 一些情况下,为了容错, 需要将Block的数据备份到其他节点上,所以NettyBlockRpcServer还提供上传Block的Rpc服务,
RpcHandler
关注
打赏
当map任务与reduce任务处于不同阶段时, reduce任务需要从远端节点下载map任务的中间输出, RpcHandler的实现类NettyBlockRpcServer提供打开blocks, 即下载block文件功能; 一些情况下,为了容错, 需要将Block的数据备份到其他节点上,所以NettyBlockRpcServer还提供上传Block的Rpc服务,
微信扫码登录