Hadoop -- RPC机制

Posted limeOracle

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop -- RPC机制相关的知识,希望对你有一定的参考价值。

一、Hadoop的RPC通信机制

1.什么是RPC

l  RPC(Remote Procedure Call)远程过程调用协议,它是一种通过网络从远程计算机程序上请求服务,而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在,如TCP或UDP,为通信程序之间携带信息数据。在OSI网络通信模型中,RPC跨越了传输层和应用层。RPC使得开发包括网络分布式多程序在内的应用程序更加容易。

 

l  RPC采用客户机/服务器模式。请求程序就是一个客户机,而服务提供程序就是一个服务器。首先,客户机调用进程发送一个有进程参数的调用信息到服务进程,然后等待应答信息。在服务器端,进程保持睡眠状态直到调用信息的到达为止。当一个调用信息到达,服务器获得进程参数,计算结果,发送答复信息,然后等待下一个调用信息,最后,客户端调用进程接收答复信息,获得进程结果,然后调用执行继续进行。

 

l  hadoop的整个通信体系结构就是构建在RPC之上的

2.RPC通信实例

Class ; RPCService

package lime.pri.hadoop.server;

public interface RPCService {
    
//    版本号
    long versionID = 10010;
    String sayHi(String name);
    
}

Class  : RPCServer

package lime.pri.hadoop.server;

import java.io.IOException;

import org.apache.hadoop.HadoopIllegalArgumentException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.ipc.RPC;
import org.apache.hadoop.ipc.RPC.Server;

public class RPCServer implements RPCService {

    public static void main(String[] args) throws HadoopIllegalArgumentException, IOException {
        // 1.实例化Configuration 设置配置参数
        Configuration configuration = new Configuration();
        // 2.实例化RPC内部类Builder
        Server server = new RPC.Builder(configuration)//
                // 3.设置 Service/Client 同时实现的接口 Class 以实现代理模式
                .setProtocol(RPCService.class)//
                // 4.设置 服务端 绑定接口
                .setBindAddress("localhost")//
                // 5.设置 服务端 监听端口
                .setPort(5927)
                // 6.设置 目标服务
                .setInstance(new RPCServer()).build();
        // 7.启动服务
        server.start();
    }

    @Override
    public String sayHi(String name) {
        return "Hello " + name;
    }
}

Class : Client

package lime.pri.hadoop.client;

import java.io.IOException;
import java.net.InetSocketAddress;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.ipc.RPC;

import lime.pri.hadoop.server.RPCService;

public class RPCClient {

    public static void main(String[] args) throws IOException {
//        1.实例化Configuration 设置配置参数
        Configuration configuration = new Configuration();
//        2.实例化代理对象 代理接口、版本号、服务端地址、configuration
        RPCService proxy = RPC.getProxy(RPCService.class, 10010, new InetSocketAddress("localhost", 5927), configuration);
//        3.调用 代理对象的方法,即通过远程方法调用 调用目标对象的方法。
        String sayHi = proxy.sayHi("tom");
        System.out.println(sayHi);
//        4.停止 代理对象
        RPC.stopProxy(proxy);
    }
}

啦啦啦

以上是关于Hadoop -- RPC机制的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop RPC机制中Server类的实现:基于Java NIO

Hadoop RPC机制中Server类的实现:基于Java NIO

3 weekend110的hadoop中的RPC框架实现机制 + hadoop中的RPC应用实例demo

Hadoop -- RPC机制

RPC与Hadoop RPC机制

Hadoop学习笔记—3.Hadoop RPC机制的使用