java实现简单的rpc框架(代码片段)

huanghzm huanghzm     2022-12-20     110

关键词:

0 引言

  RPC,全称为Remote Procedure Call,即远程过程调用,它是一个计算机通信协议。它允许像调用本地服务一样调用远程服务。它可以有不同的实现方式。如RMI(远程方法调用)、Hessian、Http invoker等。另外,RPC是与语言无关的。

  假设Computer1在调用sayHi()方法,对于Computer1而言调用sayHi()方法就像调用本地方法一样,调用 –>返回。但从后续调用可以看出Computer1调用的是Computer2中的sayHi()方法,RPC屏蔽了底层的实现细节,让调用者无需关注网络通信,数据传输等细节。

1 RPC框架的实现

  RPC的核心原理:RPC能够让本地应用简单、高效地调用服务器中的过程(服务)。

  1.通信模型:假设通信的为A机器与B机器,A与B之间有通信模型,在Java中一般基于BIO或NIO;。

  2.过程(服务)定位:使用给定的通信方式,与确定IP与端口及方法名称确定具体的过程或方法;

 

  3.远程代理对象:本地调用的方法(服务)其实是远程方法的本地代理,因此可能需要一个远程代理对象,对于Java而言,远程代理对象可以使用Java的动态对象实现,封装了调用远程方法调用;

 

  4.序列化,将对象名称、方法名称、参数等对象信息进行网络传输需要转换成二进制传输,这里可能需要不同的序列化技术方案。如:protobuf,Arvo等。

 

2 RPC框架架构

  RPC架构分为三部分:

  1)服务提供者,运行在服务器端,提供服务接口定义与服务实现类。

  2)服务中心,运行在服务器端,负责将本地服务发布成远程服务,管理远程服务,提供给服务消费者使用。

  3)服务消费者,运行在客户端,通过远程代理对象调用远程服务。

3 具体实现

  服务提供者接口定义与实现,代码如下:

public interface HelloService 
 
    String sayHi(String name);
 

  HelloServices接口实现类:

public class HelloServiceImpl implements HelloService 
 
    public String sayHi(String name) 
        return "Hi, " + name;
    
 

  服务中心代码实现,代码如下:

public interface Server 
    public void stop();
 
    public void start() throws IOException;
 
    public void register(Class serviceInterface, Class impl);
 
    public boolean isRunning();
 
    public int getPort();

  服务中心实现类:

技术图片
public class ServiceCenter implements Server 
    private static ExecutorService executor = Executors.newFixedThreadPool(Runtime.getRuntime().availableProcessors());
 
    private static final HashMap<String, Class> serviceRegistry = new HashMap<String, Class>();
 
    private static boolean isRunning = false;
 
    private static int port;
 
    public ServiceCenter(int port) 
        this.port = port;
    
 
    public void stop() 
        isRunning = false;
        executor.shutdown();
    
 
    public void start() throws IOException 
        ServerSocket server = new ServerSocket();
        server.bind(new InetSocketAddress(port));
        System.out.println("start server");
        try 
            while (true) 
                // 1.监听客户端的TCP连接,接到TCP连接后将其封装成task,由线程池执行
                executor.execute(new ServiceTask(server.accept()));
            
         finally 
            server.close();
        
    
 
    public void register(Class serviceInterface, Class impl) 
        serviceRegistry.put(serviceInterface.getName(), impl);
    
 
    public boolean isRunning() 
        return isRunning;
    
 
    public int getPort() 
        return port;
    
 
    private static class ServiceTask implements Runnable 
        Socket clent = null;
 
        public ServiceTask(Socket client) 
            this.clent = client;
        
 
        public void run() 
            ObjectInputStream input = null;
            ObjectOutputStream output = null;
            try 
                // 2.将客户端发送的码流反序列化成对象,反射调用服务实现者,获取执行结果
                input = new ObjectInputStream(clent.getInputStream());
                String serviceName = input.readUTF();
                String methodName = input.readUTF();
                Class<?>[] parameterTypes = (Class<?>[]) input.readObject();
                Object[] arguments = (Object[]) input.readObject();
                Class serviceClass = serviceRegistry.get(serviceName);
                if (serviceClass == null) 
                    throw new ClassNotFoundException(serviceName + " not found");
                
                Method method = serviceClass.getMethod(methodName, parameterTypes);
                Object result = method.invoke(serviceClass.newInstance(), arguments);
 
                // 3.将执行结果反序列化,通过socket发送给客户端
                output = new ObjectOutputStream(clent.getOutputStream());
                output.writeObject(result);
             catch (Exception e) 
                e.printStackTrace();
             finally 
                if (output != null) 
                    try 
                        output.close();
                     catch (IOException e) 
                        e.printStackTrace();
                    
                
                if (input != null) 
                    try 
                        input.close();
                     catch (IOException e) 
                        e.printStackTrace();
                    
                
                if (clent != null) 
                    try 
                        clent.close();
                     catch (IOException e) 
                        e.printStackTrace();
                    
                
            
 
        
    
View Code

  客户端的远程代理对象:

技术图片
public class RPCClient<T> 
    public static <T> T getRemoteProxyObj(final Class<?> serviceInterface, final InetSocketAddress addr) 
        // 1.将本地的接口调用转换成JDK的动态代理,在动态代理中实现接口的远程调用
        return (T) Proxy.newProxyInstance(serviceInterface.getClassLoader(), new Class<?>[]serviceInterface,
                new InvocationHandler() 
                    public Object invoke(Object proxy, Method method, Object[] args) throws Throwable 
                        Socket socket = null;
                        ObjectOutputStream output = null;
                        ObjectInputStream input = null;
                        try 
                            // 2.创建Socket客户端,根据指定地址连接远程服务提供者
                            socket = new Socket();
                            socket.connect(addr);
 
                            // 3.将远程服务调用所需的接口类、方法名、参数列表等编码后发送给服务提供者
                            output = new ObjectOutputStream(socket.getOutputStream());
                            output.writeUTF(serviceInterface.getName());
                            output.writeUTF(method.getName());
                            output.writeObject(method.getParameterTypes());
                            output.writeObject(args);
 
                            // 4.同步阻塞等待服务器返回应答,获取应答后返回
                            input = new ObjectInputStream(socket.getInputStream());
                            return input.readObject();
                         finally 
                            if (socket != null) socket.close();
                            if (output != null) output.close();
                            if (input != null) input.close();
                        
                    
                );
    
View Code

  测试方法:

public class RPCTest 
 
    public static void main(String[] args) throws IOException 
        new Thread(new Runnable() 
            public void run() 
                try 
                    Server serviceServer = new ServiceCenter(8088);
                    serviceServer.register(HelloService.class, HelloServiceImpl.class);
                    serviceServer.start();
                 catch (IOException e) 
                    e.printStackTrace();
                
            
        ).start();
        HelloService service = RPCClient.getRemoteProxyObj(HelloService.class, new InetSocketAddress("localhost", 8088));
        System.out.println(service.sayHi("test"));
    

4 改进方法

  这里实现的简单RPC框架是使用Java语言开发,与Java语言高度耦合,并且通信方式采用的Socket是基于BIO实现的,IO效率不高,还有Java原生的序列化机制占内存太多,运行效率也不高。可以考虑从下面几种方法改进。

  1. 可以采用基于JSON数据传输的RPC框架;
  2. 可以使用NIO或直接使用Netty替代BIO实现;
  3. 使用开源的序列化机制,如Hadoop Avro与Google protobuf等;
  4. 服务注册可以使用Zookeeper进行管理,能够让应用更加稳定。

rpc----rpc入门了解&最简单的rpc的实现(代码片段)

...决了什么问题?5、RPCvsHTTP远程调用方式6、常用RPC框架三、实现1、对象序列化1.1序列化的原因1.2概念1.3解决方案(RPC序列化框架)1.4代码实现2、网络通讯协议2.1基于TCP协议实现的RPC2.1.1版本一2.1.1.1原理2.1.1.2场景2.1.1.3实现代码2.1.1.4... 查看详情

自己实现一个rpc框架(代码片段)

RPC框架称为远程调用框架,其实现的核心原理就是消费者端使用动态代理来代理一个接口的方法(基于JDK的动态代理,当然如果使用CGLib可以直接使用无接口类的方法),通过加入网络传输编程,传输调用接口方法名称,方法参数... 查看详情

分布式架构的基石,简单的rpc框架实现(java)

  RPC架构  RPC的全称是RemoteProcedureCall,它是一种进程间通信方式。允许像调用本地服务一样调用远程服务。   1.RPC框架原理  RPC框架的目标就是让远程过程(服务)调用更加简单、透明,RPC框架负责屏蔽底层的传输... 查看详情

java实现简单rpc框架

...允许像调用本地服务一样调用远程服务。它可以有不同的实现方式。如RMI(远程方法调用)、Hessian、Httpinvoker等。另外,RPC是与语言无关的。RPC示意图如上图所示,假设Computer1在调用say()方法& 查看详情

手写一个简单的rpc框架(代码片段)

...:调用RPC框架的代理类,获取结果server模块:实现common的接口,把实现类注册到注册中心中调用RpcServer开启socket根据RpcRequest类的信息,获取到注册中心的实现类执行方法,返回结果,通过socket返回Rpcfra... 查看详情

三百行代码完成一个简单的rpc框架(代码片段)

花了半天的时间写了个简单的rpc框架,是因为我最初看dubbo源码的时候发现dubbo虽然看起来很庞大,但是隐隐约约总感觉,其实其绝大多数功能,都是基于可扩张性和服务治理的需要而编写的。我看过dubbo和grpc的源码,这两个都... 查看详情

设计一个分布式rpc框架(代码片段)

...,研究了解了下内部原理,突然来了兴趣,就想着自己也实现一个RPC框架,这样可以让自己在设计与实现RPC框架过程中,也能从中了解和解决一些问题,进而让自己能够更好的发展(哈哈,会不会说我有些剑走偏锋?不去解决问... 查看详情

服务化实战之dubbodubboxmotanthriftgrpc等rpc框架比较及选型(代码片段)

...RPC简述该系列文章将讲述以下RPC框架的helloword实例以及其实现原理简述,由于每一种RPC框架的原理实现不同且都比较复杂,如果想深入 查看详情

grpc本地服务搭建(代码片段)

...C框架gRPC概述特点服务端创建定义服务生成gRPC代码服务端实现客户端实现踩坑记录源码RPCRPC原理RPC框架的目标就是让远程服务调用更加简单、透明,RPC框架负责屏蔽底层的传输方式(TCP或者UDP)、序列化方式(XML/Json/二进制)和... 查看详情

重复造轮子系列:分布式rpc框架设计_00(代码片段)

摘要:本文介绍了分布式框架的简单实现,说明了自己的设计思路,以及RPC的一些具体细节。在文末,贴出一些关于rpc的资料。0x00:什么是RPCwiki给出的定义如下:Indistributedcomputing,aremoteprocedurecall(RPC)iswhenacomputerprogramcausesaprocedure(... 查看详情

计网-怎样实现rpc框架(代码片段)

文章目录Pre基础能力设计多路复用的优化调用约定和命名注册和发现负载均衡的设计可用性和容灾小结Pre随着微服务架构的盛行,远程调用成了开发微服务必不可少的能力,RPC框架作为微服务体系的底层支撑,也成了... 查看详情

restrpc:简单易用高性能的开源rpc框架(代码片段)

Motivation目前传统的C++RPC框架一般都是基于protobuf或者是thrift,都需要用专门的代码生成器来生成代码,这种方式存在以下这些问题:使用麻烦。使用时需要先写一个DSL描述文件,然后用代码生成器来生成代... 查看详情

基于netty和springboot实现一个轻量级rpc框架-client篇(代码片段)

前提前置文章:《基于Netty和SpringBoot实现一个轻量级RPC框架-协议篇》《基于Netty和SpringBoot实现一个轻量级RPC框架-Server篇》前一篇文章相对简略地介绍了RPC服务端的编写,而这篇博文最要介绍服务端(Client)的实现。RPC调用一般... 查看详情

golanggrpc简单使用(代码片段)

什么是GRPC?rpc框架一般基于tcp或者http协议实现。基于http的rpc框架有许多优点,HTTP/1.x协议简单明了,是目前最流行的应用层协议,有着非常成熟且完善的各种基础设施,如负载均衡、监控、代理等,适用... 查看详情

go-zero微服务框架rpc的使用(代码片段)

接上一篇文章,按照”终端出厂实现自动化运维方案"思路,https://blog.csdn.net/yyz_1987/article/details/118358038以终端状态上送监控服务为例,记录下go-zero微服务的简单使用,实现一个简易的后台监控云服务,监控所有出厂... 查看详情

java实现grpc服务间调用工程(代码片段)

学习目标:使用grpc协议,实现服务间通讯学习内容:1、rpc协议有哪些2、grpc3、构建rpc服务rpc协议有哪些RPC(RemoteProcedureCall)远程过程调用,简单的理解是一个节点请求另一个节点提供的服务。为微服务时... 查看详情

golang实现简单rpc调用(代码片段)

RPC通信过程RPC的通信过程网上介绍很多,这里就不在单独介绍了,具体过程如下:1.Client以本地调用的方式发起调用;2.Clientstub收到调用后负责将被调用的方法名、参数等打包编码成特定格式成网络传输的消息体&#... 查看详情

golang实现简单rpc调用(代码片段)

RPC通信过程RPC的通信过程网上介绍很多,这里就不在单独介绍了,具体过程如下:1.Client以本地调用的方式发起调用;2.Clientstub收到调用后负责将被调用的方法名、参数等打包编码成特定格式成网络传输的消息体&#... 查看详情