go微服务——rpc(代码片段)

胡毛毛_三月 胡毛毛_三月     2022-12-09     722

关键词:

目录

1. RPC

1.1.1. RPC简介

  • 远程过程调用(Remote Procedure Call,RPC)是一个计算机通信协议
  • 该协议允许运行于一台计算机的程序调用另一台计算机的子程序,而程序员无需额外地为这个交互作用编程
  • 如果涉及的软件采用面向对象编程,那么远程过程调用亦可称作远程调用或远程方法调用

1.1.2. 流行RPC框架的对比

1.1.3. golang中如何实现RPC

  • golang中实现RPC非常简单,官方提供了封装好的库,还有一些第三方的库
  • golang官方的net/rpc库使用encoding/gob进行编解码,支持tcp和http数据传输方式,由于其他语言不支持gob编解码方式,所以golang的RPC只支持golang开发的服务器与客户端之间的交互
  • 官方还提供了net/rpc/jsonrpc库实现RPC方法,jsonrpc采用JSON进行数据编解码,因而支持跨语言调用,目前jsonrpc库是基于tcp协议实现的,暂不支持http传输方式
  • 例题:golang实现RPC程序,实现求矩形面积和周长

服务端

package main

import (
    "log"
    "net/http"
    "net/rpc"
)

//    例题:golang实现RPC程序,实现求矩形面积和周长

type Params struct 
    Width, Height int


type Rect struct

// RPC服务端方法,求矩形面积
func (r *Rect) Area(p Params, ret *int) error 
    *ret = p.Height * p.Width
    return nil


// 周长
func (r *Rect) Perimeter(p Params, ret *int) error 
    *ret = (p.Height + p.Width) * 2
    return nil


// 主函数
func main() 
    // 1.注册服务
    rect := new(Rect)
    // 注册一个rect的服务
    rpc.Register(rect)
    // 2.服务处理绑定到http协议上
    rpc.HandleHTTP()
    // 3.监听服务
    err := http.ListenAndServe(":8000", nil)
    if err != nil 
        log.Panicln(err)
    

客户端

package main

import (
    "fmt"
    "log"
    "net/rpc"
)

// 传的参数
type Params struct 
    Width, Height int


// 主函数
func main() 
    // 1.连接远程rpc服务
    conn, err := rpc.DialHTTP("tcp", ":8000")
    if err != nil 
        log.Fatal(err)
    
    // 2.调用方法
    // 面积
    ret := 0
    err2 := conn.Call("Rect.Area", Params50, 100, &ret)
    if err2 != nil 
        log.Fatal(err2)
    
    fmt.Println("面积:", ret)
    // 周长
    err3 := conn.Call("Rect.Perimeter", Params50, 100, &ret)
    if err3 != nil 
        log.Fatal(err3)
    
    fmt.Println("周长:", ret)

  • golang写RPC程序,必须符合4个基本条件,不然RPC用不了
    • 结构体字段首字母要大写,可以别人调用
    • 函数名必须首字母大写
    • 函数第一参数是接收参数,第二个参数是返回给客户端的参数,必须是指针类型
    • 函数还必须有一个返回值error
  • 练习:模仿前面例题,自己实现RPC程序,服务端接收2个参数,可以做乘法运算,也可以做商和余数的运算,客户端进行传参和访问,得到结果如下:

服务端代码:

package main

import (
   "errors"
   "log"
   "net/http"
   "net/rpc"
)

// 结构体,用于注册的
type Arith struct

// 声明参数结构体
type ArithRequest struct 
   A, B int


// 返回给客户端的结果
type ArithResponse struct 
   // 乘积
   Pro int
   // 商
   Quo int
   // 余数
   Rem int


// 乘法
func (this *Arith) Multiply(req ArithRequest, res *ArithResponse) error 
   res.Pro = req.A * req.B
   return nil


// 商和余数
func (this *Arith) Divide(req ArithRequest, res *ArithResponse) error 
   if req.B == 0 
      return errors.New("除数不能为0")
   
   // 除
   res.Quo = req.A / req.B
   // 取模
   res.Rem = req.A % req.B
   return nil


// 主函数
func main() 
   // 1.注册服务
   rect := new(Arith)
   // 注册一个rect的服务
   rpc.Register(rect)
   // 2.服务处理绑定到http协议上
   rpc.HandleHTTP()
   // 3.监听服务
   err := http.ListenAndServe(":8000", nil)
   if err != nil 
      log.Fatal(err)
   

客户端代码:

package main

import (
   "fmt"
   "log"
   "net/rpc"
)

type ArithRequest struct 
   A, B int


// 返回给客户端的结果
type ArithResponse struct 
   // 乘积
   Pro int
   // 商
   Quo int
   // 余数
   Rem int


func main() 
   conn, err := rpc.DialHTTP("tcp", ":8000")
   if err != nil 
      log.Fatal(err)
   
   req := ArithRequest9, 2
   var res ArithResponse
   err2 := conn.Call("Arith.Multiply", req, &res)
   if err2 != nil 
      log.Fatal(err2)
   
   fmt.Printf("%d * %d = %d\\n", req.A, req.B, res.Pro)
   err3 := conn.Call("Arith.Divide", req, &res)
   if err3 != nil 
      log.Fatal(err3)
   
   fmt.Printf("%d / %d 商 %d,余数 = %d\\n", req.A, req.B, res.Quo, res.Rem)

另外,net/rpc/jsonrpc库通过json格式编解码,支持跨语言调用

服务端代码:

package main

import (
    "fmt"
    "log"
    "net"
    "net/rpc"
    "net/rpc/jsonrpc"
)

type Params struct 
    Width, Height int

type Rect struct 


func (r *Rect) Area(p Params, ret *int) error 
    *ret = p.Width * p.Height
    return nil

func (r *Rect) Perimeter(p Params, ret *int) error 
    *ret = (p.Height + p.Width) * 2
    return nil

func main() 
    rpc.Register(new(Rect))
    lis, err := net.Listen("tcp", ":8080")
    if err != nil 
        log.Panicln(err)
    
    for 
        conn, err := lis.Accept()
        if err != nil 
            continue
        
        go func(conn net.Conn) 
            fmt.Println("new client")
            jsonrpc.ServeConn(conn)
        (conn)
    

客户端代码:

package main

import (
    "fmt"
    "log"
    "net/rpc/jsonrpc"
)

type Params struct 
    Width, Height int


func main() 
    conn, err := jsonrpc.Dial("tcp", ":8080")
    if err != nil 
        log.Panicln(err)
    
    ret := 0
    err2 := conn.Call("Rect.Area", Params50, 100, &ret)
    if err2 != nil 
        log.Panicln(err2)
    
    fmt.Println("面积:", ret)
    err3 := conn.Call("Rect.Perimeter", Params50, 100, &ret)
    if err3 != nil 
        log.Panicln(err3)
    
    fmt.Println("周长:", ret)

1.1.4. RPC调用流程

  • 微服务架构下数据交互一般是对内 RPC,对外 REST
  • 将业务按功能模块拆分到各个微服务,具有提高项目协作效率、降低模块耦合度、提高系统可用性等优点,但是开发门槛比较高,比如 RPC 框架的使用、后期的服务监控等工作
  • 一般情况下,我们会将功能代码在本地直接调用,微服务架构下,我们需要将这个函数作为单独的服务运行,客户端通过网络调用

1.1.5. 网络传输数据格式

  • 两端要约定好数据包的格式
  • 成熟的RPC框架会有自定义传输协议,这里网络传输格式定义如下,前面是固定长度消息头,后面是变长消息体

  • 自己定义数据格式的读写
package rpc

import (
    "encoding/binary"
    "io"
    "net"
)

// 测试网络中读写数据的情况

// 会话连接的结构体
type Session struct 
    conn net.Conn


// 构造方法
func NewSession(conn net.Conn) *Session 
    return &Sessionconn: conn


// 向连接中去写数据
func (s *Session) Write(data []byte) error 
    // 定义写数据的格式
    // 4字节头部 + 可变体的长度
    buf := make([]byte, 4+len(data))
    // 写入头部,记录数据长度
    binary.BigEndian.PutUint32(buf[:4], uint32(len(data)))
    // 将整个数据,放到4后边
    copy(buf[4:], data)
    _, err := s.conn.Write(buf)
    if err != nil 
        return err
    
    return nil


// 从连接读数据
func (s *Session) Read() ([]byte, error) 
    // 读取头部记录的长度
    header := make([]byte, 4)
    // 按长度读取消息
    _, err := io.ReadFull(s.conn, header)
    if err != nil 
        return nil, err
    
    // 读取数据
    dataLen := binary.BigEndian.Uint32(header)
    data := make([]byte, dataLen)
    _, err = io.ReadFull(s.conn, data)
    if err != nil 
        return nil, err
    
    return data, nil

测试类

package rpc

import (
    "fmt"
    "net"
    "sync"
    "testing"
)

func TestSession_ReadWriter(t *testing.T) 
    // 定义地址
    addr := "127.0.0.1:8000"
    my_data := "hello"
    // 等待组定义
    wg := sync.WaitGroup
    wg.Add(2)
    // 写数据的协程
    go func() 
        defer wg.Done()
        lis, err := net.Listen("tcp", addr)
        if err != nil 
            t.Fatal(err)
        
        conn, _ := lis.Accept()
        s := Sessionconn: conn
        err = s.Write([]byte(my_data))
        if err != nil 
            t.Fatal(err)
        
    ()

    // 读数据的协程
    go func() 
        defer wg.Done()
        conn, err := net.Dial("tcp", addr)
        if err != nil 
            t.Fatal(err)
        
        s := Sessionconn: conn
        data, err := s.Read()
        if err != nil 
            t.Fatal(err)
        
        // 最后一层校验
        if string(data) != my_data 
            t.Fatal(err)
        
        fmt.Println(string(data))
    ()
    wg.Wait()

编码解码

package rpc

import (
    "bytes"
    "encoding/gob"
)

// 定义RPC交互的数据结构
type RPCData struct 
    // 访问的函数
    Name string
    // 访问时的参数
    Args []interface


// 编码
func encode(data RPCData) ([]byte, error) 
    //得到字节数组的编码器
    var buf bytes.Buffer
    bufEnc := gob.NewEncoder(&buf)
    // 编码器对数据编码
    if err := bufEnc.Encode(data); err != nil 
        return nil, err
    
    return buf.Bytes(), nil


// 解码
func decode(b []byte) (RPCData, error) 
    buf := bytes.NewBuffer(b)
    // 得到字节数组解码器
    bufDec := gob.NewDecoder(buf)
    // 解码器对数据节码
    var data RPCData
    if err := bufDec.Decode(&data); err != nil 
        return data, err
    
    return data, nil

1.1.6. 实现RPC服务端

  • 服务端接收到的数据需要包括什么?
    • 调用的函数名、参数列表,还有一个返回值error类型
  • 服务端需要解决的问题是什么?
    • Map维护客户端传来调用函数,服务端知道去调谁
  • 服务端的核心功能有哪些?
    • 维护函数map
    • 客户端传来的东西进行解析
    • 函数的返回值打包,传给客户端
package rpc

import (
    "fmt"
    "net"
    "reflect"
)

// 声明服务端
type Server struct 
    // 地址
    addr string
    // map 用于维护关系的
    funcs map[string]reflect.Value


// 构造方法
func NewServer(addr string) *Server 
    return &Serveraddr: addr, funcs: make(map[string]reflect.Value)


// 服务端需要一个注册Register
// 第一个参数函数名,第二个传入真正的函数
func (s *Server) Register(rpcName string, f interface) 
    // 维护一个map
    // 若map已经有键了
    if _, ok := s.funcs[rpcName]; ok 
        return
    
    // 若map中没值,则将映射加入map,用于调用
    fVal := reflect.ValueOf(f)
    s.funcs[rpcName] = fVal


// 服务端等待调用的方法
func (s *Server) Run() 
    // 监听
    lis, err := net.Listen("tcp", s.addr)
    if err != nil 
        fmt.Printf("监听 %s err :%v", s.addr, err)
        return
    
    for 
        // 服务端循环等待调用
        conn, err := lis.Accept()
        if err != nil 
            return
        
        serSession := NewSession(conn)
        // 使用RPC方式读取数据
        b, err := serSession.Read()
        if err != nil 
            return
        
        // 数据解码
        rpcData, err := decode(b)
        if err != nil 
            return
        
        // 根据读到的name,得到要调用的函数
        f, ok := s.funcs[rpcData.Name]
        if !ok 
            fmt.Println("函数 %s 不存在", rpcData.Name)
            return
        
        // 遍历解析客户端传来的参数,放切片里
        inArgs := make([]reflect.Value, 0, len(rpcData.Args))
        for _, arg := range rpcData.Args 
            inArgs 查看详情  

go微服务grpc(代码片段)

gRPC教程RPC算是近些年比较火热的概念了,随着微服务架构的兴起,RPC的应用越来越广泛。本文介绍了RPC和gRPC的相关概念,并且通过详细的代码示例介绍了gRPC的基本使用。gRPC是什么gRPC是一种现代化开源的高性能RPC框... 查看详情

go微服务grpc(代码片段)

gRPC教程RPC算是近些年比较火热的概念了,随着微服务架构的兴起,RPC的应用越来越广泛。本文介绍了RPC和gRPC的相关概念,并且通过详细的代码示例介绍了gRPC的基本使用。gRPC是什么gRPC是一种现代化开源的高性能RPC框... 查看详情

go-zero微服务框架rpc的使用(代码片段)

...blog.csdn.net/yyz_1987/article/details/118358038以终端状态上送监控服务为例,记录下go-zero微服务的简单使用,实现一个简易的后台监控云服务,监控所有出厂状态上报的终端状态。新建一个Golang服务后台项目代码的目录, 查看详情

带你十天轻松搞定go微服务系列(代码片段)

我们通过一个系列文章跟大家详细展示一个go-zero微服务示例,整个系列分十篇文章,目录结构如下:环境搭建:带你十天轻松搞定Go微服务系列(一)服务拆分:带你十天轻松搞定Go微服务系列(二)用户服务:带你十天轻松搞... 查看详情

微服务学习rpc原理与gorpc(代码片段)

...ocedureCall),即远程过程调用。它允许像调用本地服务一样调用远程服务。RPC是一种服务器-客户端(Client/Server)模式,经典实现是一个通过发送请求-接受回应进行信息交互的系统。首先与RPCÿ 查看详情

带你十天轻松搞定go微服务系列(九链路追踪)(代码片段)

我们通过一个系列文章跟大家详细展示一个go-zero微服务示例,整个系列分十篇文章,目录结构如下:环境搭建:带你十天轻松搞定Go微服务系列(一)服务拆分:带你十天轻松搞定Go微服务系列(二)用户服务:带你十天轻松搞... 查看详情

带你十天轻松搞定go微服务系列(代码片段)

...始,我们会出一个系列文章跟大家详细展示一个go-zero微服务示例,整个系列分十篇文章,目录结构如下:环境搭建(本文)服务拆分用户服务产品服务订单服务支付服务RPC服务Auth验证服务监控链路追踪分布式事务期望通过本系... 查看详情

带你十天轻松搞定go微服务系列(代码片段)

...始,我们会出一个系列文章跟大家详细展示一个go-zero微服务示例,整个系列分十篇文章,目录结构如下:环境搭建(本文)服务拆分用户服务产品服务订单服务支付服务RPC服务Auth验证服务监控链路追踪分布式事务期望通过本系... 查看详情

go微服务rpc的原理与gorpc(代码片段)

...ocedureCall),即远程过程调用。它允许像调用本地服务一样调用远程服务。RPC是一种服务器-客户端(Client/Server)模式,经典实现是一个通过发送请求-接受回应进行信息交互的系统。首先与RPC(远程过程调... 查看详情

[kitex+gorm-gen+hertz]快速写出一个基于go的微服务(代码片段)

[kitex+gorm-gen+hertz]快速写出一个kitex的微服务0、目的1、环境安装2、定义用户的IDL3、kitex自动代码生成4、导入goland5、Demo5.1、服务端编写handler--假数据5.2、运行5.3、客户端--测试5.4、使用etcd来完成注册和发现5.5、项目地址6、... 查看详情

我不懂微服务:rpc远程调用(代码片段)

...用协议,简单来说是一个节点请求另一个节点提供的服务。RPC是伴随着分布式的出现的,因为分布式客户端和服务端部署在不同的机器上,所以需要远程调用。一、基本模型RPC基本组件有如下几个:1、客户端服务... 查看详情

go微服务框架go-micro深度学习-目录

go微服务框架go-micro深度学习(一)整体架构介绍go微服务框架go-micro深度学习(二)入门例子go微服务框架go-micro深度学习(三)Registry服务的注册和发现go微服务框架go-micro深度学习(四)rpc方法调用过程详解go微服务框架go-micro深度学习(五)s... 查看详情

go-zero成长之路—微服务电商实战系列(六条件查询)(代码片段)

该系列源码已开源:micro-shop1.概述在产品服务版块中咱们会有分页和条件的检索查询对应的产品列表。所以咱们这边讲一下在开发过程中会出现的一些清情况:检索条件的组合分页条数的计算检索条件的sql语句格式化输... 查看详情

(17)go-micro微服务prometheus监控(代码片段)

目录一Prometheus监控介绍1.微服务监控系统promethues介绍2.微服务监控系统promethues工作流程二Prometheus监控重要组件和重要概念1.微服务监控系统promethues重要组件2.微服务监控系统promethues重要概念三微服务监控系统grafana看板四Prometheu... 查看详情

分布式与微服务系列分布式rpc框架apachedubbo服务(代码片段)

分布式RPC框架ApacheDubbo服务一、ApacheDubbo概述1.1、Dubbo简介1.2、什么是RPC?1.3、什么是服务发现?1.3、Dubbo架构二、服务注册中心Zookeeper2.1、Zookeeper介绍2.2、安装Zookeeper2.3、启动、停止Zookeeper三、Dubbo快速入门3.1、服务提供... 查看详情

go的微服务库kite

Kite Kite是用Go开发的一套RPC库,很适合作为分布式微服务的开发框架。Kite的传输层使用 SockJS 提供的WebSocket服务,浏览器Javascript也可以连接到Kite上(Kite.js);Kite的RPC消息格式使用修改过的 dnode 协议,Kite增加... 查看详情

go微服务学习go-micro框架(代码片段)

...cro解决了在云内外构建分布式系统的关键要求。它利用微服务体系结构模式,并提供一组作为平台构建基块的服务.Micro处理分布式系统的复杂性,并提供更简单的可编程抽象.Micro是一个专注于简化分布式系统开发 查看详情