Go实现简易RPC框架的方法步骤

作者:Jiahonzheng 时间:2024-04-26 17:16:33 

本文旨在讲述 RPC 框架设计中的几个核心问题及其解决方法,并基于 Golang 反射技术,构建了一个简易的 RPC 框架。

项目地址:Tiny-RPC

RPC

RPC(Remote Procedure Call),即远程过程调用,可以理解成,服务 A 想调用不在同一内存空间的服务 B 的函数,由于不在一个内存空间,不能直接调用,需要通过网络来表达调用的语义和传达调用的数据。

服务端

RPC 服务端需要解决 2 个问题:

  • 由于客户端传送的是 RPC 函数名,服务端如何维护 函数名 与 函数实体 之间的映射

  • 服务端如何根据 函数名 实现对应的 函数实体 的调用

核心流程

  • 维护函数名到函数的映射

  • 在接收到来自客户端的函数名、参数列表后,解析参数列表为反射值,并执行对应函数

  • 对函数执行结果进行编码,并返回给客户端

方法注册

服务端需要维护 RPC 函数名到 RPC 函数实体的映射,我们可以使用 map 数据结构来维护映射关系。


type Server struct {
addr string
funcs map[string]reflect.Value
}

// Register a method via name
func (s *Server) Register(name string, f interface{}) {
if _, ok := s.funcs[name]; ok {
return
}
s.funcs[name] = reflect.ValueOf(f)
}

执行调用

一般来说,客户端在调用 RPC 时,会将 函数名 和 参数列表 作为请求数据,发送给服务端。

由于我们使用了 map[string]reflect.Value 来维护函数名与函数实体之间的映射,则我们可以通过 Value.Call() 来调用与函数名相对应的函数。


package main

import (
"fmt"
"reflect"
)

func main() {
// Register methods
funcs := make(map[string]reflect.Value)
funcs["add"] = reflect.ValueOf(add)

// When receives client's request
req := []reflect.Value{reflect.ValueOf(1), reflect.ValueOf(2)}
vals := funcs["add"].Call(req)
var rsp []interface{}
for _, val := range vals {
rsp = append(rsp, val.Interface())
}

fmt.Println(rsp)
}

func add(a, b int) (int, error) {
return a + b, nil
}

具体实现

由于篇幅的限制,此处没有贴出服务端实现的具体代码,细节请查看项目地址。

客户端

RPC 客户端需要解决 1 个问题:

  • 由于函数的具体实现在服务端,客户端只有函数的原型,客户端如何通过 函数原型 调用其 函数实体

核心流程

  • 对调用者传入的函数参数进行编码,并传送给服务端

  • 对服务端响应数据进行解码,并返回给调用者

生成调用

我们可以通过 reflect.MakeFunc 为指定的函数原型绑定一个函数实体。


package main

import (
"fmt"
"reflect"
)

func main() {
add := func(args []reflect.Value) []reflect.Value {
result := args[0].Interface().(int) + args[1].Interface().(int)
return []reflect.Value{reflect.ValueOf(result)}
}

var addptr func(int, int) int
container := reflect.ValueOf(&addptr).Elem()
v := reflect.MakeFunc(container.Type(), add)
container.Set(v)

fmt.Println(addptr(1, 2))
}

具体实现

由于篇幅的限制,此处没有贴出客户端实现的具体代码,细节请查看项目地址。

数据传输格式

我们需要定义服务端与客户端交互的数据格式。


type Data struct {
Name string    // service name
Args []interface{} // request's or response's body except error
Err string    // remote server error
}

与交互数据相对应的编码与解码函数。


func encode(data Data) ([]byte, error) {
var buf bytes.Buffer
encoder := gob.NewEncoder(&buf)
if err := encoder.Encode(data); err != nil {
return nil, err
}
return buf.Bytes(), nil
}

func decode(b []byte) (Data, error) {
buf := bytes.NewBuffer(b)
decoder := gob.NewDecoder(buf)
var data Data
if err := decoder.Decode(&data); err != nil {
return Data{}, err
}
return data, nil
}

同时,我们需要定义简单的 TLV 协议(固定长度消息头 + 变长消息体),规范数据的传输。


// Transport struct
type Transport struct {
conn net.Conn
}

// NewTransport creates a transport
func NewTransport(conn net.Conn) *Transport {
return &Transport{conn}
}

// Send data
func (t *Transport) Send(req Data) error {
b, err := encode(req) // Encode req into bytes
if err != nil {
return err
}
buf := make([]byte, 4+len(b))
binary.BigEndian.PutUint32(buf[:4], uint32(len(b))) // Set Header field
copy(buf[4:], b)                  // Set Data field
_, err = t.conn.Write(buf)
return err
}

// Receive data
func (t *Transport) Receive() (Data, error) {
header := make([]byte, 4)
_, err := io.ReadFull(t.conn, header)
if err != nil {
return Data{}, err
}
dataLen := binary.BigEndian.Uint32(header) // Read Header filed
data := make([]byte, dataLen)       // Read Data Field
_, err = io.ReadFull(t.conn, data)
if err != nil {
return Data{}, err
}
rsp, err := decode(data) // Decode rsp from bytes
return rsp, err
}

来源:https://juejin.im/post/5c85ec1e5188257e937dd36a

标签:Go,RPC框架
0
投稿

猜你喜欢

  • oracle 常用的几个SQL

    2009-12-01 12:36:00
  • linux下mysql5.7.19(tar.gz)安装图文教程

    2024-01-19 07:07:39
  • Pyqt助手安装PyQt5帮助文档过程图解

    2021-01-31 00:34:06
  • MYSQL初学者使用指南[适用自己安装mysql者]

    2007-08-06 14:53:00
  • 教您去掉ie网页加载进度条的方法

    2024-05-02 16:20:11
  • Python使用Scrapy保存控制台信息到文本解析

    2022-04-12 20:29:00
  • Python中人脸图像特征提取方法(HOG、Dlib、CNN)简述

    2021-09-16 21:38:59
  • MySQL limit分页大偏移量慢的原因及优化方案

    2024-01-25 14:28:30
  • typecho统计博客所有文章的字数实例详解

    2023-06-13 07:52:36
  • 国际上十四个优秀网页设计审核站

    2007-09-30 20:18:00
  • window.showModalDialog参数传递中含有特殊字符的处理方法

    2024-04-18 09:48:16
  • Go语言开发发送Get和Post请求的示例

    2024-05-21 10:23:46
  • Python将文字转成语音并读出来的实例详解

    2021-11-08 21:23:34
  • Python scipy的二维图像卷积运算与图像模糊处理操作示例

    2022-12-13 11:56:41
  • Vue mockjs编写假数据并请求获取实现流程

    2024-04-28 09:27:22
  • 解决Pycharm 包已经下载,但是运行代码提示找不到模块的问题

    2021-05-13 00:29:01
  • 12种最常用的网页编程语言简介(值得收藏)

    2023-01-29 17:40:48
  • 如何应对SQL Server数据库崩溃

    2008-11-24 17:25:00
  • 完美的js验证网址url(正则表达式)

    2008-06-07 09:36:00
  • Django使用unittest模块进行单元测试过程解析

    2021-04-03 13:09:08
  • asp之家 网络编程 m.aspxhome.com