REST RPC:简单易用高性能的开源RPC框架

Posted 唐门教主

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了REST RPC:简单易用高性能的开源RPC框架相关的知识,希望对你有一定的参考价值。

Motivation

目前传统的C++ RPC框架一般都是基于protobuf或者是thrift,都需要用专门的代码生成器来生成代码,这种方式存在以下这些问题:

  • 使用麻烦。使用时需要先写一个DSL描述文件,然后用代码生成器来生成代码,如果model类很多的时候,工作就很繁琐,工作量也比较大。
  • 维护性差。当某些model类需要修改时,必须重新定义和编译,做一些繁琐而重复的工作。
  • 学习成本高。使用它们之前先要学习代码生成器如何使用,还要学习复杂的DSL语法定义规则,而这些语法规则并不是通用的,一段时间不用之后又要重新去学习。
  • 不能快速响应增加新API的需求。当多语言的客户端较多时,服务端增加新接口时,客户端升级比较繁琐。

面对这些问题,rest_rpc就应运而生了,她就是来解决这些问题的,rest_rpc的主要特性:

  • 简单、好用、灵活
  • 让用户只关注于业务,业务之外的事由框架负责
  • 不需要学习和编写DSL
  • 不需要使用代码生成器
  • 能快速响应API升级的需求
  • 彻底消除了繁琐重复的model定义工作
  • modern(C++14)
  • 跨平台

Getting started

  • 从GitHub上下载rest_rpc

    git clone https://github.com/topcpporg/rest_rpc.git

  • 下载依赖的库Kapokspdlog

    git submodule update –init

  • 下载boost库,需要boost1.55以上版本
  • 编译

    需要支持C++14的编译器,gcc4.9以上,vs2015以上

    linux下直接使用cmake编译CMakelists.txt

    win下直接使用vs2015打开restrpc.vcxproj

Tutorial

服务端代码

rpc server提供两个服务,一个是add服务,实现一个简单的加法;一个是translate服务,实现将字符串从小写转换为大写。

#include <string>
#include "server.hpp"

int add(int a, int b)

    return a + b;


struct messager

    std::string translate(const std::string& orignal)
    
        std::string temp = orignal;
        for (auto & c : temp) c = toupper(c);
        return temp;
    
;

int main()

    server s(9000, std::thread::hardware_concurrency()); 

    s.register_handler("add", &add);
    messager m;
    s.register_handler("translate", &messager::translate, &m);

    s.run();
    return 0;

rpc server需要做的事情很简单,它只需要定义rpc服务接口即可,这也是rest rpc的设计理念,让用户只专注于业务。业务接口几乎不受限制,可以是普通函数,也可以是函数对象或者成员函数,函数的参数可以是基本类型也可以是结构体,灵活好用。需要注意的是函数参数不能是指针类型。

客户端代码

rpc client连接到服务器之后,直接调用通用接口既可以完成rpc调用,调用方式接近本地调用。

#include "client_proxy.hpp"

int main()

    try
    
        boost::asio::io_service io_service;
        client_proxy client(io_service);
        client.connect("127.0.0.1", "9000");

        std::string result = client.call("translate", "test");
        //"code":0,"result":"TEST"

        io_service.run();
    
    catch (const std::exception& e)
    
        std::cerr << "Exception: " << e.what() << std::endl;
    

    return 0;

client调用同步接口返回的字符串是标准的json格式,对应的结构体是一个泛型结构体。

template<typename T>
struct response_msg

    int code;
    T result; //json格式字符串,基本类型或者是结构体.
;

你可以将标准的json字符串反序列化为对应的对象。比如这个例子中我们调用translate RPC服务,返回的结果是一个字符串,我们可以通过Kapok很方便地反序列化。

DeSerializer dr;
dr.Parse(result);

response_msg<std::string> response = ;
dr.Deserialize(response);
std::cout<<respnse.result<<std::endl; //will output upper word.

客户端的通用接口call还提供了异步接口,同步还是异步由用户自己选择,更多的示例可以参考GitHub上的代码

异常处理

rest rpc目前定义了2种异常类型,参数异常和业务逻辑异常,下面是rpc调用的结果码。

enum result_code

    OK = 0,
    FAIL = 1,
    EXCEPTION = 2,
    ARGUMENT_EXCEPTION = 3
;
  • 服务端的异常处理

    服务端如果在调用RPC过程中发生了异常,服务器会将异常信息包装为response_msg,序列化为json字符串回发到客户端。

  • 客户端的异常处理

    客户端收到RCP调用返回的字符串结果后需要根据结果码判断本次调用是否是正常的,或者是有异常的。下面的例子展示了如何处理可能产生的异常。

    template<typename T>
    void handle_result(const char* result)
    
        DeSerializer dr;
        dr.Parse(result);
        Document& doc = dr.GetDocument();
    
        if (doc[CODE].GetInt() == result_code::OK)
        
            response_msg<T> response = ;
            dr.Deserialize(response);
            std::cout << response.result << std::endl;
        
        else
        
            //maybe exception, output the exception message.
            std::cout << doc[RESULT].GetString() << std::endl;
        
    
    

Missuses

使用rest rpc需要注意的一些问题:

  • 服务端的rpc服务函数参数中不要出现指针,其他的任意参数都可以
  • 服务端的rpc服务函数参数如果有结构体,结构体必须定义一个META宏,像这样:

    template<typename T>
    struct response_msg
    
        int code;
        T result;
        META(code, result);
    ;
    

    这个宏是序列化需要用到的,具体用法可以参考Kapok

  • 如果需要传送二进制数据的话,需要先做一个转换,将二进制流转换为base64或者16进制,框架已经提供了这两种方式的codec.

  • 目前单次传送buf的最大长度为8192,如果超出这个长度,服务器会认为长度非法。如果你希望单次传送的缓冲区更大,自行修改常量即可。
  • 最重要的问题是记住:就像调用本地函数一样调用RPC接口,除了业务逻辑之外你真的不需要关注其他!

Dependencies

  • 网络通信依赖了boost.asio
  • json序列化/反序列化依赖了Kapok
  • 日志依赖了spdlog
  • 依赖了C++14

FAQ

  • 为什么已经有这么多RPC库了,还要重新开发一个RPC库?

    是的,C++的RPC库确实是有不少了,几乎都是基于thrift或是protobuf开发的,这些库都存在一个问题,我需要学习DSL和IDL工具的使用,重复而繁琐。我希望有一个非常简单易用的RPC,除了业务逻辑,其他的都不让我操心,这就是我重新开发一个RPC库的动机。希望大家用用rest rpc,感受一下她的魅力,如果觉得好用的话请不要吝惜给star。

  • 这个RPC库的性能如何?

    rest rpc底层是用的asio,性能比较好,所以rest rpc的性能也是出色的,4核8线程32G内存的工作站上测试,在cpu占用42%时,qps达到14w+。

  • rest rpc的学习成本高吗?

    学习成本很低,因为我们是以用户使用的便利性作为首要的设计理念,让用户仅仅需要关注业务逻辑。
    即使是库本身的核心代码也是非常之少,不过一千多行,非常轻量级。

  • rest rpc已经用于生产环境了吗?

    目前还没有,还处于预览版阶段,欢迎大家试用,如果发现问题了请及时向我们的C++社区(purecpp.org)反馈, 或者在github上提issue.我们会很快在生产环境中使用rest rpc了,使用稳定之后会发布正式版,请大家持续关注。也欢迎喜欢rest rpc的开发者能加入进来贡献有深度的代码,逐渐完善rest rpc的功能。

  • rest rpc支持分布式吗?

    目前还不支持分布式,不过这已经在我们的计划中了,很快就可以实现分布式了。

Contributer

江南(qicosmos)网事如风(avdbg)IndignantAngelshines77

本文为《深入应用C++11》作者、C++开源社区purecpp.org创始人祁宇的投稿。

审校/责任编辑:唐小引,欢迎技术投稿、约稿、给文章纠错,请发送邮件至tangxy@csdn.net

以上是关于REST RPC:简单易用高性能的开源RPC框架的主要内容,如果未能解决你的问题,请参考以下文章

国内首个基于 Rust 语言的 RPC 框架 — Volo 正式开源!

微博轻量级RPC框架Motan正式开源:支撑千亿调用

企业级 RPC 框架 zRPC

让 gRPC 提供 REST 服务

百度开源的高性能RPC框架BRPC

gRPCGoogle开源的基于HTTP/2和ProtoBuf的通用RPC框架