公司是多语言研发环境,目前Java项目居多,使用Dubbo进行服务间调用。目前公司Nodejs项目、Golang已经很多,平常也用阿里开源的eggjs框架进行开发。经过技术选型,gRPC支持跨语言、高性能、HTTP/2,使用Protobuf进行数据传输立即吸引了我。于是开始写gRPC到Dubbo的转换,Dubbo本身支持泛化调用,这为接入提供了便利,项目已经开源。
gRPC Server定义
修改yml中zookeeper地址,metadata-report需要新版本dubbo,可以忽略。
1proxy: 2 registry: 3 address: zookeeper://127.0.0.1:2181 4 group: dubbo 5 metadata-report: 6 address: zookeeper://127.0.0.1:2181
启动项目:
> SPRING_PROFILES_ACTIVE=product mvn clean spring-boot:run
定义传输的proto文件 : clazz_method_param.proto 如下,
syntax = "proto3";
option java_multiple_files = true; option java_package = "org.apache.dubbo.proxy.proto"; option optimize_for = SPEED;
package dubbo;
service ProxyService { rpc InvokeProxy (ProxyRequest) returns (ProxyReply) {} }
message ProxyRequest { string application = 1; //can be null string interfaceName=2; // the dubbo service to invoke string version = 3; // the dubbo service version string group = 4; // group ,can be null string method=5; // method repeated string types=6;//method parameter array string values=7; //method value json array }
message ProxyReply { string result=1; //result json string }
node客户端:
npm install --save grpc @grpc/proto-loader
1const values = [1453074]; 2const version ='1.1.1'; 3const request = { 4 interfaceName:'com.example.api.PageServiceApi', 5 version: version, 6 //group :'', 7 method:'getSceneElement', 8 types :['long'],//字段类型 9 values:JSON.stringify(values) 10}; 11 12const PROTO_PATH = __dirname + '/clazz_method_param.proto'; 13 14const grpc = require('grpc'); 15const protoLoader = require('@grpc/proto-loader'); 16const packageDefinition = protoLoader.loadSync( 17 PROTO_PATH, 18 {keepCase: true, 19 longs: String, 20 enums: String, 21 defaults: true, 22 oneofs: true 23 }); 24var dubbo = grpc.loadPackageDefinition(packageDefinition).dubbo; 25 26const client = new dubbo.ProxyService('127.0.0.1:5050', 27 grpc.credentials.createInsecure(), { 28 'grpc.default_compression_algorithm': 2, 29 'grpc.default_compression_level': 2}); 30client.InvokeProxy(request, function(err, response) { 31 console.log('result:', response); 32});
上线完成,通过观察,网卡流量下降了一半,因为dubbo传输的是未压缩的,而grpc支持gzip压缩。虽然相比Java consumer->dubbo provider, gRRC流程client->gRPC server proxy->dubbo provider, 多了一层网络请求,不过接口响应并没有变慢,可能也是gzip压缩带来的好处。
网卡流量:

接口响应速度:

