【Golang】实现一个 HTTP 反向代理服务器
在企业应用开发中,如果需要对外提供接口,最好的方式是提供 HTTP 接口。为了避免重新实现一套 HTTP 服务代码,建议使用 grpc-gateway 包,将 HTTP 请求转化为 gRPC 请求,以完全复用 gRPC 接口的请求处理逻辑。grpc-gateway 介绍
grpc-gateway 是 protoc 的一个插件。它读取 gRPC 服务定义,并生成反向代理服务器(Reverse Proxy)。反向代理服务器根据 gRPC 服务定义中的 google.api.http 注释生成,能够将 RESTful JSON API 转换为 gRPC 请求,从而实现同时支持 gRPC 客户端和 HTTP 客户端调用 gRPC 服务的功能。
传统 gRPC 应用常创建客户端与服务交互,此场景则借助 grpc - gateway 构建反向代理服务。该代理为 gRPC 远程方法暴露 RESTful API,接收 REST 客户端 HTTP 请求,将其转为 gRPC 消息调用后端服务远程方法,再把后端响应转换为 HTTP 响应发回客户端。
为什么需要 gRPC-Gateway
GO 项目开发中,提升接口性能并便于内部系统之间的接口调用,通常会使用 RPC 协议通信;
对于外部系统,为了提供更标准、更通用且易于理解的接口调用方式,往往会使用与编程语言无关的 HTTP 协议进行通信。
两种方式在代码实现上差异较大,若希望同时实现内部 RPC 通信,外部 HTTP 访问,则需要维护两套服务及接口实现代码,后期代码维护与升级的成本增加,也容易导致错误。
gRPC-Gateway 正是通过将 HTTP 请求转换为 gRPC 请求,并统一通过 gRPC 接口实现所有功能,解决了这一问题。
如何使用 grpc-gateway
首先需要确保系统已经安装了 protoc 工具,使用 gprc-gateway 还需要安装以下两个插件:
[*]protoc-gen-grpc-gateway:为 gRPC 服务生成 HTTP/REST API 反向代理代码,从而实现对 gRPC 服务的 HTTP 映射支持;
[*]protoc-gen-openapiv2:用于从 Protobuf 描述中生成 OpenAPI v2(Swagger)定义文件。
安装命令:
$ go install github.com/grpc-ecosystem/grpc-gateway/v2/protoc-gen-grpc-gateway@v2.24.0
$ go install github.com/grpc-ecosystem/grpc-gateway/v2/protoc-gen-openapiv2@v2.24.0一个例子:
// MiniBlog 定义了一个 MiniBlog RPC 服务
service MiniBlog {
// UpdatePost 更新文章
rpc UpdatePost(UpdatePostRequest) returns (UpdatePostResponse) {
// 将 UpdatePost 映射为 HTTP PUT 请求,并通过 URL /v1/posts/{postID} 访问
// {postID} 是一个路径参数,grpc-gateway 会根据 postID 名称,将其解析并映射到
// UpdatePostRequest 类型中相应的字段.
// body: "*" 表示请求体中的所有字段都会映射到 UpdatePostRequest 类型。
option (google.api.http) = {
put: "/v1/posts/{postID}",
body: "*",
};
// 提供用于生成 OpenAPI 文档的注解
option (grpc.gateway.protoc_gen_openapiv2.options.openapiv2_operation) = {
// 在文档中简要描述此操作的功能:更新文章。
summary: "更新文章";
// 为此操作指定唯一标识符(UpdatePost),便于跟踪
operation_id: "UpdatePost";
// 将此操作归类到 "博客管理" 标签组,方便在 OpenAPI 文档中组织接口分组
tags: "博客管理";
};
}
}
// UpdatePostRequest 表示更新文章请求
message UpdatePostRequest {
// postID 表示要更新的文章 ID,对应 {postID}
string postID = 1;
// title 表示更新后的博客标题
optional string title = 2;
// content 表示更新后的博客内容
optional string content = 3;
}
// UpdatePostResponse 表示更新文章响应
message UpdatePostResponse {
}在通过 google.api.http 注解将 gRPC 方法映射为 HTTP 请求时,有以下规则需要遵守:
[*]HTTP 路径可以包含一个或多个 gRPC 请求消息中的字段,但这些字段应该是 nonrepeated 的原始类型字段;
[*]如果没有 HTTP 请求体,那么出现在请求消息中但没有出现在 HTTP 路径中的字段,将自动成为 HTTP 查询参数;
[*]映射为 URL 查询参数的字段应该是原始类型、repeated 原始类型或 nonrepeated 消息类型;
[*]对于查询参数的 repeated 字段,参数可以在 URL 中重复,形式为 …?param=A&m=B;
[*]对于查询参数中的消息类型,消息的每个字段都会映射为单独的参数,比如 …?foo.a=A&foo.b=B&foo.c=C。
miniblog 实现反向代理服务器
[*]给 gRPC 服务添加 HTTP 映射规则;
[*]生成反向代理代码;
[*]实现反向代理服务器;
[*]HTTP 请求测试。
步骤 1 如上节案例,步骤 2 生成反向代理代码:
protoc: # 编译 protobuf 文件.
@echo "===========> Generate protobuf files"
@protoc \
…
--grpc-gateway_out=allow_delete_body=true,paths=source_relative:$(APIROOT) \
--openapiv2_out=$(PROJ_ROOT_DIR)/api/openapi \
--openapiv2_opt=allow_delete_body=true,logtostderr=true \
$(shell find $(APIROOT) -name *.proto)make protoc
步骤 3 实现反向代理服务器:
func (s *UnionServer) Run() error {
log.Infow("Start to listening the incoming requests on grpc address", "addr", s.cfg.GRPCOptions.Addr)
// 启动 gRPC 服务器
go func() {
log.Infow("Starting gRPC server", "addr", s.cfg.GRPCOptions.Addr)
if err := s.srv.Serve(s.lis); err != nil {
log.Fatalw("Failed to serve", "err", err)
}
}()
// 等待 gRPC 服务器启动
time.Sleep(time.Second)
dialOptions := []grpc.DialOption{
grpc.WithBlock(),
grpc.WithTransportCredentials(insecure.NewCredentials()),
}
ctx := context.Background()
conn, err := grpc.Dial(s.cfg.GRPCOptions.Addr, dialOptions...)
if err != nil {
return err
}
defer conn.Close()
gwmux := runtime.NewServeMux(runtime.WithMarshalerOption(runtime.MIMEWildcard, &runtime.JSONPb{
MarshalOptions: protojson.MarshalOptions{
// 设置序列化 protobuf 数据时,枚举类型的字段以数字格式输出.
// 否则,默认会以字符串格式输出,跟枚举类型定义不一致,带来理解成本.
UseEnumNumbers: true,
},
}))
// 该方法会注册 HTTP 路由,并将 HTTP 请求转换为 gRPC 请求,发送到 gRPC 客户端 conn 中
if err := apiv1.RegisterMiniBlogHandler(ctx, gwmux, conn); err != nil {
return err
}
log.Infow("Start to listening the incoming requests", "protocol", "http", "addr", s.cfg.HTTPOptions.Addr)
httpsrv := &http.Server{
Addr: s.cfg.HTTPOptions.Addr,
Handler: gwmux,
}
if err := httpsrv.ListenAndServe(); err != nil && !errors.Is(err, http.ErrServerClosed) {
return err
}
return nil
}
[*]insecure.NewCredentials() 是 gRPC 提供的一个函数,用于创建不安全的传输凭据(TransportCredentials)。使用这种凭据时,gRPC 客户端和服务端之间的通信不会加密,也不会进行任何身份验证。因为 HTTP 请求转发到 gRPC 客户端,是内部转发行为,所以这里不用进行通信加密和身份验证。
课程笔记
来源:程序园用户自行投稿发布,如果侵权,请联系站长删除
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!
页:
[1]