google.protobuf.任何带有grpc的字段总是为零

Question

我在golang中使用gRPC。我有一个非常简单的原型定义和一个gRPC服务。proto定义在背书中有一个类型为google/protobuf/any的字段。gRPC服务无法将此字段映射到输入值，并且它总是被初始化为零

原型定义：

syntax = "proto3";
option go_package = "service";
option java_multiple_files = true;
option java_package = "io.grpc.consensus";
import "google/protobuf/any.proto";
package service;
service MyService {
rpc Verify (Payload) returns (Response) {}
}
message Response {
string policyId =1;
string txnId =2;
}
message Endorsement {
string endorserId=1;
// This is being initialise to nil by gRPC
google.protobuf.Any data = 2;
string signature=3;
bool isVerified=4;
}

message Payload {
string policyId =1;
string txnId =2;
repeated Endorsement endorsements=3;
}

使用它，实现了一个简单的gRPC服务：

package service
import (
"log"
"golang.org/x/net/context"
)
type ServiceServerImpl struct {
}
func NewServiceServerImpl() *ServiceServerImpl {
return &ServiceServerImpl{}
}
func (s *ServiceServerImpl) Verify(ctx context.Context, txnPayload *Payload) (*Response, error) {
log.Printf("Got verification request: %s", txnPayload.TxnId)
for _, endorsement := range txnPayload.Endorsements {
j, err := endorsement.Data.UnmarshalNew()
if err != nil {
log.Print("Error while unmarshaling the endorsement")
}
if j==nil {
//This gets printed as payload's endorsement data is always null for google/protobuf/any type
log.Print("Data is null for endorsement")
}
}
return &Response{TxnId: txnPayload.TxnId,  PolicyId: txnPayload.PolicyId}, nil
}

输入数据：

{
"policyId": "9dd97b1e-b76f-4c49-b067-22143c954e75",
"txnId": "231-4dc0-8e54-58231df6f0ce",
"endorsements": [
{
"endorserId": "67e1dfbd-1716-4d91-94ec-83dde64e4b80",
"data": {
"type": "issueTx",
"userId": 1,
"transaction": {
"amount": 10123.50
}
},
"signature": "MEUCIBkooxG2uFZeSEeaf5Xh5hWLxcKGMxCZzfnPshOh22y2AiEAwVLAaGhccUv8UhgC291qNWtxrGawX2pPsI7UUA/7QLM=",
"isVerified": false
}
]
}

客户：

type Data struct {
Type        string      `json:"type"`
UserId      int16       `json:"userId"`
Transaction Transaction `json:"transaction"`
}
type Transaction struct {
Amount float32 `json:"amount"`
}
data := &Data{Type: "Buffer", UserId: 1, Transaction: Transaction{Amount: 10123.50}}
byteData, err := json.Marshal(data)
if err != nil {
log.Printf("Could not convert data input to bytes")
}
e := &any.Any{
TypeUrl: "anything",
Value:   byteData,
}
endosement := &Endorsement{EndorserId: "1", Signature: "MEUCIBkooxG2uFZeSEeaf5Xh5hWLxcKGMxCZzfnPshOh22y2AiEAwVLAaGhccUv8UhgC291qNWtxrGawX2pPsI7UUA/7QLM=", Data: e, IsVerified: false}
var endosements = make([]*Endorsement, 1)
endosements[0] = endosement
t := &Payload{TxnId: "123", PolicyId: "456", Endorsements: endosements}
response, err := c.Verify(context.Background(), t)
if err != nil {
log.Fatalf("Error when calling SayHello: %s", err)
}

google/protobuf/any类型应该如何对未知类型进行解组？

m, err := e.Data.UnmarshalNew()
if err != nil {
log.Print("Error while unmarshaling the endorsement")
}

抛出一个错误：s:"未找到"；

Answer 1

从包¹文档取消对Any:的编组

UnmarshalNew使用全局类型注册表来解析消息类型，并构造该消息的新实例以解组到其中。为了使消息类型出现在全局注册表中，表示该protobuf消息类型的Go类型必须链接到Go二进制文件中。对于protoc gen go生成的消息，这是通过导入表示.proto文件的生成go包来实现的。

类型注册表为protoregistry.GlobalTypes。类型查找是使用Any.TypeUrl字段完成的，该字段在编组原始消息时由gRPC客户端设置为具体类型的url。

关于Any的令人困惑的细节是，它可以是任何protobuf消息，但protobuf信息必须在的某个地方定义。

.proto文件没有与输入中的data对象匹配的消息定义。这可能是因为这个Data消息是在其他地方定义的(不是在你自己的原型文件中(，但不管怎样，你都必须导入生成消息所在的Go包。

否则，如果输入不是来自已经定义的proto消息，您可以自己向proto添加消息定义，然后使用UnmarshalTo:

// proto file
message Data {
string type = 1;
int user_id = 2;
Transaction transaction = 3;
}
message Transaction {
float amount = 1;
}

然后：

for _, endorsement := range txnPayload.Endorsements {
data := generated.Data{}
err := endorsement.Data.UnmarshalTo(&data)
if err != nil {
log.Print("Error while unmarshaling the endorsement")
}
}

---

如果您只需要一个任意的字节序列，即一个真正未知的类型，那么使用原型类型bytes并将其视为JSON有效载荷。

将其建模为Go结构：

type Data struct {
Type     string `json:"type"`
UserID   int    `json:"userId"`
Transaction struct{
Amount float64 `json:"amount"`
} `json:"transaction"`
}

或者作为map[string]interface{}，如果客户端可以发送任何内容。

然后在您的处理程序函数中：

for _, endorsement := range txnPayload.Endorsements {
data := Data{} // or `map[string]interface{}`
err := json.Unmarshal(endorsement.Data, &data)
if err != nil {
log.Print("Error while unmarshaling the endorsement")
}
}

Answer 2

正如您所知，google.protobuf.Any是messageType，所以当您没有为它设置任何值时，它将为nil。

您必须使用结构来解组数据，请参阅下面的protobuf 示例中的代码

// marshal any
foo := &pb.Foo{...}
any, err := anypb.New(foo)
if err != nil {
...
}
// unmarshal any 
foo := &pb.Foo{}
if err := any.UnmarshalTo(foo); err != nil {
...
}

或者我认为您可以将它与指针接口一起使用(&interface｛｝(，如下所示：

d := &interface{}{}
if err := endorsement.Data.UnmarshalTo(d); err != nil {
...
}