您当前的位置:首页 > IT编程 > python
| C语言 | Java | VB | VC | python | Android | TensorFlow | C++ | oracle | 学术与代码 | cnn卷积神经网络 | gnn | 图像修复 | Keras | 数据集 | Neo4j | 自然语言处理 | 深度学习 | 医学CAD | 医学影像 | 超参数 | pointnet | pytorch | 异常检测 | Transformers | 情感分类 | 知识图谱 |

自学教程:Python使用protobuf序列化和反序列化的实现

51自学网 2021-10-30 22:39:48
  python
这篇教程Python使用protobuf序列化和反序列化的实现写得很实用,希望能帮到您。

protobuf介绍

protobuf是一种二进制的序列化格式,相对于json来说体积更小,传输更快。

安装protobuf

安装protobuf的目的主要用来将proto文件编译成python、c、Java可调用的接口。

# 如果gcc版本较低,需要升级gccwget https://main.qcloudimg.com/raw/d7810aaf8b3073fbbc9d4049c21532aa/protobuf-2.6.1.tar.gztar -zxvf protobuf-2.6.1.tar.gz -C /usr/local/ && cd /usr/local/protobuf-2.6.1./configure make && make install# 可以在/etc/profile或者~/.bash_profile末尾设置永久有效export PATH=$PATH:/usr/local/protobuf-2.6.1/bin

使用下面命令查看是否安装成功。

[root@CodeOnTheRoad ~]# protoc --versionlibprotoc 2.6.1

构建python接口

创建cls.proto文件,定义序列化结构:

package cls;message Log{    message Content    {        required string key   = 1; // 每组字段的 key        required string value = 2; // 每组字段的 value    }    required int64   time     = 1; // 时间戳,UNIX时间格式    repeated Content contents = 2; // 一条日志里的多个kv组合}message LogTag{    required string key       = 1;    required string value     = 2;}message LogGroup{    repeated Log    logs        = 1; // 多条日志合成的日志数组    optional string contextFlow = 2; // 目前暂无效用    optional string filename    = 3; // 日志文件名    optional string source      = 4; // 日志来源,一般使用机器IP    repeated LogTag logTags     = 5;}message LogGroupList{    repeated LogGroup logGroupList = 1; // 日志组列表} 

只用下面命令将proto文件转换为python可调用的接口。

protoc cls.proto --python_out=./ 

执行完后,在此目录下生成cls_pb2.py。

序列化

import cls_pb2 as clsimport time# 构建protoBuf日志内容LogLogGroupList = cls.LogGroupList()LogGroup = LogLogGroupList.logGroupList.add()LogGroup.contextFlow = "1"LogGroup.filename = "python.log"LogGroup.source = "localhost"LogTag = LogGroup.logTags.add()LogTag.key = "key"LogTag.value = "value"Log = LogGroup.logs.add()Log.time = int(round(time.time() * 1000000))Content = Log.contents.add()Content.key = "Hello"Content.value = "World"print(LogLogGroupList)# 序列化data = LogLogGroupList.SerializeToString()print(data)

其实就是讲一个protobuf的结构文本序列化成了二进制的形式。

反序列化

反序列化就是将二进制转换成protobuf结构。

# 反序列化LogLogGroupList = cls.LogGroupList()LogLogGroupList.ParseFromString(data)print(LogLogGroupList)

运行结果

上面序列化和反序列化代码结果运行如下:

到此这篇关于Python使用protobuf序列化和反序列化的实现的文章就介绍到这了,更多相关Python 序列化和反序列化内容请搜索51zixue.net以前的文章或继续浏览下面的相关文章希望大家以后多多支持51zixue.net!


Django 聚合函数的具体使用
Python基础之元组与文件知识总结
万事OK自学网:51自学网_软件自学网_CAD自学网自学excel、自学PS、自学CAD、自学C语言、自学css3实例,是一个通过网络自主学习工作技能的自学平台,网友喜欢的软件自学网站。