App下載

Python怎么實(shí)現(xiàn)序列化和反序列化？protubuf介紹！

猿友 2021-07-27 11:28:22 瀏覽數(shù) (3046)
反饋

我們前后端進(jìn)行交互的時(shí)候可以使用JSON進(jìn)行交互，但是python應(yīng)用和python應(yīng)用之間如果使用JSON來傳遞數(shù)據(jù)是一種浪費(fèi)的行為（JSON傳遞的信息有限）這個(gè)時(shí)候我們可以通過protobuf庫來將python對(duì)象序列化，然后變成二進(jìn)制數(shù)據(jù)傳輸，最后再進(jìn)行python反序列化得到這個(gè)對(duì)象。接下來就讓我們看看具體怎么操作吧。

protobuf介紹

protobuf是一種二進(jìn)制的序列化格式，相對(duì)于json來說體積更小，傳輸更快。

安裝protobuf

安裝protobuf的目的主要用來將proto文件編譯成python、c、Java可調(diào)用的接口。

# 如果gcc版本較低，需要升級(jí)gcc
wget https://main.qcloudimg.com/raw/d7810aaf8b3073fbbc9d4049c21532aa/protobuf-2.6.1.tar.gz
tar -zxvf protobuf-2.6.1.tar.gz -C /usr/local/ && cd /usr/local/protobuf-2.6.1
./configure 
make && make install
# 可以在/etc/profile或者~/.bash_profile末尾設(shè)置永久有效
export PATH=$PATH:/usr/local/protobuf-2.6.1/bin

使用下面命令查看是否安裝成功。

[root@CodeOnTheRoad ~]# protoc --version
libprotoc 2.6.1

構(gòu)建python接口

創(chuàng)建cls.proto文件，定義序列化結(jié)構(gòu)：

package cls;

message Log
{
    message Content
    {
        required string key   = 1; // 每組字段的 key
        required string value = 2; // 每組字段的 value
    }
    required int64   time     = 1; // 時(shí)間戳，UNIX時(shí)間格式
    repeated Content contents = 2; // 一條日志里的多個(gè)kv組合
}

message LogTag
{
    required string key       = 1;
    required string value     = 2;
}

message LogGroup
{
    repeated Log    logs        = 1; // 多條日志合成的日志數(shù)組
    optional string contextFlow = 2; // 目前暫無效用
    optional string filename    = 3; // 日志文件名
    optional string source      = 4; // 日志來源，一般使用機(jī)器IP
    repeated LogTag logTags     = 5;
}

message LogGroupList
{
    repeated LogGroup logGroupList = 1; // 日志組列表
}

只用下面命令將proto文件轉(zhuǎn)換為python可調(diào)用的接口。

protoc cls.proto --python_out=./

執(zhí)行完后，在此目錄下生成cls_pb2.py。

序列化

import cls_pb2 as cls
import time

# 構(gòu)建protoBuf日志內(nèi)容
LogLogGroupList = cls.LogGroupList()

LogGroup = LogLogGroupList.logGroupList.add()
LogGroup.contextFlow = "1"
LogGroup.filename = "python.log"
LogGroup.source = "localhost"

LogTag = LogGroup.logTags.add()
LogTag.key = "key"
LogTag.value = "value"

Log = LogGroup.logs.add()
Log.time = int(round(time.time() * 1000000))

Content = Log.contents.add()
Content.key = "Hello"
Content.value = "World"
print(LogLogGroupList)
# 序列化
data = LogLogGroupList.SerializeToString()
print(data)

其實(shí)就是講一個(gè)protobuf的結(jié)構(gòu)文本序列化成了二進(jìn)制的形式。

反序列化

反序列化就是將二進(jìn)制轉(zhuǎn)換成protobuf結(jié)構(gòu)。

# 反序列化
LogLogGroupList = cls.LogGroupList()
LogLogGroupList.ParseFromString(data)
print(LogLogGroupList)

運(yùn)行結(jié)果

上面序列化和反序列化代碼結(jié)果運(yùn)行如下：

到此這篇關(guān)于Python怎么使用protobuf序列化和反序列化的文章就介紹到這了,更多Python學(xué)習(xí)內(nèi)容請(qǐng)搜索W3Cschool以前的文章或繼續(xù)瀏覽下面的相關(guān)文章。


Python

0 人點(diǎn)贊