当前位置:首页 > 科技  > 软件

在 Go 中使用 Protocol Buffers

来源: 责编: 时间:2023-11-28 09:34:01 147观看
导读各位准备好了吗!这一次,我们将深入探讨 Protocol Buffers(protobuf)及其在数据序列化中的超能力所在。介绍Protocol Buffers,也被称为 protobuf,是由谷歌开发的一种语言无关的二进制序列化格式。其主要目的是为了高效地序列

各位准备好了吗!这一次,我们将深入探讨 Protocol Buffers(protobuf)及其在数据序列化中的超能力所在。Bht28资讯网——每日最新资讯28at.com

Bht28资讯网——每日最新资讯28at.com

介绍

Protocol Buffers,也被称为 protobuf,是由谷歌开发的一种语言无关的二进制序列化格式。其主要目的是为了高效地序列化结构化数据,用于系统间通信和数据存储。Bht28资讯网——每日最新资讯28at.com

Bht28资讯网——每日最新资讯28at.com

Protocol Buffers 的主要优势:

  • 紧凑性:Protobuf 提供高效的序列化,生成较小的消息大小,提升带宽利用效率。
  • 模式演进:Protobuf 支持模式演进而不破坏兼容性,允许对数据结构进行无缝更新。
  • 高效的序列化和反序列化:Protobuf 提供快速高效的序列化,提升整体系统性能。
  • 跨平台支持:Protobuf 允许不同平台和语言之间无缝交换数据。

这些优势使得 Protobuf 成为在 Go 应用程序中进行高效数据通信和存储的强大工具。Bht28资讯网——每日最新资讯28at.com

它比 JSON 和 XML 更好的地方:

Bht28资讯网——每日最新资讯28at.com

XML,即可扩展标记语言,就像一张地图,用标签帮助组织和结构化数据。它以一种人类和机器都能理解的方式呈现信息。然而,XML 可能冗长并占用更多空间,这可能降低性能,使数据传输效率降低。Bht28资讯网——每日最新资讯28at.com

JSON,即 JavaScript 对象表示法,就像一个信使,使用简单的键值结构来表示数据对象。它因易于阅读和使用而在 Web 服务之间传输数据时变得流行。但 JSON 的基于文本的格式可能导致更大的文件大小,从而影响数据传输速度。Bht28资讯网——每日最新资讯28at.com

相比之下,Protocol Buffers(protobuf)在数据序列化领域脱颖而出。它就像一个魔术,将数据转换为紧凑高效的二进制格式。Protobuf 以快速的数据处理和适应变化的数据结构而闻名,并且在不破坏兼容性的情况下进行操作。它可以与不同的编程语言一起使用,并确保数据的可靠性。Bht28资讯网——每日最新资讯28at.com

总之,XML 和 JSON 各有用途,但如果您需要强大且高效的数据序列化解决方案,Protocol Buffer(protobuf)是首选。它提供紧凑性、速度、灵活性和兼容性,使其成为高效处理数据的首选方案。Bht28资讯网——每日最新资讯28at.com

在 Golang 中的序列化性能:Protocol Buffers vs. JSON

言归正传,让我们动手实践。Bht28资讯网——每日最新资讯28at.com

Bht28资讯网——每日最新资讯28at.com

访问官方 Protocol Buffers GitHub 仓库(https://github.com/protocolbuffers/protobuf)下载与您操作系统兼容的编译器。Bht28资讯网——每日最新资讯28at.com

使用 .proto 文件格式定义一个 Protocol Buffers 消息模式。Bht28资讯网——每日最新资讯28at.com

syntax = "proto3";package main;option go_package = "/;msgmodel";message MyMessage {  int32 id = 1;  string name = 2;  string email = 3;}

编译文件:Bht28资讯网——每日最新资讯28at.com

protoc — go_out=. ./*proto

这个命令从 protobuf 模式生成 Go 代码绑定。--go_out 标志指定输出应为 Go 语言。这将生成一个 msg.pb.go 文件,其中包含您的 protobuf 模式所需的代码绑定。Bht28资讯网——每日最新资讯28at.com

在 Golang 中实现一个基准测试,使用 protobuf 和 JSON 对大型数据集进行序列化:Bht28资讯网——每日最新资讯28at.com

package mainimport (    "encoding/json"    "github.com/golang/protobuf/proto"    "go-protobuf/model/message"    "log"    "testing")const (    iteration = 10000000 //Number of iterations for the benchmark test)func generateDataset() []*message.MyMessage {    var dataset []*message.MyMessage    for i := 0; i < iteration; i++ {        data := &message.MyMessage{            Email: "johndoe@example.com",            Name:  "John Doe",            Id:    int32(i),        }        dataset = append(dataset, data)    }    return dataset}func BenchmarkProtobufSerialisation(b *testing.B) {    dataset := generateDataset()    b.ResetTimer()    for n := 0; n < b.N; n++ {        for _, data := range dataset {            _, err := proto.Marshal(data)            if err != nil {                log.Fatal(err)            }        }    }}func BenchmarkJSONSerialization(b *testing.B) {    dataset := generateDataset()    b.ResetTimer()    for n := 0; n < b.N; n++ {        for _, data := range dataset {            _, err := json.Marshal(data)            if err != nil {                log.Fatal(err)            }        }    }}func main() {    // Run the benchmark tests    testing.Benchmark(BenchmarkProtobufSerialisation)    testing.Benchmark(BenchmarkJSONSerialization)}

根据基准测试结果(如下所示),很明显,就速度而言,Protocol Buffers(Protobuf)的序列化性能优于 JSON。与 JSON 的序列化基准测试相比,Protobuf 的序列化基准测试完成时间明显较短。Bht28资讯网——每日最新资讯28at.com

Bht28资讯网——每日最新资讯28at.com

内存性能比较:JSON vs. Protocol Buffers

在 Golang 中实现一个基准测试,比较使用 Protocol Buffers 和 JSON 处理大型数据集时的内存使用情况:Bht28资讯网——每日最新资讯28at.com

package mainimport (    "encoding/json"    "github.com/golang/protobuf/proto"    "go-protobuf/model/message"    "log"    "runtime"    "runtime/debug"    "testing")const (    iteration = 100000000 //Number of iterations for the benchmark test)func generateDataset() []*message.MyMessage {    var dataset []*message.MyMessage    for i := 0; i < iteration; i++ {        data := &message.MyMessage{            Email: "johndoe@example.com",            Name:  "John Doe",            Id:    int32(i),        }        dataset = append(dataset, data)    }    return dataset}func BenchmarkProtobufSerialisation(b *testing.B) {    dataset := generateDataset()    b.ResetTimer()    for n := 0; n < b.N; n++ {        for _, data := range dataset {            _, err := proto.Marshal(data)            if err != nil {                log.Fatal(err)            }        }    }    measureMemoryUsage(b)}func BenchmarkJSONSerialization(b *testing.B) {    dataset := generateDataset()    b.ResetTimer()    for n := 0; n < b.N; n++ {        for _, data := range dataset {            _, err := json.Marshal(data)            if err != nil {                log.Fatal(err)            }        }    }    measureMemoryUsage(b)}func measureMemoryUsage(b *testing.B) {    debug.FreeOSMemory()    var mem runtime.MemStats    runtime.GC()    runtime.ReadMemStats(&mem)    b.ReportMetric(float64(mem.Alloc)/1024/1024, "Memory_MB")}func main() {    // Run the benchmark tests    testing.Benchmark(BenchmarkProtobufSerialisation)    testing.Benchmark(BenchmarkJSONSerialization)}

尽管差异很小,但基准测试结果表明,与 Protobuf 序列化相比,JSON 序列化使用了更多的内存。平均而言,JSON 序列化消耗了约 0.2052 MB 的内存,而 Protobuf 序列化仅使用了约 0.2042 MB。尽管差异很小,但很明显 Protobuf 在内存使用方面更加高效。这意味着 Protobuf 的紧凑二进制格式有助于节省内存,使其成为处理大型数据集和提高性能的良好选择。Bht28资讯网——每日最新资讯28at.com

Bht28资讯网——每日最新资讯28at.com

结论

现在是总结的时候了!!!Bht28资讯网——每日最新资讯28at.com

与在 Golang 中的 JSON 序列化相比,Protocol Buffers(protobuf)展现出了更优越的性能和内存效率。借助其紧凑的二进制格式和高效的序列化机制,protobuf 提供了更小的消息大小、提升了网络效率,并减少了带宽使用。此外,其模式演进能力允许对数据模型进行无缝更新。虽然 JSON 有其优势,但在需要高速和高内存效率的数据序列化场景中,protobuf 出类拔萃,实现了优化的数据传输和改善的系统性能。Bht28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-26-34609-0.html在 Go 中使用 Protocol Buffers

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: Python GUI 编程:dearpygui 和 tkinter 的对比与选择!

下一篇: C++ extern的妙用

标签:
  • 热门焦点
  • K60 Pro官方停产 第三方瞬间涨价

    K60 Pro官方停产 第三方瞬间涨价

    虽然没有官方宣布,但Redmi的一些高管也已经透露了,Redmi K60 Pro已经停产且不会补货,这一切都是为了即将到来的K60 Ultra铺路,属于厂家的正常操作。但有意思的是该机在停产之后
  • 小米官宣:2023年上半年出货量中国第一!

    小米官宣:2023年上半年出货量中国第一!

    今日早间,小米电视官方微博带来消息,称2023年小米电视上半年出货量达到了中国第一,同时还表示小米电视的巨屏风暴即将开始。“公布一个好消息2023年#小米电视上半年出货量中国
  • 7月安卓手机性价比榜:努比亚+红魔两款新机入榜

    7月安卓手机性价比榜:努比亚+红魔两款新机入榜

    7月登场的新机有努比亚Z50S Pro和红魔8S Pro,除了三星之外目前唯二的两款搭载超频版骁龙8Gen2处理器的产品,而且努比亚和红魔也一贯有着不错的性价比,所以在本次的性价比榜单
  • 容量越大越不坏?24万块硬盘故障率报告公布 这些产品零故障

    容量越大越不坏?24万块硬盘故障率报告公布 这些产品零故障

    8月5日消息,云存储服务商Backblaze发布了最新的硬盘故障率报告,年故障率有所上升。Backblaze发布的硬盘季度统计数据,其中包括故障率等重要方面。这些结
  • 一篇聊聊Go错误封装机制

    一篇聊聊Go错误封装机制

    %w 是用于错误包装(Error Wrapping)的格式化动词。它是用于 fmt.Errorf 和 fmt.Sprintf 函数中的一个特殊格式化动词,用于将一个错误(或其他可打印的值)包装在一个新的错误中。使
  • WebRTC.Net库开发进阶,教你实现屏幕共享和多路复用!

    WebRTC.Net库开发进阶,教你实现屏幕共享和多路复用!

    WebRTC.Net库:让你的应用更亲民友好,实现视频通话无痛接入! 除了基本用法外,还有一些进阶用法可以更好地利用该库。自定义 STUN/TURN 服务器配置WebRTC.Net 默认使用 Google 的
  • 拼多多APP上线本地生活入口,群雄逐鹿万亿市场

    拼多多APP上线本地生活入口,群雄逐鹿万亿市场

    Tech星球(微信ID:tech618)文 | 陈桥辉 Tech星球独家获悉,拼多多在其APP内上线了&ldquo;本地生活&rdquo;入口,位置较深,位于首页的&ldquo;充值中心&rdquo;内,目前主要售卖美食相关的
  • “又被陈思诚骗了”

    “又被陈思诚骗了”

    作者|张思齐 出品|众面(ID:ZhongMian_ZM)如今的国产悬疑电影,成了陈思诚的天下。最近大爆电影《消失的她》票房突破30亿断层夺魁暑期档,陈思诚再度风头无两。你可以说陈思诚的
  • iQOO 11S屏幕细节公布:首发三星2K E6全感屏 安卓最好的直屏手机

    iQOO 11S屏幕细节公布:首发三星2K E6全感屏 安卓最好的直屏手机

    日前iQOO手机官方宣布,新一代电竞旗舰iQOO 11S将会在7月4日19:00正式与大家见面。随着发布时间的日益临近,官方关于该机的预热也更加密集,截至目前已
Top