爆款云主机2核4G限时秒杀,88元/年起!
查看详情

活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
热门活动
  • 618智算钜惠季 爆款云主机2核4G限时秒杀,88元/年起!
  • 免费体验DeepSeek,上天翼云息壤 NEW 新老用户均可免费体验2500万Tokens,限时两周
  • 云上钜惠 HOT 爆款云主机全场特惠,更有万元锦鲤券等你来领!
  • 算力套餐 HOT 让算力触手可及
  • 天翼云脑AOne NEW 连接、保护、办公,All-in-One!
  • 中小企业应用上云专场 产品组合下单即享折上9折起,助力企业快速上云
  • 息壤高校钜惠活动 NEW 天翼云息壤杯高校AI大赛,数款产品享受线上订购超值特惠
  • 天翼云电脑专场 HOT 移动办公新选择,爆款4核8G畅享1年3.5折起,快来抢购!
  • 天翼云奖励推广计划 加入成为云推官,推荐新用户注册下单得现金奖励
免费活动
  • 免费试用中心 HOT 多款云产品免费试用,快来开启云上之旅
  • 天翼云用户体验官 NEW 您的洞察,重塑科技边界

智算服务

打造统一的产品能力,实现算网调度、训练推理、技术架构、资源管理一体化智算服务
智算云(DeepSeek专区)
科研助手
  • 算力商城
  • 应用商城
  • 开发机
  • 并行计算
算力互联调度平台
  • 应用市场
  • 算力市场
  • 算力调度推荐
一站式智算服务平台
  • 模型广场
  • 体验中心
  • 服务接入
智算一体机
  • 智算一体机
大模型
  • DeepSeek-R1-昇腾版(671B)
  • DeepSeek-R1-英伟达版(671B)
  • DeepSeek-V3-昇腾版(671B)
  • DeepSeek-R1-Distill-Llama-70B
  • DeepSeek-R1-Distill-Qwen-32B
  • Qwen2-72B-Instruct
  • StableDiffusion-V2.1
  • TeleChat-12B

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务
进入甄选商城进入云市场创新解决方案
办公协同
  • WPS云文档
  • 安全邮箱
  • EMM手机管家
  • 智能商业平台
财务管理
  • 工资条
  • 税务风控云
企业应用
  • 翼信息化运维服务
  • 翼视频云归档解决方案
工业能源
  • 智慧工厂_生产流程管理解决方案
  • 智慧工地
建站工具
  • SSL证书
  • 新域名服务
网络工具
  • 翼云加速
灾备迁移
  • 云管家2.0
  • 翼备份
资源管理
  • 全栈混合云敏捷版(软件)
  • 全栈混合云敏捷版(一体机)
行业应用
  • 翼电子教室
  • 翼智慧显示一体化解决方案

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云服务合作伙伴
  • 天翼云集成商交付能力认证
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴
  • 天翼云甄选商城合作伙伴
天翼云技术合作伙伴
  • 天翼云OpenAPI中心
  • 天翼云EasyCoding平台
天翼云培训认证
  • 天翼云学堂
  • 天翼云市场商学院
天翼云合作计划
  • 云汇计划
天翼云东升计划
  • 适配中心
  • 东升计划
  • 适配互认证

开发者

开发者相关功能入口汇聚
技术社区
  • 专栏文章
  • 互动问答
  • 技术视频
资源与工具
  • OpenAPI中心
开放能力
  • EasyCoding敏捷开发平台
培训与认证
  • 天翼云学堂
  • 天翼云认证
魔乐社区
  • 魔乐社区

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • 文档中心
  • 新手上云
  • 自助服务
  • OpenAPI中心
定价
  • 价格计算器
  • 定价策略
基础服务
  • 售前咨询
  • 在线支持
  • 在线支持
  • 工单服务
  • 建议与反馈
  • 用户体验官
  • 服务保障
  • 客户公告
  • 会员中心
增值服务
  • 红心服务
  • 首保服务
  • 客户支持计划
  • 专家技术服务
  • 备案管家

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云
  • 智算云
  • 天翼云4.0
  • 新闻资讯
  • 天翼云APP
基础设施
  • 全球基础设施
  • 信任中心
最佳实践
  • 精选案例
  • 超级探访
  • 云杂志
  • 分析师和白皮书
  • 天翼云·创新直播间
市场活动
  • 2025智能云生态大会
  • 2024智算云生态大会
  • 2023云生态大会
  • 2022云生态大会
  • 天翼云中国行
天翼云
  • 活动
  • 智算服务
  • 产品
  • 解决方案
  • 应用商城
  • 合作伙伴
  • 开发者
  • 支持与服务
  • 了解天翼云
      • 文档
      • 控制中心
      • 备案
      • 管理中心

      Protocol Buffer详解

      首页 知识中心 数据库 文章详情页

      Protocol Buffer详解

      2024-12-05 08:49:57 阅读次数:25

      field,num,proto,type,字段

      Protocol Buffer

      特点:

      • 原始内存中的数据结构可以二进制形式发送/保存,那么接收端要和发送端的内存模型、字节序等待保持一致。且扩展性不好。

      • XML:XML占用大量空间,对它进行编码/解码会给应用程序带来巨大的性能损失。 Also, navigating an XML DOM tree is considerably more complicated than navigating simple fields in a class normally would be

      • 容易扩展,使得兼容之前的版本。但是在修改.proto文件时需要满足几个条件

        • 不能修改现存字段的 field_num
        • 不能添加或者删除任何 **required**字段
        • 能删除 optional 和 repeated 字段
        • 能新增 optional 和 repeated 字段,但是这些新的字段的 field_num 必须是新的。(不仅不能是当前使用的field_num,而且还不能是已经删除的字段的 field_num)。

        如果满足这些条件,那么就能轻松的实现版本之间的兼容性。对于旧版本的代码,旧的版本会忽略掉新增的字段,而被删除的 optional 字段就会直接使用其默认值,被删除的 repeated 字段就为空,一个元素也没有。

        因为新增的 optional 字段并不会出现在旧版本中,因此要么用 has_xxx函数显示地检测这些增加的 optional 字段是否设置了,或者为这些字段在 field_num 之后提供一个合理的默认值 [default = value]。当然,没有人为设置一个默认值,那么就会使用系统的默认值.

        类型 系统默认值
        string “”
        bool false
        numeric 0

      Synax

      Style Guide

      为了方便阅读.proto,书写 .proto 时应遵守的习惯。下面是一些常用的习惯。

      Standard file formatting
      • 每行的字符个数最多80个
      • 缩进为2个字符
      File structure

      .proto文件名应该保持为 lower_snake_case.proto 格式。而 .proto文件里应该按照以下格式有序排列:

      1. License header (if applicable)
      2. File overview
      3. Syntax
      4. Package
      5. Imports (sorted)
      6. File options
      7. Everything else
      Message and field names

      使用驼峰的命名方式来命名 message 名,比如 SongServerRequest。对于message的每个字段命名方式使用 下划线_ 分割,比如 song_name 。

      message SongServerRequest {
      	required String song_name = 1;
      }
      

      在C++下,最后的使用如下:

        const string& song_name() { ... }
        void set_song_name(const string& x) { ... }
      

      如果在字段的命名中出现数字,格式为:song_name1,而不是song_name_1

      Repeated fields

      对于有 Repeated 修饰的字段,应该使得每个字段的复数形式来命名。

        repeated string keys = 1;			 // key --> keys
        ...
        repeated MyMessage accounts = 17;	 // account --> accounts
      
      Enums

      枚举名使用驼峰的方式,每个枚举值使用的是 ENUMNAME_VALUE格式:

      enum Foo {
        FOO_UNSPECIFIED = 0;
        FOO_FIRST_VALUE = 1;
        FOO_SECOND_VALUE = 2;
      }
      
      Services

      如果 .proto 提供的是一个 RPC 服务, 使用驼峰命名方式来命名服务名和方法名。

      service FooService {
        rpc GetSomething(FooRequest) returns (FooResponse);
      }
      

      Encoding

      这个文档,描述的是 protocol buffer 的二进制生成格式。了解这个能让我们更好书写*.proto ,使得生产的代码更小。

      每个字段

      Message Structure

      message 就是一些键值对的组合,message 的二进制流中使用的每个字段的 number来作为键。而每个字段的“name”和声明的“类型”只有在解码端通过引用消息类型的定义来确定。(??? 函数)

      Type Meaning Used For
      0 Varint int32, int64, uint32, uint64, sint32, sint64, bool, enum
      1 64-int fixed64, sfixed64, double
      2 Length-delimited string, bytes, embedded messages, packed repeated fields
      3 Start group groups (deprecated)
      4 End group groups (deprecated)
      5 32-bit ixed32, sfixed32, float

      Message 的每个键值对的值都是由:filed_num <<3 | wire_type 得到的,也因此 field_num 不能重复。

      Signed Integers

      在 Protocol buffer 中 wire type 是0的都是被编码为 varints ,但是在 protobuff 中的有符号类型 (sint and sint64) 和 标准的 int 类型(int32 and int64)在负数的编码方式上有很大的差异。

      • 如果负数类型是 int32 or int64 ,结果是 varint 就将总是 10个字节长度。而实际上,这个负数是被当一个极大的无符号数来处理的。
      • 如果负数类型是 sint or sint64 ,得到的 varint 就将会使用 **ZigZag**的编码方式,更加有效。

      ZigZag 编码方式是将有符号数映射到无符号数, 这样就能使绝对值较小的数字(例如-1)也有一个较小的varint编码值。
      [ − 2 31 , 2 31 − 1 ] − − > [ 0 , 2 32 − 1 ] [-2^{31}, 2^{31}-1] --> [0, 2^{32}-1] [−231,231−1]−−>[0,232−1]
      一个有符号数的正负数个数是等于无符号的个数,因此可以完成映射。而映射的方式如下:

      Signed Original Encoded As
      0 0
      -1 1
      1 2
      -2 3
      2 4
      2147483647 4294967294
      -2147483648 4294967295

      编码方式如下:

      sint32:

      (n <<1) ^ (n >>31); // n 是正数,n >> 31 得到的是0;否则得到的全是 1
      

      sint64

      (n <<1) ^ (n >>63)
      
      Non-varint Number

      Non-varint 类型的数字比较简单,它可以肯定的告诉解析器需要32/64位的内存大小,此时是用小端序存储的。

      • 32位:对应的 wire type: 5
      • 64位:对应的 wire type: 1
      Strings

      wire type: 2。这个类型 前面是 varint 编码的长度,后跟指定数量的数据字节。

      message Test2 {
      	optional string b = 2;
      }
      

      比如,如果b的值是“ testing”,将会得到如下的二进制格式:

      12 07 74 65 73 74 69 6e 67
      
      • key: 12。12 是如下解码的:前面的五位是 field_num=2,最后三位是 *** wire_type***=2

        0001 0010 --> 000010 010 
        
      • testing 的长度: 07

      • testing的表示:74 65 73 74 69 6e 67

      Service

      Protocol Buffer C++

      编译

      编译格式如下,最后生成的是 .proto文件名的.pb.h和.

      protoc --proto_path=src --cpp_out=build/gen src/foo.proto src/bar/baz.proto
      
      版权声明:本文内容来自第三方投稿或授权转载,原文地址:https://lennlouis.blog.csdn.net/article/details/141337205,作者:小狮子安度因,版权归原作者所有。本网站转在其作品的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如因作品内容、版权等问题需要同本网站联系,请发邮件至ctyunbbs@chinatelecom.cn沟通。

      上一篇:flinksql 采集mysql 并行度

      下一篇:MySQL复习-高级查询

      相关文章

      2025-05-16 09:15:24

      Redis Hash哈希

      Redis Hash哈希

      2025-05-16 09:15:24
      field , hash , Redis , value , 哈希
      2025-05-14 10:33:25

      30天拿下Rust之高级类型

      Rust作为一门系统编程语言,以其独特的内存管理方式和强大的类型系统著称。其中,高级类型的应用,为Rust的开发者提供了丰富的编程工具和手段,使得开发者可以更加灵活和高效地进行编程。

      2025-05-14 10:33:25
      Rust , type , 代码 , 函数 , 类型 , 返回
      2025-05-14 10:02:58

      30天拿下Rust之结构体

      在Rust语言中,结构体是一种用户自定义的数据类型,它允许你将多个相关的值组合成一个单一的类型。结构体是一种复合数据类型,可以用来封装多个不同类型的字段,这些字段可以是基本数据类型、其他结构体、枚举类型等。通过使用结构体,你可以创建更复杂的数据结构,并定义它们的行为。

      2025-05-14 10:02:58
      Rust , 使用 , 字段 , 实例 , 方法 , 示例 , 结构
      2025-05-14 09:51:21

      grpc学习golang版( 三、proto文件数据类型 )

      grpc学习golang版( 三、proto文件数据类型 )

      2025-05-14 09:51:21
      proto , 字节 , 对应 , 示例 , 类型 , 编码
      2025-05-13 09:53:23

      java动态获取实体类的字段

      在Java中,我们可以使用反射(Reflection)API来动态地获取实体类的字段。

      2025-05-13 09:53:23
      API , Java , 使用 , 字段 , 实体类 , 方法 , 获取
      2025-05-13 09:51:29

      ogg目标端表比源端多一个字段的同步测试

      ogg目标端表比源端多一个字段的同步测试

      2025-05-13 09:51:29
      ogg , 同步 , 字段 , 测试
      2025-05-09 08:50:35

      数据库实训复习(1)

      数据库实训复习(1)

      2025-05-09 08:50:35
      字段 , 字段名 , 数据 , 数据库 , 添加 , 表中 , 表名
      2025-05-07 09:10:01

      MySQL—函数—日期函数(基础)

      MySQL—函数—日期函数(基础)

      2025-05-07 09:10:01
      date , type , 函数 , 天数 , 当前 , 日期 , 时间
      2025-04-23 08:18:38

      SQL—DQL(数据查询语言)之小结

      SQL—DQL(数据查询语言)之小结

      2025-04-23 08:18:38
      分组 , 列表 , 字段 , 排序 , 条件 , 查询
      2025-04-23 08:18:38

      基础—SQL—DQL(数据查询语言)排序查询

      排序查询这里面涉及的关键字:ORDER BY。在我们日常的开发中,这个是很常见的,比如打开一个网购的商城,这里面可以找到一个销量的排序、综合的排序、价格的排序(升序、降序)等等。

      2025-04-23 08:18:38
      升序 , 员工 , 字段 , 排序 , 查询
      查看更多
      推荐标签

      作者介绍

      天翼云小翼
      天翼云用户

      文章

      33561

      阅读量

      5231302

      查看更多

      最新文章

      30天拿下Rust之结构体

      2025-05-14 10:02:58

      数据库实训复习(1)

      2025-05-09 08:50:35

      MySQL—函数—日期函数(基础)

      2025-05-07 09:10:01

      【Hive】常用的数据类型

      2025-04-22 09:40:08

      MySQL第二讲·表的创建与修改

      2025-04-22 09:27:17

      基础—SQL—DDL—建表、查表、修改表以及总结

      2025-04-18 08:02:09

      查看更多

      热门文章

      Mysql 使用【information_schema.COLUMNS】批量修改表字段属性

      2023-03-02 10:21:34

      mysql增加删除字段

      2023-03-07 08:57:24

      MySQL数据库(20):联合查询 union

      2023-03-16 07:45:55

      Salesforce之对象和字段

      2023-04-07 06:40:25

      React工作36:字段太长

      2024-09-25 10:13:34

      数栈技术分享:解读MySQL执行计划的type列和extra列

      2023-05-12 07:20:56

      查看更多

      热门标签

      数据库 mysql 字符串 数据结构 MySQL 算法 redis oracle java sql python 数据 索引 SQL 查询
      查看更多

      相关产品

      弹性云主机

      随时自助获取、弹性伸缩的云服务器资源

      天翼云电脑(公众版)

      便捷、安全、高效的云电脑服务

      对象存储

      高品质、低成本的云上存储服务

      云硬盘

      为云上计算资源提供持久性块存储

      查看更多

      随机文章

      数栈技术分享:解读MySQL执行计划的type列和extra列

      【MySQL】MySQL表的基本操作入门指南

      SQL 语法

      如何找到某个 ABAP structure 某字段的源头来自哪个数据库表

      Oracle集合类型

      Service层获取HttpServletRequest request

      • 7*24小时售后
      • 无忧退款
      • 免费备案
      • 专家服务
      售前咨询热线
      400-810-9889转1
      关注天翼云
      • 旗舰店
      • 天翼云APP
      • 天翼云微信公众号
      服务与支持
      • 备案中心
      • 售前咨询
      • 智能客服
      • 自助服务
      • 工单管理
      • 客户公告
      • 涉诈举报
      账户管理
      • 管理中心
      • 订单管理
      • 余额管理
      • 发票管理
      • 充值汇款
      • 续费管理
      快速入口
      • 天翼云旗舰店
      • 文档中心
      • 最新活动
      • 免费试用
      • 信任中心
      • 天翼云学堂
      云网生态
      • 甄选商城
      • 渠道合作
      • 云市场合作
      了解天翼云
      • 关于天翼云
      • 天翼云APP
      • 服务案例
      • 新闻资讯
      • 联系我们
      热门产品
      • 云电脑
      • 弹性云主机
      • 云电脑政企版
      • 天翼云手机
      • 云数据库
      • 对象存储
      • 云硬盘
      • Web应用防火墙
      • 服务器安全卫士
      • CDN加速
      热门推荐
      • 云服务备份
      • 边缘安全加速平台
      • 全站加速
      • 安全加速
      • 云服务器
      • 云主机
      • 智能边缘云
      • 应用编排服务
      • 微服务引擎
      • 共享流量包
      更多推荐
      • web应用防火墙
      • 密钥管理
      • 等保咨询
      • 安全专区
      • 应用运维管理
      • 云日志服务
      • 文档数据库服务
      • 云搜索服务
      • 数据湖探索
      • 数据仓库服务
      友情链接
      • 中国电信集团
      • 189邮箱
      • 天翼企业云盘
      • 天翼云盘
      ©2025 天翼云科技有限公司版权所有 增值电信业务经营许可证A2.B1.B2-20090001
      公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
      • 用户协议
      • 隐私政策
      • 个人信息保护
      • 法律声明
      备案 京公网安备11010802043424号 京ICP备 2021034386号