当前位置: 首页 > 编程日记 > 正文

【C++】Google Protocol Buffer(protobuf)详解(一)

1、简介

Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准,
Protocol Buffers 是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或 RPC 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Python 三种语言的 API。

源码下载:

github地址 : https://github.com/protocolbuffers/protobuf 

编译:

tar zxvf protobuf*.tar.gz
cd protobuf*/ 
./configure –prefix=/usr/local/protobuf
make 
make check 
make install 
protoc –version

参考博客:
https://www.ibm.com/developerworks/cn/linux/l-cn-gpb/index.html
https://www.cnblogs.com/tohxyblog/p/8974763.html
https://blog.csdn.net/u014308482/article/details/52958148

2、ProtoBuf协议说明

proto文件定义了协议数据中的实体结构(message ,field)

关键字message: 代表了实体结构,由多个消息字段(field)组成。
消息字段(field): 包括数据类型、字段名、字段规则、字段唯一标识、默认值
字段规则:

required:必须初始化字段,如果没有赋值,在数据序列化时会抛出异常
optional:可选字段,可以不必初始化。
repeated:数据可以重复(相当于java 中的Array或List)

字段唯一标识:序列化和反序列化将会使用到。
数据类型:
在这里插入图片描述

3、ProtoBuf的使用流程
1> 定义.proto文件

网上都有如下的例子说明,皆出自IBM的学习社区:https://www.ibm.com/developerworks/cn/linux/l-cn-gpb/index.html
proto文件:first.proto

package lm; 
message helloworld 
{ required int32     id = 1;  // ID required string    str = 2;  // str optional int32     opt = 3;  //optional field 
}
2> 生成*.pb.cc 和 *.pb.h

protoc命令格式:protoc -I=<proto文件所在路径> --cpp_out=<输出路径> proto文件名
如:protoc -I=. --cpp_out=. first.proto
将会生成:first.pb.cc first.pb.h

3> 序列化操作

将helloworld结构 序列化到文件log中:firstWrite.cpp

#include "first.pb.h"
#include <string>
#include <fstream>
#include <iostream>
using namespace std;
int main(void) 
{ lm::helloworld msg1; msg1.set_id(101); msg1.set_str("hello");fstream output("./log", ios::out | ios::trunc | ios::binary);if (!msg1.SerializeToOstream(&output)) {cout << "Failed to write msg." << endl;return -1;}return 0;
}

编译时需要链接protobuf库,并且使用first.pb.cc一起编译:
g++ firstWrite.cpp first.pb.cc -lprotobuf

4> 反序列化操作

从文件中,读取到helloworld结构中: firstRead.cpp

#include "first.pb.h"
#include <string>
#include <fstream>
#include <iostream>using namespace std;int main(void) 
{ lm::helloworld msg; msg.set_id(101); msg.set_str("hello");fstream input("./log", ios::in | ios::binary);if (!msg.ParseFromIstream(&input)) {cout << "Failed to parse address book." << endl;return -1;}cout << msg.id() << endl;cout << msg.str() << endl;return 0;
}

编译时需要链接protobuf库,并且使用first.pb.cc一起编译:
g++ firstRead.cpp first.pb.cc -lprotobuf

5> cmake编译CMakeLists.txt(注意修改cmake版本)
cmake_minimum_required(VERSION 3.14.1)
project (protobuf_test)set (PROJECT_LINK_LIBS libprotobuf.so) add_executable(firstWrite firstWrite.cpp first.pb.cc)
add_executable(firstRead firstRead.cpp first.pb.cc)target_link_libraries(firstWrite ${PROJECT_LINK_LIBS} )
target_link_libraries(firstRead ${PROJECT_LINK_LIBS} )

相关文章:

python使用difflib对比文件示例

使用difflib模块对比文件内容1 示例&#xff1a;字符串差异对比 vim duibi.py#!/usr/bin/env python # -*- coding: utf-8 -*- import re import os import difflib tex1"""tex1: this is a test for difflib ,just try to get difference of the log 现在试试…

技术大佬们都推荐的vim学习指南来了,值得收藏!

「2019 Python开发者日」全日程揭晓&#xff0c;请扫码咨询 ↑↑↑作者 | kbsc13&#xff0c;京东算法工程师&#xff0c;研究领域计算机视觉来源 | 机器学习与计算机视觉&#xff08;ID&#xff1a;AI_Developer&#xff09;编辑 | Jane【导语】在 Linux 下最常使用的文本编辑…

NoSQl分类

2019独角兽企业重金招聘Python工程师标准>>> http://nosql-database.org/ nosql简单分类 类型 部分代表 特点 列存储 hbase cassandra hypertable 顾名思义&#xff0c;是按列存储数据的。最大的特点是方便存储结构化和半结构化数据&#xff0c;方便做数据压缩&…

手撕代码之七大常用排序算法 | 附完整代码

点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」全日程揭晓&#xff0c;请扫码咨询 ↑↑↑0.导语本节为手撕代码系列之第一弹&#xff0c;主要来手撕排序算法&#xff0c;主要包括以下几大排序算法&#xff1a;直接插入排序冒泡排序选择排序快速排序希尔排序堆排序归并排序…

【C++】google gtest 详解

1、参考博客&#xff1b; https://blog.csdn.net/baijiwei/article/details/81265491 https://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 2、编译和安装 $ git clone https://github.com/google/googletest.git $ cd googletest $ mkdir mybuild $ cd mybui…

JS学习笔记之call、apply的用法

1、call和apply的区别 call和apply唯一的区别是传入参数的形式不同。 apply接受两个参数&#xff0c;第一个参数指定了函数体内this对象的指向&#xff0c;第二个参数为一个带下标的集合&#xff0c;可以是数组&#xff0c;也可以是类数组&#xff0c;apply方法会把集合中的元素…

实验LVS+keepalived

lvs说明:目前有三种IP负载均衡技术&#xff08;VS/NAT、VS/TUN和VS/DR&#xff09;&#xff1b;八种调度算法&#xff08;rr,wrr,lc,wlc,lblc,lblcr,dh,sh&#xff09;。在调度器的实现技术中&#xff0c;IP负载均衡技术是效率最高的。在已有的IP负载均衡技术中有通过网络地址转…

Spark Streaming笔记整理(二):案例、SSC、数据源与自定义Receiver

[TOC] 实时WordCount案例 主要是监听网络端口中的数据&#xff0c;并实时进行wc的计算。 Java版 测试代码如下&#xff1a; package cn.xpleaf.bigdata.spark.java.streaming.p1;import org.apache.log4j.Level; import org.apache.log4j.Logger; import org.apache.spark.Spar…

复旦邱锡鹏教授公布《神经网络与深度学习》,中文免费下载 | 极客头条

点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」&#xff0c;购票请扫码咨询 ↑↑↑整理 | Jane出品 | AI科技大本营优质的人工智能学习资源一直是大家非常关注的&#xff0c;以往我们也推荐过很多优秀的课程、书籍等&#xff0c;不过大多来自国外的名校、名师&#xff0c…

【Qt】信号和槽传递自定义结构体

一、使用信号和槽传递自定义结构体 这是一个老问题了,但是每次使用都要bing,因此做个笔记整理下。 一共有三种方法,可以让结构体在信号和槽之间传递。前两种方法可以让结构体在线程之间传递,最后一种方法只能在同一线程中传递。 Q_DECLARE_METATYPE qRegisterMetaType(推…

Tomcat:Connection reset by peer: socket write error

Connection reset by peer: socket write error错误分析及解决 Connection reset by peer: socket write error错误分析&#xff1a; 常出现的Connection reset by peer: 原因可能是多方面的&#xff0c;不过更常见的原因是&#xff1a; ①&#xff1a;服务器的并发连接数超过…

人脸识别的“生意经”

点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」&#xff0c;购票请扫码咨询 ↑↑↑作者 | Jeff John Roberts译者 | 孙薇责编 | 琥珀出品 | AI科技大本营&#xff08;ID:rgznai100&#xff09;导语&#xff1a;不经意间&#xff0c;科技公司便拿着你的照片&#xff0c;推…

【Qt】pro中使用DEFINES来实现条件编译

1、pro中使用DEFINES来实现条件编译 在Qt的pro文件中使用DEFINES 来实现类似gcc -D的条件编译功能。 如,在pro中: #定义条件编译宏LAOER DEFINES += LAOER #依赖编译宏LAOER的编译选项: contains(DEFINES, LAOER){message(hello Laoer) } #与编译宏LAOER冲突的编译选项: …

nodejs -- promise的返回

为什么80%的码农都做不了架构师&#xff1f;>>> [javascript] view plain copy const a async () > { return Sequelize.findAll({}) //这里返回一个promise&#xff0c;"aaaaa"也行 } const b async ()>{ const result await a…

SQL 将一列数据转为一行字符串[转]

比如&#xff1a;我用select department,userName from users从表中查询出如下数据department | userName--------------- --------------it it1it it2it it3ur ur1ur ur2我能不能用什么SQL对department进行分组然后变成如下的结果呢&#xff1f;department | userName--------…

【C++】C++11的enum class enum struct和enum

1、问题描述 在走读QtCreator中看到一段代码 在QtCreator-v4.9.2源码中 src\plugins\projectexplorer\projectnodes.h enum class NodeType : quint16 {File 1,Folder,VirtualFolder,Project };以前一直使用enum&#xff0c;这里使用的是enum class&#xff0c;新enum的好处…

浙大首届AI专业本科生将于9月入学,纳入竺院图灵班

点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」&#xff0c;购票请扫码咨询 ↑↑↑整理 | 琥珀出品 | AI科技大本营&#xff08;ID:rgznai100&#xff09;近日&#xff0c;据澎湃新闻报道&#xff0c;浙江大学计算机科学与技术学院副院长、浙江大学人工智能研究所所长吴飞…

解决阿里云无法正常使用samba的问题【转】

转自&#xff1a;https://blog.csdn.net/u011949148/article/details/54311288 昨天在阿里云上申请了一个云服务器&#xff0c;系统用的是ubuntu14.04&#xff0c;由于是免费的&#xff08;初次使用&#xff09;&#xff0c;配置较低&#xff08;单核1G内存&#xff0c;40G硬盘…

Google又放大招:高效实时实现视频目标检测 | 技术头条

点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」&#xff0c;购票请扫码咨询 ↑↑↑作者 | 陈泰红&#xff0c;算法工程师&#xff0c;研究方向为机器学习、图像处理来源 | 极市平台&#xff08;ID&#xff1a;extrememart&#xff09;图像目标检测是图像处理领域的基础。…

一个java删除文件夹的小方法

java删除文件夹都是从里向外删除&#xff0c;使用递归的方法。public class IO_FILEdemo09 {public static void main(String[] args) {// TODO Auto-generated method stub// 删除目录演示File dir new File("C:\\version1");DeleteAll(dir);}public static void D…

【C++】operator bool() 和 operator const bool() const

1、问题描述 在走读QtCreator源码时&#xff0c;看到如下运算符重载 源码在QtCreator-v4.9.2中 src\plugins\projectexplorer\projectexplorer.h class OpenProjectResult { public:OpenProjectResult(const QList<Project *> &projects, const QList<Project *…

tomcat高并发的配置

以下内容来源于互联网&#xff0c;具体出处不详 据说服务器运行TOMCATJDK环境能负载到动态1W的并发&#xff0c;贴上他的配置&#xff0c;以后有机会在测试&#xff01; java 环境配置&#xff1a; export JAVA_OPTS"-server -Xms8g -Xmx8g -Xss128k -XX:ParallelGCThread…

【AI】图示:精确度(查准率)Precision、召回率(查全率)Recall

对Precision、Recall的直译是“精确度”和“召回率”&#xff0c;第一次接触这两个词&#xff0c;很难从字面上知道它们的含义。而翻译成“查准率”和“查全率”就比较好理解&#xff0c;下面统一使用“查准率”和“查全率”。 1、真假正负例 真正例&#xff08;True Positive…

@程序员,如何“终身成长”与跨界?

文 / Ant说《终身成长》是一碗“鸡汤”并不为过&#xff0c;截止到我看过的前半部分&#xff0c;围绕在一个主题展开——人的潜力是不可知的。换句话说&#xff0c;任何人都有可能成为自己想成为的人。书中列举了大量明星企业与管理者的真实案例&#xff0c;也引用了许多对比实…

TCP通过滑动窗口和拥塞窗口实现限流,能抵御ddos攻击吗

tcp可以通过滑动窗口和拥塞算法实现流量控制&#xff0c;限制上行和下行的流量&#xff0c;但是却不能抵御ddos攻击。 限流只是限制访问流量的大小&#xff0c;是无法区分正常流量和异常攻击流量的。 限流可以控制本软件或者应用的流量大小&#xff0c;从而减少对部署在相同物理…

WPF及Silverlight中将DataGrid数据导出

这段源码是我在项目中实际应用的源码&#xff0c;没有经过删减及处理。 如果你认为有用可以摘去作为自己的导出类中的一个小工具使用。 ///<summary>///数据源导出辅助类 ///</summary>///<remarks>///Author: sucsy ///Create date: 2011-…

首发 | 驭势科技推出“东风网络”:如何找到速度-精度的最优解?| 技术头条...

点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」全日程揭晓&#xff0c;请扫码咨询 ↑↑↑作者 | 驭势科技给定目标硬件&#xff0c;如何确定最优的速度-精度折衷边界&#xff1f;换言之&#xff1a;给定推断延时的限制&#xff0c;模型能达到的最高精度是多少&#xff1f…

【AI】caffe使用步骤(一):将标注数据生成lmdb或leveldb

1、简述 caffe使用工具 convert_imageset 将标注数据转换成lmdb或leveldb格式&#xff0c;convert_imageset 使用方法可以参考脚本examples/imagenet/create_imagenet.sh。 convert_imageset 在./build/tools/中。 2、convert_imageset命令行参数 ./build/tools/convert_ima…

日本的GMO增加了比特币现金,和另外3种用于贷款项目的加密货币

2019独角兽企业重金招聘Python工程师标准>>> 日本的加密货币交易所 GMO正在不断地向其贷款项目中增加更多的货币&#xff0c;这使得它的客户可以将加密货币借给公司。最初&#xff0c;该项目是为BTC启动的&#xff0c;但现在GMO已经走得更远&#xff0c;并添加了比特…

功能演示:戴尔PowerConnect 8024交换机VLAN的创建与删除

戴尔PowerConnect 8024是一款带24个10 Gb以太网10GBASE-T端口的高密度10 Gb以太网交换机&#xff0c;专为具有高吞吐量和高可用性需求的数据中心、聚合和统一结构部署而设计。 这些高密度10 Gb交换机可用于汇聚型以太网环境&#xff0c;支持密集型虚拟化、iSCSI存储和10 Gb流量…