【通信框架】Google的开源通信框架protobuf概述
在阅读的过程中有不论什么问题,欢迎一起交流
QQ:1494713801
一、作用
protobuf(Protocol Buffers)是Google内部使用的一个项目,后来贡献给开源社区为大家使用。它要做的事情和xml类似。就是要把某种数据结构的信息有某种格式保存起来,主要用于数据存储、传输协议格式等场合。
二、长处
和xml有着类似的功能。那么肯定有一些更加优势的地方。
1、时间开销
xml格式化(序列化)的开销还能够,可是xml解析(反序列化)的开销较大。相比protobuf的时间开销要小一些;
2、空间开销
为了提高可读性xml中引入了一些冗余的文本信息,空间开销加大。相比protobuf的空间开销要小一些;
3、开发调用简单
仅仅需使用message定义消息结构。在发送方使用set方法发送消息,在接收方使用调用方法接收消息就可以。
省去了xml配置、编译和解析的过程。
比方:
有个电子商务的系统(如果用C++实现),当中的模块A须要发送大量的订单信息给模块B,通讯的方式使用socket。
如果订单包含例如以下属性:
--------------------------------
时间:time(用整数表示)
客户id:userid(用整数表示)
交易金额:price(用浮点数表示)
交易的描写叙述:desc(用字符串表示)
--------------------------------
假设使用protobuf实现。首先要写一个proto文件(最好还是叫Order.proto),在该文件里加入一个名为"Order"的message结构。用来描写叙述通讯协议中的结构化数据。该文件的内容大致例如以下:
--------------------------------
message Order
{
required int32 time = 1;
required int32 userid = 2;
required float price = 3;
optional string desc = 4;
}
--------------------------------
然后,使用protobuf内置的编译器编译 该proto。因为本样例的模块是C++。你能够通过protobuf编译器的命令行參数(看“这里
”),指定它生成C++语言的“订单包装类”。
(一般来说,一个message结构会生成一个包装类)
然后你使用类似以下的代码来序列化/解析该订单包装类:
--------------------------------
// 发送方
Order order;
order.set_time(XXXX);
order.set_userid(123);
order.set_price(100.0f);
order.set_desc("a test order");
string sOrder;
order.SerailzeToString(&sOrder);
// 然后调用某种socket的通讯库把序列化之后的字符串发送出去
// ......
--------------------------------
// 接收方
string sOrder;
// 先通过网络通讯库接收到数据。存放到某字符串sOrder
// ......
Order order;
if(order.ParseFromString(sOrder)) // 解析该字符串
{
cout << "userid:" << order.userid() << endl
<< "desc:" << order.desc() << endl;
}
else
{
cerr << "parse error!" << endl;
}
--------------------------------
4、代码灵活,减少模块间的耦合性
A和B两个模块相互通信。当当中一个模块或消息格式发生改变时,仅仅需修改一点代码就可以。
5、支持多种编程语言
Google公布的源代码中包含C++、Java、Python三种语言。如今能够支持ActionScript、C#、Lisp、Erlang、Perl、PHP、Ruby等。并且Protobuf支持通信的两方使用不同的语言开发。
三、缺点
1、代码可读性差
Protobuf使用二进制格式进行编码,假设通信两方有一方出现了问题,二进制的消息非常难被读懂,非常难对错误定位。
尽管Protobuf提供了TextFormat工具类,可是也不能彻底解决这个问题。未解决这个问题能够直接抓包并dump成log以定位错误。
2、缺乏自描写叙述
没有自描写叙述信息,二进制的格式非常难被看懂,需配合Proto文件。
四、Protobuf的使用及实例
1 下载安装
(1)下载
须要两个包。protobuf-2.5.0.tar.gz,protoc-2.5.0-win32.zip。
本来能够到https://code.google.com/p/protobuf/downloads/list下载。只是被墙了。
能够移步到这里下载:http://download.csdn.net/detail/erli11/7408633
下载同样版本号供java使用的protobuf-java-2.5.0.jar:
http://repo1.maven.org/maven2/com/google/protobuf/protobuf-java/2.5.0/protobuf-java-2.5.0.jar
2demo展示
(1)创建proto文件
在protoc-2.5.0-win32文件夹(包括protoc.ext可运行文件),创建msg.proto
- package discover;
- option java_package = "com.sg.discover";
- option java_outer_classname = "SocialRecommend";
- message RecommendInfo {
- optional string hid = 1;
- optional string tags = 2;
- repeated TopicInfo topicList = 3;
- }
- message TopicInfo {
- optional string name = 1;
- optional string type = 2;
- repeated string entities = 3;
- repeated string tags = 4;
- }
(2)使用例如以下命令编译proto文件。生成相应Java代码
注:编译成功无消息输出。会产生文件。
./ 与 msg.proto中间有空格
(3)序列化
- private SocialRecommend.RecommendInfo transRecommendInfoToPB(RecommendBean recommendInfo) {
- SocialRecommend.RecommendInfo.Builder builder =
- SocialRecommend.RecommendInfo.newBuilder();
- builder.setHid(recommendInfo.hid);
- builder.setTags(recommendInfo.tags);
- for(int i = 0; i< recommendInfo.topicList.size(); i++){
- TopicInfo topicInfo = recommendInfo.topicList.get(i);
- SocialRecommend.TopicInfo kvTopic = trasnTopicInfoToPB(topicInfo);
- builder.addTopicList(kvTopic);
- }
- return builder.build();
- }
- byte[] pbByteArray = pb.toByteArray();
(4)反序列化
- SocialRecommend.RecommendInfo msg = SocialRecommend.RecommendInfo.parseFrom(pbByteArray);
- System.out.println(msg);
參考http://blog.csdn.net/program_think/article/details/4229773
【通信框架】Google的开源通信框架protobuf概述的更多相关文章
- C++测试利器--google test开源测试框架
资料 偶然发现了google的测试框架gtest,马上试了下,效果挺不错,特别是对于写c++的人来说,方便很多.以前自己写c++的模块,通常是写好了模块后再另外定义些函数,然后在函数里面写测试用例来测 ...
- [转]玩转Google开源C++单元测试框架Google Test系列
gtest的官方网站是: http://code.google.com/p/googletest/ 从官方的使用文档里,你几乎可以获得你想要的所有东西 http://code.google.com/p ...
- 转:玩转Google开源C++单元测试框架Google Test系列
转自http://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Google的开源C++单元测试框架Google ...
- 玩转Google开源C++单元测试框架Google Test系列(转载)
越来越多公司采用敏捷开发,单元和回归测试越来越重要,GTest作为最佳C++单元测试工具越来越多的被使用.转自 http://www.cnblogs.com/coderzh/archive/2009/ ...
- Google的开源C++单元测试框架Google Test
玩转Google开源C++单元测试框架Google Test系列(gtest)(总) 前段时间学习和了解了下Google的开源C++单元测试框架Google Test,简称gtest,非常的不错. 我 ...
- 玩转Google开源C++单元测试框架Google Test系列(gtest)(转)
转自:http://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Google的开源C++单元测试框架Googl ...
- Google开源C++单元测试框架Google Test
1.玩转Google开源C++单元测试框架Google Test系列(gtest)之一 - 初识gtest 2.玩转Google开源C++单元测试框架Google Test系列(gtest)之二 - ...
- 玩转Google开源C++单元测试框架Google Test系列(gtest)(总)
原文地址:http://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Google的开源C++单元测试框架Goo ...
- [转]玩转Google开源C++单元测试框架Google Test系列(gtest)(总)
文章转载自CoderZh的技术博客 地址:https://www.cnblogs.com/coderzh/archive/2009/04/06/1426755.html 前段时间学习和了解了下Goog ...
随机推荐
- shell 脚本 helloworld
一.Hello World 脚本代码 #!/bin/sh echo "hello world" /bin/pwd 二.分析脚本 第 1 行:shell 脚本的固定写法 第 2 行: ...
- TCP的可靠传输(依赖流量控制、拥塞控制、连续ARQ)
TCP可靠性表现在它向应用层提供的数据是无差错,有序,无丢失,即递交的和发送的数据是一样的. 可靠性依赖于流量控制.拥塞控制.连续ARQ等技术 <TCP/IP详解>中的“分组”是不是就是报 ...
- C/C++ Quick Sort Algorithm
本系列文章由 @YhL_Leo 出品,转载请注明出处. 文章链接: http://blog.csdn.net/yhl_leo/article/details/50255069 快速排序算法,由C.A. ...
- WinServer-IIS-SEO优化
来自为知笔记(Wiz)
- HDU 1023
卡特兰数.把进栈看成是+1,出栈看成是-1,任何时候部分和都有a1+a2+....ak>=0.求这样的数列的个数.这明显是卡特兰数的一个解释嘛.在<组合数学>这本书就有这样的原本的证 ...
- atitit。企业组织与软件project的策略 战略 趋势 原则 attilax 大总结
atitit. 企业组织与软件project的策略 战略 趋势 原则 attilax 大总结 1. 战略规划,适当的过度设计 1 2. 跨平台化 1 3. 可扩展性高于一切 1 4. 界面html5化 ...
- leetcode第一刷_Add Binary
二进制相加,本质上就是大整数加法,有关大整数加法我的舍友教过我一个非常好的方法,先用一个int数组保存结果,将两个数相应位置相加,所有加完后.再统一处理进位的问题.这种方法相同适用于大整数的乘法. 这 ...
- GCC 优化选项 -O1 -O2 -O3 -OS 优先级,-FOMIT-FRAME-POINTER(O3的优化很小,只增加了几条优化而已)
四种编译优化类型的解释: `-O ' `-O1 ' Optimize. Optimizing compilation takes somewhat ...
- Ubuntu下gcc安装
在Ubuntu下安装GCC和其他一些Linux系统有点不一样. 方法一: 该方法超简单:sudo apt-get build-depgcc 就上面这条命令就可以搞定 方法二:sudo apt-get ...
- P3369 【模板】普通平衡树(Treap/SBT)(pb_ds版)
题目描述 您需要写一种数据结构(可参考题目标题),来维护一些数,其中需要提供以下操作: 插入x数 删除x数(若有多个相同的数,因只删除一个) 查询x数的排名(若有多个相同的数,因输出最小的排名) 查询 ...