在項目中使用Protobuf協(xié)議實現(xiàn)數(shù)據(jù)傳輸(一)

簡介

Google Protocol Buffer( 簡稱 Protobuf) 是 Google 公司內(nèi)部的混合語言數(shù)據(jù)標(biāo)準(zhǔn)窃蹋,目前已經(jīng)正在使用的有超過 48,162 種報文格式定義和超過 12,183 個 .proto 文件馆里。他們用于 RPC 系統(tǒng)和持續(xù)數(shù)據(jù)存儲系統(tǒng)始苇。

Protocol Buffers 是一種輕便高效的結(jié)構(gòu)化數(shù)據(jù)存儲格式寓免,可以用于結(jié)構(gòu)化數(shù)據(jù)串行化产喉,或者說序列化努释。它很適合做數(shù)據(jù)存儲或 RPC 數(shù)據(jù)交換格式夹姥。可用于通訊協(xié)議儡陨、數(shù)據(jù)存儲等領(lǐng)域的語言無關(guān)褪子、平臺無關(guān)、可擴展的序列化結(jié)構(gòu)數(shù)據(jù)格式骗村。目前提供了 C++嫌褪、Java、Python 三種語言的 API

Protobuf 的優(yōu)點

Protobuf 有如 XML胚股,不過它更小笼痛、更快、也更簡單琅拌。你可以定義自己的數(shù)據(jù)結(jié)構(gòu)缨伊,然后使用代碼生成器生成的代碼來讀寫這個數(shù)據(jù)結(jié)構(gòu)。你甚至可以在無需重新部署程序的情況下更新數(shù)據(jù)結(jié)構(gòu)进宝。只需使用 Protobuf 對數(shù)據(jù)結(jié)構(gòu)進(jìn)行一次描述刻坊,即可利用各種不同語言或從各種不同數(shù)據(jù)流中對你的結(jié)構(gòu)化數(shù)據(jù)輕松讀寫。

它有一個非常棒的特性即彪,即“向后”兼容性好紧唱,人們不必破壞已部署的、依靠“老”數(shù)據(jù)格式的程序就可以對數(shù)據(jù)結(jié)構(gòu)進(jìn)行升級隶校。這樣您的程序就可以不必?fù)?dān)心因為消息結(jié)構(gòu)的改變而造成的大規(guī)模的代碼重構(gòu)或者遷移的問題漏益。因為添加新的消息中的 field 并不會引起已經(jīng)發(fā)布的程序的任何改變。

Protobuf 語義更清晰深胳,無需類似 XML 解析器的東西(因為 Protobuf 編譯器會將 .proto 文件編譯生成對應(yīng)的數(shù)據(jù)訪問類以對 Protobuf 數(shù)據(jù)進(jìn)行序列化绰疤、反序列化操作)。

使用 Protobuf 無需學(xué)習(xí)復(fù)雜的文檔對象模型舞终,Protobuf 的編程模式比較友好轻庆,簡單易學(xué)癣猾,同時它擁有良好的文檔和示例,對于喜歡簡單事物的人們而言余爆,Protobuf 比其他的技術(shù)更加有吸引力纷宇。具體借鑒網(wǎng)上分享與JSON,XML等比較的測試結(jié)果圖蛾方,具體如下:

序列化數(shù)據(jù)對比

image

bytes字節(jié)數(shù)對比

image

Protobuf 的不足

Protbuf 與 XML 相比也有不足之處像捶。它功能簡單,無法用來表示復(fù)雜的概念桩砰。

XML 已經(jīng)成為多種行業(yè)標(biāo)準(zhǔn)的編寫工具拓春,Protobuf 只是 Google 公司內(nèi)部使用的工具,在通用性上還差很多亚隅。

由于文本并不適合用來描述數(shù)據(jù)結(jié)構(gòu)硼莽,所以 Protobuf 也不適合用來對基于文本的標(biāo)記文檔(如 HTML)建模。另外煮纵,由于 XML 具有某種程度上的自解釋性懂鸵,它可以被人直接讀取編輯,在這一點上 Protobuf 不行行疏,它以二進(jìn)制的方式存儲矾瑰,除非你有 .proto 定義,否則你沒法直接讀出 Protobuf 的任何內(nèi)容

在Android Studio配置google protobuf

在project的build.gradle中配置

buildscript {
repositories {
    jcenter()
    mavenCentral()
}
dependencies {
    classpath 'com.android.tools.build:gradle:2.2.3'
    classpath 'com.google.protobuf:protobuf-gradle-plugin:0.8.0'
}
}

注意 Gradle版本至少是 2.12 并且Java 7隘擎,本例子使用的是2.2.3,protobuf-gradle-plugin使用最新的0.8.0版本凉夯。

在app的build.gradle中配置

頂部添加protobuf插件
apply plugin: 'com.google.protobuf'
android{
...

android結(jié)點增加proto文件位置配置
sourceSets {
    main {
        proto {
            srcDir 'src/main/proto'
            include '**/*.proto'
        }
        java {
            srcDir 'src/main/java'
        }
    }
}
}
添加依賴
dependencies {
...
compile 'com.google.protobuf:protobuf-java:3.1.0'
compile 'com.google.protobuf:protoc:3.1.0'
}
增加protobuf結(jié)點
protobuf {
protoc {
    artifact = 'com.google.protobuf:protoc:3.1.0'
}

generateProtoTasks {
    all().each { task ->
        task.builtins {
            remove java
        }
        task.builtins {
            java {}
            // Add cpp output without any option.
            // DO NOT omit the braces if you want this builtin to be added.
            cpp {}
        }
    }
}

generatedFilesBaseDir = "$projectDir/src/generated"
}

java端配置ProtoBuf

下載Protocol Buffers

官方地址或者maven倉庫中下載即可货葬。

通過.proto文件生成對應(yīng)的.java/.h/.cc等文件

然后cmd cd到該目錄 執(zhí)行protoc.exe --java_out=./ book.proto,此時在這個目錄下回生成BookOuterClass.java文件

在java客戶端
序列化:

BookOuterClass.Book book=BookOuterClass.Book.newBuilder()
            .setId(1)
            .setDesc("codeBook")
            .setName("Prime")
            .build();
        
byte [] value = p.toByteArray()

反序列化:

BookOuterClass.Book book=BookOuterClass.Book.parseFrom(value);

在JAVA中如何使用生成的數(shù)據(jù)模型

protobuf與java type區(qū)分

image

proto描述文件的編寫

例子

//syntax = "proto2";//聲明proto版本,2.0與3.0以后語法差異很大
syntax = "proto3";
option java_package = "com.crf.jason.myapplication";
package bean;
message Book {
//    required int32 id = 1;//Proto 2.0版本征绎,需要聲明requires蹲姐、optional等
//    required string name = 2;
//    optional string desc = 3;
    int32 id = 1;//Proto 3.0版本,不需要聲明requires人柿、optional等
    string name = 2;
    string desc = 3;
}

注意:

  • 頂部必須申明句法的版本號柴墩,如果不申明,則默認(rèn)是2.0的語法凫岖。
  • 下面Message節(jié)里面的字段就是業(yè)務(wù)需要的各個字段了江咳,等號后面的數(shù)字是序號,必須指定哥放。在3.5版本中不用指定required歼指、等關(guān)鍵字了爹土。如果有需要使用2.0版本,具體參數(shù)的含義具體如下:
    • required:一個格式良好的消息一定要含有1個這種字段踩身。表示該值是必須要設(shè)置的胀茵;
    • optional:消息格式中該字段可以有0個或1個值(不超過1個)
    • repeated:在一個格式良好的消息中砂客,這種字段可以重復(fù)任意多次(包括0次)正罢。重復(fù)的值的順序會被保留。表示該值可以重復(fù)择同,相當(dāng)于java中的List
  • Book 的名稱格式與為生成的java文件的名稱是有關(guān)系的赁濒。當(dāng)然你也可以在文件里自定義java文件的名稱
  • 生成的java代碼中的的builder還是按照默認(rèn)格式來生成的轨奄,所以,建議大家就直接按照默認(rèn)規(guī)則來設(shè)計即可拒炎。 此外挪拟,還可以指定改java代碼的包路徑,命令如下:option java_package = "com.crf.jason.myapplication";(Android studio環(huán)境)


    image

在Android項目中使用

上述第四點可見击你,通過.proto文件會在debug目錄生成對應(yīng)的java或者cpp文件玉组,這個文件就是我們用來處理服務(wù)端的響應(yīng)轉(zhuǎn)變成我們需要的java類,具體如下:

BookOuterClass.Book book=BookOuterClass.Book.parseFrom(out.toByteArray());

在java端使用

具體參考:Google官網(wǎng)的開發(fā)者文檔

Google官方例子:

syntax = "proto2";

package tutorial;

option java_package = "com.example.tutorial";
option java_outer_classname = "AddressBookProtos";

message Person {
  required string name = 1;
  required int32 id = 2;
  optional string email = 3;

  enum PhoneType {
MOBILE = 0;
HOME = 1;
WORK = 2;
  }

  message PhoneNumber {
required string number = 1;
optional PhoneType type = 2 [default = HOME];
  }

  repeated PhoneNumber phones = 4;
}

message AddressBook {
  repeated Person people = 1;
}
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末丁侄,一起剝皮案震驚了整個濱河市惯雳,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌鸿摇,老刑警劉巖石景,帶你破解...
    沈念sama閱讀 206,013評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異拙吉,居然都是意外死亡潮孽,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,205評論 2 382
  • 文/潘曉璐 我一進(jìn)店門筷黔,熙熙樓的掌柜王于貴愁眉苦臉地迎上來往史,“玉大人,你說我怎么就攤上這事佛舱∽道” “怎么了?”我有些...
    開封第一講書人閱讀 152,370評論 0 342
  • 文/不壞的土叔 我叫張陵请祖,是天一觀的道長订歪。 經(jīng)常有香客問我,道長损拢,這世上最難降的妖魔是什么陌粹? 我笑而不...
    開封第一講書人閱讀 55,168評論 1 278
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上掏秩,老公的妹妹穿的比我還像新娘或舞。我一直安慰自己,他們只是感情好蒙幻,可當(dāng)我...
    茶點故事閱讀 64,153評論 5 371
  • 文/花漫 我一把揭開白布映凳。 她就那樣靜靜地躺著,像睡著了一般邮破。 火紅的嫁衣襯著肌膚如雪诈豌。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 48,954評論 1 283
  • 那天抒和,我揣著相機與錄音矫渔,去河邊找鬼。 笑死摧莽,一個胖子當(dāng)著我的面吹牛庙洼,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播镊辕,決...
    沈念sama閱讀 38,271評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼油够,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了征懈?” 一聲冷哼從身側(cè)響起石咬,我...
    開封第一講書人閱讀 36,916評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎卖哎,沒想到半個月后鬼悠,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,382評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡亏娜,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,877評論 2 323
  • 正文 我和宋清朗相戀三年厦章,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片照藻。...
    茶點故事閱讀 37,989評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖汗侵,靈堂內(nèi)的尸體忽然破棺而出幸缕,到底是詐尸還是另有隱情,我是刑警寧澤晰韵,帶...
    沈念sama閱讀 33,624評論 4 322
  • 正文 年R本政府宣布发乔,位于F島的核電站,受9級特大地震影響雪猪,放射性物質(zhì)發(fā)生泄漏栏尚。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,209評論 3 307
  • 文/蒙蒙 一只恨、第九天 我趴在偏房一處隱蔽的房頂上張望译仗。 院中可真熱鬧抬虽,春花似錦、人聲如沸纵菌。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,199評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽咱圆。三九已至笛辟,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間序苏,已是汗流浹背手幢。 一陣腳步聲響...
    開封第一講書人閱讀 31,418評論 1 260
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留忱详,地道東北人围来。 一個月前我還...
    沈念sama閱讀 45,401評論 2 352
  • 正文 我出身青樓,卻偏偏與公主長得像踱阿,于是被迫代替她去往敵國和親管钳。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,700評論 2 345

推薦閱讀更多精彩內(nèi)容