在項(xiàng)目中使用Protobuf協(xié)議實(shí)現(xiàn)數(shù)據(jù)傳輸(一)

簡介

Google Protocol Buffer( 簡稱 Protobuf) 是 Google 公司內(nèi)部的混合語言數(shù)據(jù)標(biāo)準(zhǔn),目前已經(jīng)正在使用的有超過 48,162 種報(bào)文格式定義和超過 12,183 個(gè) .proto 文件。他們用于 RPC 系統(tǒng)和持續(xù)數(shù)據(jù)存儲(chǔ)系統(tǒng)。

Protocol Buffers 是一種輕便高效的結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)格式,可以用于結(jié)構(gòu)化數(shù)據(jù)串行化,或者說序列化。它很適合做數(shù)據(jù)存儲(chǔ)或 RPC 數(shù)據(jù)交換格式??捎糜谕ㄓ崊f(xié)議、數(shù)據(jù)存儲(chǔ)等領(lǐng)域的語言無關(guān)、平臺(tái)無關(guān)、可擴(kuò)展的序列化結(jié)構(gòu)數(shù)據(jù)格式。目前提供了 C++、Java、Python 三種語言的 API

Protobuf 的優(yōu)點(diǎn)

Protobuf 有如 XML,不過它更小、更快、也更簡單。你可以定義自己的數(shù)據(jù)結(jié)構(gòu),然后使用代碼生成器生成的代碼來讀寫這個(gè)數(shù)據(jù)結(jié)構(gòu)。你甚至可以在無需重新部署程序的情況下更新數(shù)據(jù)結(jié)構(gòu)。只需使用 Protobuf 對(duì)數(shù)據(jù)結(jié)構(gòu)進(jìn)行一次描述,即可利用各種不同語言或從各種不同數(shù)據(jù)流中對(duì)你的結(jié)構(gòu)化數(shù)據(jù)輕松讀寫。

它有一個(gè)非常棒的特性,即“向后”兼容性好,人們不必破壞已部署的、依靠“老”數(shù)據(jù)格式的程序就可以對(duì)數(shù)據(jù)結(jié)構(gòu)進(jìn)行升級(jí)。這樣您的程序就可以不必?fù)?dān)心因?yàn)橄⒔Y(jié)構(gòu)的改變而造成的大規(guī)模的代碼重構(gòu)或者遷移的問題。因?yàn)樘砑有碌南⒅械?field 并不會(huì)引起已經(jīng)發(fā)布的程序的任何改變。

Protobuf 語義更清晰,無需類似 XML 解析器的東西(因?yàn)?Protobuf 編譯器會(huì)將 .proto 文件編譯生成對(duì)應(yīng)的數(shù)據(jù)訪問類以對(duì) Protobuf 數(shù)據(jù)進(jìn)行序列化、反序列化操作)。

使用 Protobuf 無需學(xué)習(xí)復(fù)雜的文檔對(duì)象模型,Protobuf 的編程模式比較友好,簡單易學(xué),同時(shí)它擁有良好的文檔和示例,對(duì)于喜歡簡單事物的人們而言,Protobuf 比其他的技術(shù)更加有吸引力。具體借鑒網(wǎng)上分享與JSON,XML等比較的測(cè)試結(jié)果圖,具體如下:

序列化數(shù)據(jù)對(duì)比

image

bytes字節(jié)數(shù)對(duì)比

image

Protobuf 的不足

Protbuf 與 XML 相比也有不足之處。它功能簡單,無法用來表示復(fù)雜的概念。

XML 已經(jīng)成為多種行業(yè)標(biāo)準(zhǔn)的編寫工具,Protobuf 只是 Google 公司內(nèi)部使用的工具,在通用性上還差很多。

由于文本并不適合用來描述數(shù)據(jù)結(jié)構(gòu),所以 Protobuf 也不適合用來對(duì)基于文本的標(biāo)記文檔(如 HTML)建模。另外,由于 XML 具有某種程度上的自解釋性,它可以被人直接讀取編輯,在這一點(diǎn)上 Protobuf 不行,它以二進(jìn)制的方式存儲(chǔ),除非你有 .proto 定義,否則你沒法直接讀出 Protobuf 的任何內(nèi)容

在Android Studio配置google protobuf

在project的build.gradle中配置

buildscript {
repositories {
    jcenter()
    mavenCentral()
}
dependencies {
    classpath 'com.android.tools.build:gradle:2.2.3'
    classpath 'com.google.protobuf:protobuf-gradle-plugin:0.8.0'
}
}

注意 Gradle版本至少是 2.12 并且Java 7,本例子使用的是2.2.3,protobuf-gradle-plugin使用最新的0.8.0版本。

在app的build.gradle中配置

頂部添加protobuf插件
apply plugin: 'com.google.protobuf'
android{
...

android結(jié)點(diǎn)增加proto文件位置配置
sourceSets {
    main {
        proto {
            srcDir 'src/main/proto'
            include '**/*.proto'
        }
        java {
            srcDir 'src/main/java'
        }
    }
}
}
添加依賴
dependencies {
...
compile 'com.google.protobuf:protobuf-java:3.1.0'
compile 'com.google.protobuf:protoc:3.1.0'
}
增加protobuf結(jié)點(diǎn)
protobuf {
protoc {
    artifact = 'com.google.protobuf:protoc:3.1.0'
}

generateProtoTasks {
    all().each { task ->
        task.builtins {
            remove java
        }
        task.builtins {
            java {}
            // Add cpp output without any option.
            // DO NOT omit the braces if you want this builtin to be added.
            cpp {}
        }
    }
}

generatedFilesBaseDir = "$projectDir/src/generated"
}

java端配置ProtoBuf

下載Protocol Buffers

官方地址或者maven倉庫中下載即可。

通過.proto文件生成對(duì)應(yīng)的.java/.h/.cc等文件

然后cmd cd到該目錄 執(zhí)行protoc.exe --java_out=./ book.proto,此時(shí)在這個(gè)目錄下回生成BookOuterClass.java文件

在java客戶端
序列化:

BookOuterClass.Book book=BookOuterClass.Book.newBuilder()
            .setId(1)
            .setDesc("codeBook")
            .setName("Prime")
            .build();
        
byte [] value = p.toByteArray()

反序列化:

BookOuterClass.Book book=BookOuterClass.Book.parseFrom(value);

在JAVA中如何使用生成的數(shù)據(jù)模型

protobuf與java type區(qū)分

image

proto描述文件的編寫

例子

//syntax = "proto2";//聲明proto版本,2.0與3.0以后語法差異很大
syntax = "proto3";
option java_package = "com.crf.jason.myapplication";
package bean;
message Book {
//    required int32 id = 1;//Proto 2.0版本,需要聲明requires、optional等
//    required string name = 2;
//    optional string desc = 3;
    int32 id = 1;//Proto 3.0版本,不需要聲明requires、optional等
    string name = 2;
    string desc = 3;
}

注意:

  • 頂部必須申明句法的版本號(hào),如果不申明,則默認(rèn)是2.0的語法。
  • 下面Message節(jié)里面的字段就是業(yè)務(wù)需要的各個(gè)字段了,等號(hào)后面的數(shù)字是序號(hào),必須指定。在3.5版本中不用指定required、等關(guān)鍵字了。如果有需要使用2.0版本,具體參數(shù)的含義具體如下:
    • required:一個(gè)格式良好的消息一定要含有1個(gè)這種字段。表示該值是必須要設(shè)置的;
    • optional:消息格式中該字段可以有0個(gè)或1個(gè)值(不超過1個(gè))
    • repeated:在一個(gè)格式良好的消息中,這種字段可以重復(fù)任意多次(包括0次)。重復(fù)的值的順序會(huì)被保留。表示該值可以重復(fù),相當(dāng)于java中的List
  • Book 的名稱格式與為生成的java文件的名稱是有關(guān)系的。當(dāng)然你也可以在文件里自定義java文件的名稱
  • 生成的java代碼中的的builder還是按照默認(rèn)格式來生成的,所以,建議大家就直接按照默認(rèn)規(guī)則來設(shè)計(jì)即可。 此外,還可以指定改java代碼的包路徑,命令如下:option java_package = "com.crf.jason.myapplication";(Android studio環(huán)境)


    image

在Android項(xiàng)目中使用

上述第四點(diǎn)可見,通過.proto文件會(huì)在debug目錄生成對(duì)應(yīng)的java或者cpp文件,這個(gè)文件就是我們用來處理服務(wù)端的響應(yīng)轉(zhuǎn)變成我們需要的java類,具體如下:

BookOuterClass.Book book=BookOuterClass.Book.parseFrom(out.toByteArray());

在java端使用

具體參考:Google官網(wǎng)的開發(fā)者文檔

Google官方例子:

syntax = "proto2";

package tutorial;

option java_package = "com.example.tutorial";
option java_outer_classname = "AddressBookProtos";

message Person {
  required string name = 1;
  required int32 id = 2;
  optional string email = 3;

  enum PhoneType {
MOBILE = 0;
HOME = 1;
WORK = 2;
  }

  message PhoneNumber {
required string number = 1;
optional PhoneType type = 2 [default = HOME];
  }

  repeated PhoneNumber phones = 4;
}

message AddressBook {
  repeated Person people = 1;
}
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容