一、基礎(chǔ)
1.1 使用緩存的場景
對于一個聯(lián)網(wǎng)應用來說,當設(shè)計網(wǎng)絡部分的邏輯時,不可避免的要使用到緩存,目前我們項目中使用緩存的場景如下:
- 當請求數(shù)據(jù)的時候,先判斷本地是否有緩存,或者本地的緩存是否過期,如果有緩存并且沒有過期,那么就直接返回給接口的調(diào)用者,這部分稱為 客戶端緩存 或者 強制緩存。
- 假如不滿足第一步的場景,那么就需要發(fā)起網(wǎng)絡請求,但是服務器為了減少用戶的流量,中間的代理服務器也會有自己的一套緩存機制,但這需要客戶端和服務器協(xié)商好請求頭部與緩存相關(guān)的字段,也就是我們在 OkHttp 知識梳理(3) - OkHttp 之緩存基礎(chǔ) 中提到的緩存相關(guān)字段,這部分稱為 服務器緩存。
- 假如服務器請求失敗或者告知客戶端緩存仍然可用,那么為了優(yōu)化用戶的體驗,我們可以繼續(xù)使用客戶端的緩存,如果沒有緩存,那么可以先展示默認的數(shù)據(jù)。
1.2 為什么要學習 OkHttp 緩存的實現(xiàn)邏輯
在OkHttp中,我們可以通過以下兩點來對緩存的策略進行配置:
- 在創(chuàng)建
OkHttpClient的過程中,通過.cache(Cache)配置緩存的位置。 - 在構(gòu)造
Request的過程中通過.cacheControl(CacheControl)來配置緩存邏輯。
OkHttp的緩存框架并不能完全滿足我們的定制需求,我們有必要去了解它內(nèi)部的實現(xiàn)邏輯,才能知道如何設(shè)計出符合1.1中談到的使用場景。
二、源碼解析
對于OkHttp緩存的內(nèi)部實現(xiàn),我們分為以下四點來介紹:
-
Cache類:存儲部分邏輯的實現(xiàn),決定了緩存的數(shù)據(jù)如何保存及查找。 -
CacheControl:單次請求的邏輯實現(xiàn),決定了在發(fā)起請求后,在什么情況下直接返回緩存。 -
CacheInterceptor:在本系列的第一篇文章中,我們分析了OkHttp從調(diào)用.call接口到真正發(fā)起請求,經(jīng)過了一系列的攔截器,CacheInterceptor就是其中預置的一個攔截器。 -
CacheStragy:它是CacheInterceptor負責緩存判斷的具體實現(xiàn)類,其最終的目的就是構(gòu)造出networkRequest和cacheResponse這兩個成員變量。
2.1 Cache 類
Cache類的用法如下:
//分別對應緩存的目錄,以及緩存的大小。
Cache mCache = new Cache(new File(CACHE_DIRECTORY), CACHE_SIZE);
//在構(gòu)造 OkHttpClient 時,通過 .cache 配置。
OkHttpClient client = new OkHttpClient.Builder().cache(mCache).build();
在其內(nèi)部采用DiskLruCache實現(xiàn)了LRU算法的磁盤緩存,對于一般的使用場景,不需要過多的關(guān)心,只需要指定緩存的位置和大小就可以了。
2.2 CacheControl
CacheControl是對HTTP的Cache-Control頭部的描述,通過Builder方法我們可以對其進行配置,下面我們簡單地介紹幾個常用的配置:
-
noCache():如果出現(xiàn)在 請求頭部,那么表示不適用于緩存響應,從網(wǎng)絡獲取結(jié)果;如果出現(xiàn)在 響應頭部,表示不允許對響應進行緩存,而是客戶端需要與服務器再次驗證,進行一個額外的GET請求得到最新的響應。 -
noStore():如果出現(xiàn)在 響應頭部,則表明該響應不能被緩存。 -
maxAge(int maxAge, TimeUnit timeUnit):設(shè)置緩存的 最大存活時間,假如當前時間與自身的Age時間差不在這個范圍內(nèi),那么需要發(fā)起網(wǎng)絡請求。 -
maxStale(int maxStale,TimeUnit timeUnit):設(shè)置緩存的 最大過期時間,假如當前時間與自身的Age時間差超過了 最大存活時間,但是超過部分的值小于過期時間,那么仍然可以使用緩存。 -
minFresh(int minFresh,TimeUnit timeUnit):如果當前時間加上minFresh的值,超過了該緩存的過期時間,那么就發(fā)起網(wǎng)絡請求。 -
onlyIfCached:表示只接受緩存中的響應,如果緩存不存在,那么返回一個狀態(tài)碼為504的響應。
CacheControl的配置項將會影響到我們后面在CacheStragy中 命中緩存的策略。
2.3 CacheInterceptor
CacheInterceptor的源碼地址為 CacheInterceptor ,正如我們在 OkHttp 知識梳理(1) - OkHttp 源碼解析之入門 中分析過的,它是內(nèi)置攔截器。下面,我們先來看一下主要的流程,它在CacheInterceptor的intercept方法中:
@Override public Response intercept(Chain chain) throws IOException {
//1.通過 cache 找到之前緩存的響應,但是該緩存如他的名字一樣,僅僅是一個候選人。
Response cacheCandidate = cache != null
? cache.get(chain.request())
: null;
//2.獲取當前的系統(tǒng)時間。
long now = System.currentTimeMillis();
//3.通過 CacheStrategy 的工廠方法構(gòu)造出 CacheStrategy 對象,并通過 get 方法返回。
CacheStrategy strategy = new CacheStrategy.Factory(now, chain.request(), cacheCandidate).get();
//4.在 CacheStrategy 的構(gòu)造過程中,會初始化 networkRequest 和 cacheResponse 這兩個變量,分別表示要發(fā)起的網(wǎng)絡請求和確定的緩存。
Request networkRequest = strategy.networkRequest;
Response cacheResponse = strategy.cacheResponse;
if (cache != null) {
cache.trackResponse(strategy);
}
//5.如果曾經(jīng)有候選的緩存,但是經(jīng)過處理后 cacheResponse 不存在,那么關(guān)閉候選的緩存資源。
if (cacheCandidate != null && cacheResponse == null) {
closeQuietly(cacheCandidate.body());
}
//6.如果要發(fā)起的請求為空,并且沒有緩存,那么直接返回 504 給調(diào)用者。
if (networkRequest == null && cacheResponse == null) {
return new Response.Builder()
.request(chain.request())
.protocol(Protocol.HTTP_1_1)
.code(504)
.message("Unsatisfiable Request (only-if-cached)")
.body(Util.EMPTY_RESPONSE)
.sentRequestAtMillis(-1L)
.receivedResponseAtMillis(System.currentTimeMillis())
.build();
}
//7.如果不需要發(fā)起網(wǎng)絡請求,那么直接將緩存返回給調(diào)用者。
if (networkRequest == null) {
return cacheResponse.newBuilder()
.cacheResponse(stripBody(cacheResponse))
.build();
}
Response networkResponse = null;
try {
//8.繼續(xù)調(diào)用鏈的下一個步驟,按常理來說,走到這里就會真正地發(fā)起網(wǎng)絡請求了。
networkResponse = chain.proceed(networkRequest);
} finally {
//9.保證在發(fā)生了異常的情況下,候選的緩存可以正常關(guān)閉。
if (networkResponse == null && cacheCandidate != null) {
closeQuietly(cacheCandidate.body());
}
}
//10.網(wǎng)絡請求完成之后,假如之前有緩存,那么首先進行一些額外的處理。
if (cacheResponse != null) {
//10.1 假如是 304,那么根據(jù)緩存構(gòu)造出返回的結(jié)果給調(diào)用者。
if (networkResponse.code() == HTTP_NOT_MODIFIED) {
Response response = cacheResponse.newBuilder()
//結(jié)合兩者的頭部字段。
.headers(combine(cacheResponse.headers(), networkResponse.headers()))
//更新發(fā)送和接收請求的時間。
.sentRequestAtMillis(networkResponse.sentRequestAtMillis())
.receivedResponseAtMillis(networkResponse.receivedResponseAtMillis())
//更新緩存和請求的返回結(jié)果。
.cacheResponse(stripBody(cacheResponse))
.networkResponse(stripBody(networkResponse))
.build();
networkResponse.body().close();
// Update the cache after combining headers but before stripping the
// Content-Encoding header (as performed by initContentStream()).
cache.trackConditionalCacheHit();
cache.update(cacheResponse, response);
return response;
} else {
//10.2 關(guān)閉緩存。
closeQuietly(cacheResponse.body());
}
}
//11.構(gòu)造出返回結(jié)果。
Response response = networkResponse.newBuilder()
.cacheResponse(stripBody(cacheResponse))
.networkResponse(stripBody(networkResponse))
.build();
if (cache != null) {
if (HttpHeaders.hasBody(response) && CacheStrategy.isCacheable(response, networkRequest)) {
//12.如果符合緩存的要求,那么就緩存該結(jié)果。
CacheRequest cacheRequest = cache.put(response);
return cacheWritingResponse(cacheRequest, response);
}
//13.對于某些請求方法,需要移除緩存,例如 PUT/PATCH/POST/DELETE/MOVE
if (HttpMethod.invalidatesCache(networkRequest.method())) {
try {
cache.remove(networkRequest);
} catch (IOException ignored) {
// The cache cannot be written.
}
}
}
return response;
}
調(diào)用的流程圖如下所示:

2.4 CacheStrategy
通過上面的這段代碼,我們可以對OkHttp整個緩存的實現(xiàn)有一個大概的了解,其實關(guān)鍵的實現(xiàn)還是在于這句,因為它決定了過濾的緩存和最終要發(fā)起的請求究竟是怎么樣的:
CacheStrategy strategy = new CacheStrategy.Factory(now, chain.request(), cacheCandidate).get();
public Factory(long nowMillis, Request request, Response cacheResponse) {
this.nowMillis = nowMillis;
this.request = request;
//1.從磁盤中直接讀取出來的原始緩存,沒有對頭部的字段進行校驗。
this.cacheResponse = cacheResponse;
if (cacheResponse != null) {
//讀取發(fā)送請求和收到結(jié)果的時間。
this.sentRequestMillis = cacheResponse.sentRequestAtMillis();
this.receivedResponseMillis = cacheResponse.receivedResponseAtMillis();
//遍歷頭部字段,解析完畢后賦值給成員變量。
Headers headers = cacheResponse.headers();
for (int i = 0, size = headers.size(); i < size; i++) {
String fieldName = headers.name(i);
String value = headers.value(i);
if ("Date".equalsIgnoreCase(fieldName)) {
servedDate = HttpDate.parse(value);
servedDateString = value;
} else if ("Expires".equalsIgnoreCase(fieldName)) {
expires = HttpDate.parse(value);
} else if ("Last-Modified".equalsIgnoreCase(fieldName)) {
lastModified = HttpDate.parse(value);
lastModifiedString = value;
} else if ("ETag".equalsIgnoreCase(fieldName)) {
etag = value;
} else if ("Age".equalsIgnoreCase(fieldName)) {
ageSeconds = HttpHeaders.parseSeconds(value, -1);
}
}
}
}
public CacheStrategy get() {
//接下來的重頭戲就是通過 getCandidate 方法來對 networkRequest 和 cacheResponse 賦值。
CacheStrategy candidate = getCandidate();
//如果網(wǎng)絡請求不為空,但是 request 設(shè)置了 onlyIfCached 標志位,那么把兩個請求都賦值為空。
if (candidate.networkRequest != null && request.cacheControl().onlyIfCached()) {
return new CacheStrategy(null, null);
}
return candidate;
}
private CacheStrategy getCandidate() {
//1.如果緩存為空,那么直接返回帶有網(wǎng)絡請求的策略。
if (cacheResponse == null) {
return new CacheStrategy(request, null);
}
//2.請求是 Https 的,但是 cacheResponse 的 handshake 為空。
if (request.isHttps() && cacheResponse.handshake() == null) {
return new CacheStrategy(request, null);
}
//3.根據(jù)緩存的狀態(tài)判斷是否需要該緩存,在規(guī)則一致的時候一般不會在這一步返回。
if (!isCacheable(cacheResponse, request)) {
return new CacheStrategy(request, null);
}
//4.獲得當前請求的 cacheControl,如果配置了不緩存,或者當前的請求配置了 If-Modified-Since/If-None-Match 字段。
CacheControl requestCaching = request.cacheControl();
if (requestCaching.noCache() || hasConditions(request)) {
return new CacheStrategy(request, null);
}
//5.獲取緩存的 cacheControl,如果是可變的,那么就直接返回該緩存。
CacheControl responseCaching = cacheResponse.cacheControl();
if (responseCaching.immutable()) {
return new CacheStrategy(null, cacheResponse);
}
//6.1 計算緩存的年齡。
long ageMillis = cacheResponseAge();
//6.2 計算刷新的時機。
long freshMillis = computeFreshnessLifetime();
//7.請求所允許的最大年齡。
if (requestCaching.maxAgeSeconds() != -1) {
freshMillis = Math.min(freshMillis, SECONDS.toMillis(requestCaching.maxAgeSeconds()));
}
//8.請求所允許的最小年齡。
long minFreshMillis = 0;
if (requestCaching.minFreshSeconds() != -1) {
minFreshMillis = SECONDS.toMillis(requestCaching.minFreshSeconds());
}
//9.最大的 Stale() 時間。
long maxStaleMillis = 0;
if (!responseCaching.mustRevalidate() && requestCaching.maxStaleSeconds() != -1) {
maxStaleMillis = SECONDS.toMillis(requestCaching.maxStaleSeconds());
}
//10.根據(jù)幾個時間點確定是否返回緩存,并且去掉網(wǎng)絡請求,如果客戶端需要強行去掉網(wǎng)絡請求,那么就是修改這個條件。
if (!responseCaching.noCache() && ageMillis + minFreshMillis < freshMillis + maxStaleMillis) {
Response.Builder builder = cacheResponse.newBuilder();
if (ageMillis + minFreshMillis >= freshMillis) {
builder.addHeader("Warning", "110 HttpURLConnection \"Response is stale\"");
}
long oneDayMillis = 24 * 60 * 60 * 1000L;
if (ageMillis > oneDayMillis && isFreshnessLifetimeHeuristic()) {
builder.addHeader("Warning", "113 HttpURLConnection \"Heuristic expiration\"");
}
return new CacheStrategy(null, builder.build());
}
//填入條件請求的字段。
String conditionName;
String conditionValue;
if (etag != null) {
conditionName = "If-None-Match";
conditionValue = etag;
} else if (lastModified != null) {
conditionName = "If-Modified-Since";
conditionValue = lastModifiedString;
} else if (servedDate != null) {
conditionName = "If-Modified-Since";
conditionValue = servedDateString;
} else {
//如果不是條件請求,那么去掉原始緩存。
return new CacheStrategy(request, null); // No condition! Make a regular request.
}
Headers.Builder conditionalRequestHeaders = request.headers().newBuilder();
Internal.instance.addLenient(conditionalRequestHeaders, conditionName, conditionValue);
Request conditionalRequest = request.newBuilder()
.headers(conditionalRequestHeaders.build())
.build();
//返回帶有條件請求的 conditionalRequest,和原始的緩存,這樣在出現(xiàn) 304 的時候就可以處理。
return new CacheStrategy(conditionalRequest, cacheResponse);
}
下圖是這個請求的流程圖,為了方便大家理解,采用四種顏色標志了(networkRequest, cacheResponse)的四種情況:
- 紅色:
networkRequest為原始request,cacheResponse為null - 綠色:
networkRequest為原始request,cacheResponse為cacheCandicate - 紫色:
networkRequest為原始request加上緩存相關(guān)的頭部,cacheResponse為cacheCandicate - 棕色:
networkRequest和cacheResponse都為null

三、小結(jié)
經(jīng)過我們對于以上代碼的分析,可以知道,當我們基于OkHttp來實現(xiàn)定制的緩存邏輯的時候,需要處理以下三個方面的問題:
- 對 客戶端緩存 進行設(shè)計,調(diào)整
cacheControl的maxStale、minFresh的參數(shù),我們在下一篇文章中,將根據(jù)cacheControl來完成緩存的設(shè)計。 - 對 服務器緩存 進行設(shè)計,那么就需要服務端去處理
If-None-Match、If-Modified-Since和If-Modified-Since這三個字段。當返回304的時候,OkHttp這邊已經(jīng)幫我們處理好了,所以客戶端這邊并不需要做什么。 -
異常情況 的處理,通過
CacheInterceptor的源碼,我們可以發(fā)現(xiàn),當發(fā)生504或者緩存沒有命中,但是網(wǎng)絡請求失敗的時候,其實是得不到任何的返回結(jié)果的,如果我們需要在這種情況下返回緩存,那么還需要額外的處理邏輯。