從第三方系統(tǒng)定時同步數(shù)據(jù)的簡單設計

小Z今天在項目上遇到一個遺留問題,客戶的系統(tǒng)需要定時從銀行接口獲取入賬信息,發(fā)生了入賬數(shù)據(jù)的丟失。原因是自研系統(tǒng)通過定時任務的方式,每次執(zhí)行任務只是獲取前一天到當前時間的數(shù)據(jù),而上個月有段時間銀行前置機通信出現(xiàn)異常,所以出現(xiàn)了數(shù)據(jù)同步不到位的情況。

目前給出的解決方案是:

1.系統(tǒng)中增加一張表,記錄每次任務執(zhí)行成功的業(yè)務時間,并非每次任務執(zhí)行時間,因為存在一段時間內(nèi)銀行端并未發(fā)生入賬,并且也不能保證現(xiàn)在執(zhí)行的時間一定早于銀行端入賬時間,所以用業(yè)務時間去構造一條可信的時間戳,該時間戳滿足從前往后的規(guī)則。

2.每次任務啟動后,取出該時間戳,以此為參數(shù),加入2天的冗余量,即往前推2天,去銀行調(diào)用接口取回數(shù)據(jù),然后按照業(yè)務規(guī)則將數(shù)據(jù)同步入庫。

3.該解決方案不能滿足的一種情況是,如銀行5月3日入賬記錄一直為10條,到了現(xiàn)在5月8號后突然新增了一條5月3日的記錄。該情況首先認為是外部系統(tǒng)出現(xiàn)異常,要將該情況的數(shù)據(jù)同步,只能開發(fā)一個定時任務,每晚全量同步數(shù)據(jù),小Z覺得現(xiàn)階段沒必要,同時認為銀行系統(tǒng)在這方面是可靠的。

目前將會按照該解決方案執(zhí)行。

?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容