當前位置：首頁 > 科技 > 軟件

資損防控技術體系簡介及實踐

來源：責編：時間：2023-08-20 23:17:19 11347觀看

導讀一、資損防控介紹得物提供大量商品買賣等服務，資金流轉量大，任何由于設計缺陷、系統缺陷、系統故障、人為操作、安全漏洞等因素都會引發直接或間接資金損失。資損防控就是在項目全生命周期內，引入多種資金分析和控制手段

一、資損防控介紹

得物提供大量商品買賣等服務，資金流轉量大，任何由于設計缺陷、系統缺陷、系統故障、人為操作、安全漏洞等因素都會引發直接或間接資金損失。資損防控就是在項目全生命周期內，引入多種資金分析和控制手段，預防資損故障或控制資損故障影響范圍。

那么在日常工作中，具體如何開展呢？主要可以從以下三個方面來做：

1.機制流程建設

在業務項目開始時，我們應該評定項目資金風險等級，比如高風險需要重點關注&投入，中風險需要投入多少資源，低風險又如何保障。

在項目資金風險評定后，產品架構設計時需要包括技術風險設計，比如冪等、分布式數據一致性、異地多活等。

然后對于高資金風險項目，我們需要出專門的資金風險系分，在得物重點關注資金流、信息流以及物流的流轉，比如業務的高保鏈路是怎么樣的，有哪些資損風險點等。

接下來就是對輸出的資損風險點進行布防，布防的形式主要是核對和監控，核對為主，監控作為兜底，因為前面輸出的資損風險點可能會有遺漏，監控是業務異常的感知手段。日常我們也可以通過混沌工程進行風險挖掘&核對規則驗證。

最后我們需對資損風險告警進行應急，拉起應急小組排查確認風險并修復。

2.人員陣型建設

資損防控并不是靠某一個角色來承擔，而是需要架構、研發、質量和SRE一起來防控并嵌入日常工作流程中，從組織架構視角，我們需要建立至少三道防線，即研發防線，質量防線和SRE防線，相互兜底，合并共舉達到資損防控的目的。當然各角色在項目各個階段各有側重，比如SRE負責業務線上穩定性，那么線上的資損防控投入相對大一些。

3.多體系防控

從發現資損風險時效視角來說，可以分為實時核對（T+0）、近實時核對（T+M）、離線核對(T+H, T+1)，每種核對方式都有其適配的業務場景，并不存在替代之說，比如不落庫的配置變更適用實時核對，業務定時任務適用離線核對等等。實際業務場景布防時需分析業務特點，然后再使用合適的核對體系工具。在組織分工方面，研發側重離線核對，測試側重近實時核對，SRE側重實時核對，當然實際工作中并不必這么界線分明，自己看到的風險點，可以選用合適的工具體系。

從核對是否影響業務運行視角看，可以分為旁路核對和主路核對，旁路核對的結果對業務運行不構成影響，僅僅是風險揭示，而主路核對是有能力影響業務運行的，比如資損熔斷用的就是主路核對技術，在核對告警報出后中斷業務運行。目前公司已有的A、B平臺都屬于旁路核對體系。

在布防核對規則后，我們怎么檢驗布防的有效性，同時因為業務迭代發展，早前布防的核對規則需要調整核對邏輯來適配新的業務邏輯，也就是說我們如何保鮮核對規則？這就需要混沌工程資損演練來支撐了。資損演練又分為有損演練和無損演練，比如在線上搞有損演練時經常把金額數據加/減0.01，檢驗布防的核對規則是否發現，這樣即使發生了實際資損也在演練預算可以覆蓋的范圍內，但在線上搞有損演練需謹慎評估影響范圍。資損防控無損演練關鍵在于生產庫的克隆，這樣在演練時做數據篡改并不影響線上業務運行。

二、資損防控技術體系

我們在做資損防控時，最重要的一步是風險識別，它是資損核對布防的源頭，可以這么說，如果沒有風險識別就沒有接下來核對布防。風險識別可以通過人工分析和智能系統推導兩種方式得到，從建設發展階段來說，人工分析通常是最開始采用的方式，在這個基礎上，再通過算法推導+專家經驗發展出智能系統推導。下面依人工分析視角來展開，這里舉例一個簡化版得物系統的資損防控如何做。如下圖所示，左邊為商品交易業務鏈路，其中包括用戶下單交易和運營配置商品：

圖片

2.T+M核對

通過數據庫Binlog可以實現分鐘級的資損核對，這種核對方式對于業務上下游一致性風險有非常好的發現能力，日常配合混沌工程的無損演練能力，對于未覆蓋到資損風險也可以很好的揭示出來，所以T+M核對適用于涉數據庫字段的一致性風險、蓋帽等業務場景。

圖片

3.T+0核對

隨著業務的發展，對于資損核對也提出更高要求，我們需要發展出實時核對能力。比如可以通過業務插樁的方式來實現同步/異步觸發，同時實時監聽業務執行消息，然后數據路由至具體業務域執行核對邏輯，這種核對方式屬資損防控領域的重武器，適用于業務型風險、配置型風險，同時滿足復雜業務核對場景。目前SRE已經在建設T+0實時核對系統。

圖片

4.資損演練

資損演練可以驗證布防的核對規則有效性，又可以用來挖掘未覆蓋到資損風險，所以資損演練是資損防控體系很重要的一環。資金無損演練有以下三個關鍵點：

資損防控落地的規則都是針對業務數據來執行的
資損防控無損演練的數據來自生產環境
無損演練數據與生產環境數據實質是隔離的

下圖為初步的資金無損演練方案：

圖片

三、得物業務實踐

作為支持得物業務的SRE主導了得物履約資金安全保障工作，由于得物履約的業務鏈路長，風險敞口大，我們認真考慮了業務穩定性及其資損風險并實踐了前述的相關資損防控理念。

圖片

1.高保鏈路梳理

出價、下單、支付、發貨、結算、營銷、逆向7個業務域定義出高保業務鏈路，輸出資損點、變更點、新增表及字段以及相關監控點。

2.工具選型

依托現有工具平臺進行布防，成本最優解。

圖片

3.規則布防

資損防控通過核對規則落地，同時業務監控配置告警規則，通過混沌工程演練驗證規則有效性。

4.觀測告警

a. 應急響應

b. 自動巡檢

i. 每天自動巡檢重要指標推送到對應的工作群

5.演練

a. 對相關規則進行保鮮

b. 未暴露風險挖掘

6.實時核對體系建設

a. 業務插樁先旁路核對，后可阻斷核對。

四、總結&展望

在得物落地資損防控期間，作為SRE一直在宣導的理念：資損防控需要研發、測試、SRE三方相互協作，三道防線相互兜底，合并共舉達到資損防控的目標。未來，資損防控我們重點關注以下3個方面：

風險分析--目前我們主要還是基于專家經驗，后續我們將通過數據染色，血緣分析，做到自動化的風險輸出。
多體系防控--完善資損防控體系建設，抽象通用防控能力與可擴展的精細化防控能力，做到核對工具體系與業務場景相適配。
資損演練--在大規模的業務體系之下，純靠人去做攻擊，其實是不太現實的，必須得靠智能化、數據化的方式去驅動。同一個故障，我們讓它在成百上千個系統上面去重放，這樣我們就可以非常高效地去實現大規模風險的挖掘，驗證風險防控規則的有效性以及已布防規則的保鮮。

本文鏈接：http://www.www897cc.com/showinfo-26-6218-0.html資損防控技術體系簡介及實踐

聲明：本網頁內容旨在傳播知識，若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。郵件：2376512515@qq.com

上一篇： DDD 與 CQRS 才是黃金組合

下一篇：阿里云推出大規模視覺語言模型Qwen-VL 已在ModeScope開源

標簽：

熱門焦點

深度探索 Elasticsearch 8.X：function_score 參數解讀與實戰案例分析

在 Elasticsearch 中，function_score 可以讓我們在查詢的同時對搜索結果進行自定義評分。function_score 提供了一系列的參數和函數讓我們可以根據需求靈活地進行設置。近期
JVM優化：實戰OutOfMemoryError異常

一、Java堆溢出堆內存中主要存放對象、數組等，只要不斷地創建這些對象，并且保證 GC Roots 到對象之間有可達路徑來避免垃圾收集回收機制清除這些對象，當這些對象所占空間超過
最“俊美”淘寶賣家，靠直播和短視頻圈粉，上架秒光，年銷3000萬

來源 | 電商在線文｜易琬玉編輯｜斯問受訪店鋪：Ringdoll戒之人形圖源：微博@御座的黃山、“Ringdoll戒之人形”淘寶店鋪有關外貌的評價，黃山已經聽累了。生于1985年的他，哪
得物寵物生意「狂飆」，發力“它經濟”

作者｜花花小萌主近日，得物宣布正式上線寵物鑒別，通過得物App內的“在線鑒別”，可找到鑒別寵物的選項。通過上傳自家寵物的部位細節，就能收獲擁有專業資質認證的得物鑒
支持aptX Lossless無損傳輸 iQOO TWS 1賽道版發布限時優惠價369元

2023年7月4日，“無損音質，聲動人心”iQOO TWS 1正式發布，支持aptX Lossless無損傳輸，限時優惠價369元。iQOO TWS 1耳機率先支持端到端aptX Lossless無
到手價3099元起！iQOO Neo8 Pro今日首銷：安卓性能最強旗艦

5月23日，iQOO如期舉行了新品發布會，全新的iQOO Neo8系列也正式與大家見面，包含iQOO Neo8和iQOO Neo8 Pro兩個版本，其中標準版搭載高通驍龍8+，而Pro版更
回歸OPPO兩年，一加贏了銷量，輸了品牌

成為OPPO旗下主打性能的先鋒品牌后，一加屢創佳績。今年618期間，一加手機全渠道銷量同比增長362%，憑借一加 11、一加 Ace 2、一加 Ace 2V三款爆品，一加
榮耀Magicbook V 14 2021曙光藍版本正式開售，擁有觸摸屏

榮耀 Magicbook V 14 2021 曙光藍版本正式開售，搭載 i7-11390H 處理器與 MX450 顯卡，配備 16GB 內存與 512GB SSD，重 1.48kg，厚 14.5mm，具有 1.5mm 鍵盤鍵程、
三翼鳥智能家居亮相電博會，讓用戶體驗更真實

2021電博會在青島國際會展中心開幕中，三翼鳥直接把“家”搬到了現場，成為了展會的一大看點。這也是三翼鳥繼9月9日發布了行業首個一站式定制智慧家平臺后的

日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

資損防控技術體系簡介及實踐

一、資損防控介紹

1.機制流程建設

2.人員陣型建設

3.多體系防控

二、資損防控技術體系

2.T+M核對

3.T+0核對

4.資損演練

三、得物業務實踐

1.高保鏈路梳理

2.工具選型

3.規則布防

4.觀測告警

5.演練

6.實時核對體系建設

四、總結&展望

深度探索 Elasticsearch 8.X：function_score 參數解讀與實戰案例分析

JVM優化：實戰OutOfMemoryError異常

最“俊美”淘寶賣家，靠直播和短視頻圈粉，上架秒光，年銷3000萬

得物寵物生意「狂飆」，發力“它經濟”

支持aptX Lossless無損傳輸 iQOO TWS 1賽道版發布限時優惠價369元

到手價3099元起！iQOO Neo8 Pro今日首銷：安卓性能最強旗艦

回歸OPPO兩年，一加贏了銷量，輸了品牌

榮耀Magicbook V 14 2021曙光藍版本正式開售，擁有觸摸屏

三翼鳥智能家居亮相電博會，讓用戶體驗更真實

最新推薦

猜你喜歡

熱門推薦

相關資訊