同盾科技發佈PB級複雜信息自動化處理指標計算平臺——極溯

金融界網站的複雜信息、海量數據向我們展示了聯繫的複雜性和多樣性,碎片化的字符之間相互連結、影響、作用和轉化,能衍生出各種維度的數據指標,最終引導我們探究出隱藏在數字背後事物的本質和價值。

隨著數字時代的發展,金融領域高併發、大數據、實時反饋的需求給智能決策系統提出了嚴峻的挑戰。

傳統實時指標計算的困境——快、準、穩不能兼得

每天上千萬筆交易量、千億的指標計算量、PB級數據規模, 在這些天文數字面前,留給系統的響應時間只有幾毫秒。

如何在最快時間計算模型的結果,反饋精準的結果,並且在整個過程中保持系統的絕對穩定,長久以來這是一個近乎無解的問題。

多數企業採取了舍卒保車的模式,犧牲一部分性能去集中滿足一個需求。比如很多企業追求處理的速度,在準確性上大打折扣;或者一味滿足準確性在高併發處理能力上又束手無策;或者這兩者都做到很好,卻又無法保證系統的穩定。

在破題之前先查找一下病因。傳統的實時指標計算方法底層邏輯一般是採用實時採集、異步計算的方式。換言之,就是採集、計算、查詢三個環節是異步並行的,三者各司其職,無法有效協同。儘管這樣的設計,可以從源頭解決瞬時大數據吞吐量的問題,讓性能大幅提升。

但這種設計理念簡直是“準確性”的噩夢,異步計算無法保證實時數據已經被計算,異步查詢無法保證當前的計算結果實時被查獲。同時,隨著大數據的不斷累積,計算能力會逐漸變得遲緩。尤其在金融機構複雜規則的面前, TPS不穩定幾乎是難以避免。

準確性是實時指標計算的生命線,沒有了準確性無論吞吐量的數據多麼亮眼,都是毫無意義的。

嚴格來講,快、準、穩三者其中一項為零,最終結果都是零,那麼三者真的就無法兼得了嗎?

同盾指標計算平臺——極溯

接下來再來看這一組數據

完成一筆交易全鏈路分析不超過200毫秒,日均可支撐線上幾百億數據量級的決策研判,單日指標計算處理量可達1200億,每一秒可幫助互聯網和金融機構攔截超3000起欺詐事件,滿足業務每天1.5-2億次的調用需求。

在500+個指標的場景下,計算準確度達99.99%以上,平均響應時間1ms以內,TPS超60萬。

將這些數字串聯在一起的,是一臺低延遲、可擴展、高可靠的處理引擎,同盾科技自研的大數據極速處理平臺——“極溯”。極溯,取自極往知來,追本溯源之意。

同盾極溯是如何實現了快、準、穩的統一?

快:PB級數據毫秒處理能力


極溯創造性的將採集、計算與查詢同步在一次原子操作中,通過可計算緩存、分時處理引擎等技術使採集到的數據到達即算出、算出即查得,用可計算緩存和特定的數據結構,結合具體業務場景,按照時間窗口分片的實時指標計算方式,從而在保證吞吐量的基礎上得到較高的準確率。


極溯產品集群部署支持超高併發量的請求,每秒可處理高達百萬級的計算任務,在處理TB級甚至是PB級的數據規模都能保證延時達到毫秒級別。毫秒級實時數據分析的能力,能夠輔助企業做出更有價值的實時決策。


準:全流程打通大數據平臺


極溯實現了與大數據平臺的深度結合,與傳統模式指標計算相比,可實時回溯歷史數據計算指標值,在配置指標的過程中已在大數據平臺創建了離線任務,當需要使用時便可實時生效。不僅有效利用歷史數據,在深度結合大數據平臺後,還能喚醒鋪底數據,新增的指標去計算沉睡的數據,賦予數據更大的意義,更加接近真實環境。


同盾極溯能幫助企業構建數據完善的生態湖及標籤體系,全流程的大數據風控能力,從底層設計就把客戶的各個流程的業務需求都考慮在內。並以各類工具、技術、模型為底層支撐,輔以分析諮詢,繼而搭建自己的智能風控AI模型框架。


穩:確保7*24持續運行


極溯支持生產中心雙活部署,同時也支持遠程異地多活部署。數據前置、決策分析、模型運行、管理控制檯、數據集市、離線測試等各個產品組件均可實現集群式部署,可確保全年7*24小時無間斷的持續運行。


同時系統具備高拓展性,具有橫向及縱向擴展能力,支持負載均衡模式、分容器化、布式、集中式等多種部署方案,能夠根據業務需要以較為靈活的方式實現對性能的擴展。

更懂客戶:繼承同盾一萬家客戶場景理解能力。


同盾累計服務超過一萬家企業客戶,涵蓋22大類行業、118類細分領域客戶,涉及到註冊、登錄、交易、支付、授信等100多種不同的場景。


強大的場景理解能力也都被極溯完整的繼承下來,極溯將抽象的業務模型提煉成後臺的指標模版,使得指標可配置化,使得極溯能提供私人訂製般的解決方案。


結合數據計算、持久化、緩存三合一機制與簡單高效的架構,可為企業節省大量設備與部署成本。大量規則一鍵上線,快速調整,規則指標均支持熱部署實時生效,頁面化配置方便企業通過簡單的學習即可快速上手、靈活應用。


極溯應用廣泛,幾乎沒有場景的侷限,可以滿足銀行、支付、保險、信託、醫療、交通、通訊、物流、軍工等需要數據分析實時計算場景。


此前,在與國內知名金融機構的合作過程中,極溯展現出強大的應用計算能力。

以國內某大型支付公司為例,該企業日交易量超千萬筆,交易欺詐風險較高,傳統策略指標加工方式無法滿足日均千萬筆處理,交易風險隱患較大。


為實時攔截可疑風險,降低損失。該支付公司使用同盾極溯平臺對交易數據進行實時加工計算輸出指標策略結果,實現交易場景風險全覆蓋。最終完美實現了千萬級的數據實時計算及指標加工,且系統響應時間穩定保持50ms以內,大幅降低支付風險。


目前同盾已經成功打造了以實時指標計算平臺——極溯、決策引擎——天策、知識圖譜、機器學習平臺等技術為核心代表的產品集群,這將是同盾實現科技賦能的重要基礎。

未來極溯將會把同盾近百種產品鏈路悉數打開,將實時計算和離線計算打通,成為一個全體系的指標平臺,打造整個PaaS層的智能生態。


未來同盾會繼續豐富產品密度,力爭協助金融機構打造一個事前預警、事中監控和事後分析的閉環,通過主動預防,多維度場景監控,搭配立體化的技術工具和智能風險管理平臺,形成從線上實時決策分析、離線模型訓練部署、數據存儲管理到智能模型應用的全面配套支持,實現“端到雲”的智能風控及分析決策全流程解決方案。



分享到:


相關文章: