11.26 讚歎不已——就這樣一個典型的系統功能架構,支撐業務近20年

讚歎不已——就這樣一個典型的系統功能架構,支撐業務近20年

系統功能架構通常是通過以下線框圖表示而成,它的目的是將系統分解成多個獨立的子系統,本質上是遵循分而治之的理念。作為IT領域的數據類系統架構自然也屬於這個範疇,需要考慮數據、系統、計算、軟件、應用、管理等多個維度的相關模塊。系統架構應該也是一種邏輯架構,尤其是很多純軟件項目,通常就拿邏輯架構作為軟件設計架構。也就是說,在解決方案層面通常講的系統架構,當能夠分解出某個軟件子系統時再對這個軟件做邏輯架構設計。


有這樣一個大型企業,它於20世紀開展了企業級數據倉庫建設,五年後進行了一系列改進優化,並與10年後建立了雙中心繫統,最終發展成為今天一個龐大的IT能力集群。與其他行業相似,這個企業同樣也有著一套成熟的IT類數據系統,包括平臺類產品的支撐。這個企業就是——中國登記結算。

中國登記結算的數據倉庫系統也稱之為——中央證券登記結算系統,它是我國第一個涵蓋滬深兩市證券登記結算數據的查詢、統計和分析平臺,其數據倉庫集成了滬深兩市的賬戶數據和登記、存管、清算、交收數據,包括所有交易所市場上市和退市證券的相關數據。它建立了涵蓋滬深兩市登記結算參與人與投資者的單一視圖,當時也是國內證券業涵蓋數據範圍最廣、有效數據容量最大的TB級數據倉庫。

中央證券登記結算數據倉庫的建成,將能夠更好地為證券監管部門的決策分析提供支持,增強證券登記結算系統的風險防範能力,促進證券市場持續穩定健康發展。同時,該系統的建成還為將來逐步向證券登記結算參與人和投資者提供賬戶、登記、存管、清算和交收數據查詢以及增值數據服務奠定了堅實的基礎,從而將大大提高中國結算的市場服務水平。

作為一個典型的數據類處理系統,中央結算自底向上包括數據源、數據交換預處理、數據平臺、應用支撐和統一門戶,同時還需要數據治理和監控管理的輔助作用。

從數據源來看,主要包括內部和外部兩方面。內部包括滬、深登記結算系統庫表數據、企業股份轉讓數據、開放式基金系統數據、擔保品管系統數據和統一賬戶系統信息;外部包括證券公司、投保中心、外部互聯網信息等;這些信息足以從一定程度上反映國民經濟。

作為數據交換和預處理,需要對不同來源信息進行去重、清洗,同時支持文件和接口的數據傳遞。構建集中統一的數據交換平臺是中國結算公司建立全國集中統一證券登記結算數據的基礎,後續能夠為市場參與各方提供現代化特色服務。

功能架構的核心能力必然是EDW數據模型,涉及到明細數據的輕度彙總、高度彙總和業務主題支撐。數據倉庫是面向主題的,其數據是按照一定的主題域進行組織。主題是指用戶使用數據倉庫進行決策時所關心的重點方面,一個主題通常與多個操作型信息系統相關。再有就是集成能力,數據倉庫的數據有來自於分散的操作型數據,將所需數據從原來的數據中抽取出來,進行加工與融合,統一與綜合之後才能進入數據倉庫。在加工的過程中必須消除數據的不一致性,以保證數據倉庫內的信息是關於整個企業的一致的全局信息。

  • ODS數據準備層,是業務層與數據倉庫的隔離層,是最接近數據源中數據的一層,數據源中的數據進過ETL後裝入本層。這一層主要解決一些數據質量問題和數據的完整度問題。ODS層的表通常包括兩類,一個用於存儲當前需要加載的數據,一個用於存儲處理完後的歷史數據。
  • DWD明細數據層,為DW層提供來源明細數據,提供業務系統細節數據的長期沉澱,為未來分析類需求的擴展提供歷史數據支撐。
  • DWS數據倉庫服務層,又稱數據集市層DM(Data Market),基於DW上的基礎數據,整合彙總成分析某一個主題域的服務數據,DWS是根據DWB層數據按各個維度ID進行粗粒度彙總聚合,如按交易來源,交易類型進行匯合。
  • ST層面向用戶應用和分析需求,包括前端報表、分析圖表、KPI、儀表盤、OLAP、專題等分析,面向最終結果用戶,適合作OLAP或報表模型。如ROLAP,MOLAP等,可根據DW層經過聚合彙總統計後的粗粒度事實表。

主題是與傳統數據庫的面向應用相對應的,是一個抽象概念,是在較高層次上將企業信息系統中的數據綜合、歸類並進行分析利用的抽象。每一個主題對應一個宏觀的分析領域。數據倉庫排除對於決策無用的數據,提供特定主題的簡明視圖。作為上層的業務應用,通常包括業務指標、固定報表、靈活查詢、多維分析和專題分析。企業通常會為了特定的應用目的或應用範圍,從數據倉庫中獨立出來的一部分數據,也可稱為部門數據或主題數據。

綜上所述,就描繪了一個典型的數據倉庫系統,中國結算滬、深兩市集中、統一的證券登記結算數據倉庫的建成,為加強和改進證券登記結算決策支持、風險管理、市場服務奠定了堅實的基礎,為證券登記結算體系履行好投資者持有證券事實確認者、投資者證券資產保管者、投資者證券賬戶管理者、交易達成後錢券清算交收組織者的職能具有重要的意義。可以全面反映並統一分析各參與主體在滬、深兩市的市場行為,增強證券登記結算體系的風險防範能力,促進證券市場持續穩定健康發展。

讚歎不已——就這樣一個典型的系統功能架構,支撐業務近20年。


分析世界講方案,為您帶來精彩的一頁;


分享到:


相關文章: