數(shù)據高鐵項目規(guī)劃

第一步：建設廳在政務云上開通數(shù)據倉庫資源，為該市的公積金分配數(shù)據倉庫數(shù)據庫用戶名、密碼以及相關訪問權限。

第二步：該公積金負管理中心負責將業(yè)務生產庫中的雙貫標表實時同步推送至省建設廳數(shù)據倉相應的數(shù)據庫中。

第三步：省建設廳對公積金雙貫標數(shù)據進行檢查、分析，并做好與大數(shù)據局數(shù)據庫高鐵倉的對接。

解決方案規(guī)劃

為了確保數(shù)據的高速、完整歸集到“高鐵數(shù)據倉” ，美創(chuàng)科技通過自主研發(fā)的數(shù)據支撐平臺實現(xiàn)數(shù)據清洗、轉換、同步和加載工作。該平臺通過對業(yè)務系統(tǒng)數(shù)據進行標準化，向數(shù)據倉庫或大數(shù)據平臺提供高質量數(shù)據，支持異構數(shù)據遷移、基于數(shù)據庫日志的數(shù)據實時復制、ETL開發(fā)、分布式處理等功能。

具體方案如下：

一、準備一臺前置機，部署Oracle數(shù)據庫存放同步數(shù)據以及清洗后的29張表，同時部署數(shù)據挖掘同步系統(tǒng)，用來完成同步清洗工作。準備一臺服務器，部署Windows系統(tǒng)，主要用于對數(shù)據挖掘同步系統(tǒng)進行數(shù)據同步、抽取、轉換、清洗等工作任務的管理以及遠程運維。

二、在生產庫或者容災庫上部署數(shù)據挖掘同步系統(tǒng)客戶端；通過數(shù)據挖掘同步系統(tǒng)對公積金庫進行按照數(shù)據庫日志級別進行實時挖掘同步，同時在數(shù)據挖掘同步系統(tǒng)上進行數(shù)據表篩選，篩選出建設廳所需的雙貫表。利用數(shù)據挖掘同步系統(tǒng)篩選的雙貫標信息，通過數(shù)據倉提供的接口，將雙貫標初始化寫入數(shù)據倉。

客戶收益

數(shù)據實時同步，促進數(shù)據共享的實時、鮮活、快速

美創(chuàng)數(shù)據支撐平臺采用數(shù)據基于日志的數(shù)據實時同步技術，實現(xiàn)數(shù)據秒級同步，結合獨有的數(shù)據比對技術，讓數(shù)據歸集具有高鐵般的速度。

數(shù)據質量控制，保障數(shù)據共享的準確、優(yōu)質、高效

美創(chuàng)數(shù)據支撐平臺可以實施數(shù)據質量檢核規(guī)則，發(fā)現(xiàn)數(shù)據質量問題，持續(xù)監(jiān)控各系統(tǒng)數(shù)據質量波動情況以及數(shù)據質量規(guī)則占比，定期生成關鍵數(shù)據質量報告，掌握系統(tǒng)數(shù)據質量狀況。讓數(shù)據應用更加有成效，讓群眾得到更多實惠，服務更高效。