|
在任何數(shù)據(jù)中心建設(shè)中，數(shù)據(jù)集成總是項目中的技術(shù)難點和主要成本所在，其根源在于多個系統(tǒng)和數(shù)據(jù)的差異性較大，以及對于數(shù)據(jù)實時性要求越來越高。數(shù)字化潮流全面興起，數(shù)據(jù)碎片化現(xiàn)象更加突出，滿足數(shù)據(jù)實時性要求，同時降低成本，針對用戶需求，美創(chuàng)數(shù)據(jù)支撐平臺迎來全新升級。 數(shù)據(jù)支撐平臺是美創(chuàng)科技數(shù)據(jù)治理方案中必不可少的工具支撐，平臺集數(shù)據(jù)抽取、清洗、轉(zhuǎn)化、裝載于一體，是通過對企業(yè)業(yè)務(wù)系統(tǒng)數(shù)據(jù)進行標(biāo)準(zhǔn)化，向數(shù)據(jù)倉庫或大數(shù)據(jù)分析平臺提供高質(zhì)量數(shù)據(jù)的綜合性平臺。
此次數(shù)據(jù)支撐平臺全新版本，在敏捷性、便捷性、可靠性等方面進行大幅升級，以多源異構(gòu)數(shù)據(jù)支持、非入侵式增量采集技術(shù)、簡單易操作的圖形化設(shè)計界面、豐富轉(zhuǎn)化組件、以及異常處理和自恢復(fù)等能力優(yōu)勢，進一步提高數(shù)據(jù)共享與交換效能，為敏捷數(shù)字化轉(zhuǎn)型奠定基礎(chǔ)。 一、產(chǎn)品功能◎ 支持數(shù)據(jù)全量靜態(tài)抽取及增量實時同步； ◎ 支持各類異構(gòu)數(shù)據(jù)源實時同步； ◎ 數(shù)據(jù)清洗與轉(zhuǎn)化：用戶通過對系統(tǒng)數(shù)據(jù)轉(zhuǎn)化組件進行拖曳及配置，即可完成相應(yīng)ETL的開發(fā)工作； ◎ 支持元數(shù)據(jù)管理，包括：基于XML文件、基于數(shù)據(jù)庫的元數(shù)據(jù)管理； ◎ 內(nèi)置針對不同數(shù)據(jù)問題的質(zhì)檢規(guī)則模型，提供整體數(shù)據(jù)質(zhì)量分析報告； ◎ 提供完整的數(shù)據(jù)治理監(jiān)控大屏，整個數(shù)據(jù)治理過程可視化呈現(xiàn)。 二、產(chǎn)品優(yōu)勢
1. 豐富數(shù)據(jù)源支持及異構(gòu)數(shù)據(jù)同步 支持各種主流關(guān)系型數(shù)據(jù)庫和大數(shù)據(jù)平臺、各種類型數(shù)據(jù)文件，滿足用戶實際環(huán)境數(shù)據(jù)源的多樣性。
2. 非入侵式增量采集技術(shù) 非入侵式增量數(shù)據(jù)采集技術(shù)，通過對于源端生產(chǎn)庫的日志文件進行解析，實時獲取增加數(shù)據(jù)。數(shù)據(jù)抽取的同時，保證對于源端無壓力，保證數(shù)據(jù)傳輸?shù)膶崟r性。 3. 內(nèi)置豐富轉(zhuǎn)化組件 內(nèi)置多達200多種數(shù)據(jù)轉(zhuǎn)化組件，以滿足數(shù)據(jù)清洗、加工、統(tǒng)計等各種使用場景。 4. 異常處理及自恢復(fù) 對系統(tǒng)核心組件實時多角度監(jiān)控，一旦發(fā)生故障，自動進行諸如：網(wǎng)絡(luò)重連、進程重啟、系統(tǒng)恢復(fù)等操作，以保證系統(tǒng)穩(wěn)定運行，降低整體系統(tǒng)維護工作量。 5. 內(nèi)存流式處理技術(shù) 采用內(nèi)存流式處理技術(shù)，以應(yīng)對源端大數(shù)據(jù)量及復(fù)雜數(shù)據(jù)轉(zhuǎn)換場景，通過流水線式的處理機制，將處理流程整體處理時間壓縮到與單個組件的處理時間上，實現(xiàn)數(shù)據(jù)實時同步秒級延時。 6. 簡潔易用 圖形化抽取流程設(shè)計，內(nèi)置大量可視化圖形轉(zhuǎn)換組件，用戶無需進行任何腳本語言編寫，通過拖拽方式即可實現(xiàn)數(shù)據(jù)集成的快速開發(fā)和部署。 適用場景 ：數(shù)據(jù)歸集、數(shù)據(jù)同步、數(shù)據(jù)實時采集、異構(gòu)數(shù)據(jù)源同步、數(shù)據(jù)上云、數(shù)據(jù)回流等。
三、應(yīng)用成效美創(chuàng)數(shù)據(jù)支撐平臺在實踐檢驗中交出了一張優(yōu)異的成績單，穩(wěn)定性、可管理性、拓展性、靈活性均得到用戶認可，成功賦能用戶數(shù)據(jù)治理工作。 在醫(yī)保局—醫(yī)療保障基金綜合監(jiān)管系統(tǒng)建設(shè)中，美創(chuàng)數(shù)據(jù)支撐平臺完成對醫(yī)保參保庫、資源庫、結(jié)算庫，稽核庫、異地就醫(yī)等各類業(yè)務(wù)數(shù)據(jù)庫的歷史全量數(shù)據(jù)抽取及增量數(shù)據(jù)實時采集工作，為醫(yī)療保障數(shù)據(jù)大腦和醫(yī)療保障基金綜合分析提供穩(wěn)定、精準(zhǔn)、實時的數(shù)據(jù)保障。
此外，在衛(wèi)健委、港口、人社等行業(yè)中，數(shù)據(jù)支撐平臺依靠先進的底層架構(gòu)設(shè)計，無侵入、可續(xù)傳、實時完整的數(shù)據(jù)采集能力，完成各類業(yè)務(wù)系統(tǒng)的數(shù)據(jù)采集以及挖掘，在時效性方面達到秒級同步，有效為各項數(shù)據(jù)業(yè)務(wù)創(chuàng)新提供能力支撐。 |
|
|
