秦皇島銀行在建設數據服務總線之前,存在如下情況或問題。(1)數據交換頻次和時效性差:隨著IT系統不斷建設,系統越來越多,系統之間的數據同步和交換越來越頻繁、時效性要求高。特別是大數據平臺的建設,對數據同步和交換的效率要求更高。(2)難以應對行內多樣化的數據形態及傳輸需求:不同的IT系統有著不同的要求,數據采集形式、數據格式、數據傳輸等均有所不同,數據交換形式包括聯機交換和批量交換。(3)缺乏數據交換的統一規范:主要包括數據格式、文件格式、文件命名、加密解密、傳輸協議、交換工具等等雜亂多樣,同時也導致系統功能定位不明確現象。(4)缺乏數據交換的統一管理:數據交換更多成為操作系統及底層技術實現,無法進行可視化監控、調度組織和管理,缺乏數據交換的安全性。
立即咨詢助力行業客戶迅速建立企業數據總線
方便的交換配置讓用戶更加聚焦業務價值實現
高效的數據交換效率更好釋放數據資產價值
提供實時/準實時/批量數據方式采集方式,對采集數據進行加工、集成、共享、分發;具備行內數據和外部數據采集/計費能力。可成為全行數據傳輸、交換、共享與服務中心,實現統一采集、統一管理、統一服務。
支持多種關系型數據庫(如MySql、Oracle、DB2或其他RDBMS),支持對接Hadoop平臺多種組件(Hive、Hdfs、Hase);支持各種文件傳輸(如SFTP)。采用插件化集成機制,針對市面上新出現的各種數據源,可迅速開發Reader端和Writer端程序插件進行集成,保證高擴展性和快速客戶化開發、交付能力。
每一種讀插件都有一種或多種切分策略,都能將作業合理切分成多個Task并行執行,單機多線程執行模型可以讓速度隨并發成線性增長。