1. 程式人生 > >Pandora資料工廠之資料服務

Pandora資料工廠之資料服務

資料服務

一、背景概述

​ 隨著企業IT建設的快速發展,企業內部系統越來越多,資料分佈也越來越分散。為了實現對各系統大資料傳輸過程的高效、可靠、可監控,以及對整個傳輸過程中的可管理,公司研發設計了一個通用的大資料服務平臺,把原本各個系統之間直接的資料互動抽取出來,通過底層統一的傳輸平臺來具體完成傳輸過程,從而將底層的傳輸問題和具體的業務處理過程分離開,形成系統的鬆耦合分層架構,從而實現對系統資源的可複用,以及業務系統的良好擴充套件性。

​ 大資料服務平臺作為公共基礎架構的一個基礎技術平臺。旨在提高大量資料傳輸的管理水平,加強檔案傳輸可靠性、安全性和高效性,並對檔案傳輸提供有效的監控和管理,降低系統與傳輸產品之間整合的複雜度,最終實現生產業務系統間的檔案傳輸。

​ 大資料服務平臺提供集中方式的易用的管理介面,能夠方便地通過中心管理伺服器,管理各個分散的資料傳輸節點,包括各應用系統之間的批量資料交換任務,並且能夠查詢到單個檔案的傳輸狀態,能夠概括展示平臺自身的執行狀態。資料平臺,強化資料量儲存和分析能力。解決好上游資料的匯聚和分發,資料平臺將具備實時分析和預測的能力。通過大資料服務平臺向下遊提供統一、規範、安全、可靠的資料服務,與業務深入結合,資料平臺會催生業務創新。

二、分層架構

在這裡插入圖片描述

三、整體架構

在這裡插入圖片描述

四、功能架構

在這裡插入圖片描述

原創詩詞一首

          滕王閣序
滕王高閣對江流,歲改人更幾度秋?
千載風雲憑誰起,萬里江山使人愁。
自古英雄皆寂寞,從來豪情易白頭。
人世幾回傷往事,唯見西山枕寒流。