基于數據中臺的高校數據服務體系及快速應用構建研究
網絡安全與數據治理
陸劍江
(蘇州大學計算機科學與技術學院,江蘇蘇州215006)
摘要: 針對目前高校在數據集成、數據治理和數據服務等方面的問題,提出了基于數據中臺的解決方案,在數據的采集和加工處理中引入數據湖、主題層和專題層,并對數據中臺的整體架構設計、中臺內數據的分層設計、數據模型的構建、數據服務體系的設計進行了詳細闡述;對基于數據中臺的快速應用構建,提出了采用大中臺、微服務的系統建設方式,通過對系統進行解構,重新根據不同業務邏輯進行模塊化組裝,實現快速靈活構建業務系統。經過實際案例驗證,該研究對于高校如何建設數據中臺以及如何在中臺上開展各類數字應用建設提供了很好的范例。
中圖分類號:TP399文獻標識碼:ADOI: 10.19358/j.issn.2097-1788.2024.02.011
引用格式:陸劍江.基于數據中臺的高校數據服務體系及快速應用構建研究[J].網絡安全與數據治理,2024,43(2):73-77.
引用格式:陸劍江.基于數據中臺的高校數據服務體系及快速應用構建研究[J].網絡安全與數據治理,2024,43(2):73-77.
Research on university data service architecture and rapid application construction based on data platform
Lu Jianjiang
(School of Computer Science and Technology, Soochow University, Suzhou 215006, China)
Abstract: Aiming at the issue of data processing in data integration, data governance and data service in universities, this paper puts forward a solution based on data platform, which introduces data lake, subject layer and special subject layer in data collection and processing. The overall architecture design of the data platform, the hierarchical design of the data, the construction of data model and the design of data service architecture are described in detail. For the rapid application construction based on the data platform, this paper proposes to use the construction mode of large platforms plus micro services, which through deconstructing the system, and modular assembly is carried out according to different business logic to achieve constructing the systems rapidly and flexibly. By the verification of actual cases, it provides a good example for universities how to build a data platform and how to develop all kinds of digital application on the platform.
Key words : data platform; data integration; data lake; data service; data application
引言
隨著信息化的不斷深入,各種業務的數字化產生了前所未有的數據量,也生成了各種各樣的數據類型,這些給數據的共享和利用帶來了新的挑戰,尤其是在一些互聯網平臺上,每天產生的數據對業務提出了更高的要求,此時,需要有更加靈活的、能力更強的平臺來負責大量的數據處理[1]。傳統模式下,每個業務模塊僅會處理各自龐雜的數據,這樣不僅效率不高,還會產生很多重復的工作,由于每個業務模塊都是一個獨立的數據孤島,因此后續的數據交換和數據同步無法應對靈活多變的業務需求,而這種多樣性的業務對數據的要求更高,數據本身的復雜性、對海量數據處理的要求、數據處理的實時性等都需要有能力更強的數據平臺來應對[2]。高校的信息化發展已經進入了數字化和智能化的時代,各種業務基本完成了數字化改造,目前最大的問題是存在各種數據孤島,數據不能完全共享,各業務系統數據不能很好地為跨部門流程服務,無法處理非結構化數據,無法很好地支撐實時數據等[3]。
作者信息:
陸劍江
(蘇州大學計算機科學與技術學院,江蘇蘇州215006)
文章下載地址:http://m.viuna.cn/resource/share/2000005905
此內容為AET網站原創,未經授權禁止轉載。