什麼是資料架構?
資料架構是一種整合式基礎架構,可擷取系統內所有資料的端到端整合與管理,包括來源、儲存、管線、分析與應用程式。
「資料架構」中的隱喻「結構」是指將貴組織的資料視為單一整合網路層,而非孤島式的點對點連線集合。將資料視為網狀架構,可協助您更妥善地最佳化效能、改善資料行動性,並簡化資料作業。
實際上,資料架構是透過以資料為中心的 IT 架構方法,以及使用資料整合與管理軟體來定義新架構來建立。
為何資料架構現在很重要?
大數據被命名為下一個大事後大約十年,企業組織意識到,收集和儲存資料只是從中獲益的開始。隨處可見大數據的承諾,即改變遊戲規則的深度資訊、尖端體驗、新商業模式和人工智慧,都需要新的資料管理方法。這種方法整合了所有來源的資訊,並在需要時隨時隨地提供資料,無論使用者或端點為何,同時無論資料位於何處或傳輸中,都能確保資料安全。
Gartner 表示,命名資料架構是 2022 年最頂尖的技術趨勢之一,資料架構可以簡化組織的資料整合基礎架構,並建立可擴充的架構,以減少整合的挑戰。資料架構還能將資料管理工作減少高達 70%,從而加快實現價值的時間。
為何要使用 Data Fabric?
資料架構能讓資料跨就地部署、公有雲、私有雲和邊緣環境存取,進而釋放混和雲環境中大數據的隱藏潛力。
以下是資料架構可以解決的一些常見的資料管理挑戰:
- 以高效率方式儲存資料的需求,同時讓需要的使用者、客戶和自動化人員能夠存取資料
- 地理上分散的資料流、儲存解決方案和終端使用者
- 不相容的資料:結構化和非結構化、特定應用程式的資料、孤島式資料和傳統資料
- 服務依賴人工智慧和機器學習、即時分析和情境式客戶體驗的新一代資料密集型應用程式
- 優化進出IoT裝置和邊緣運算部署的資料流
- 確保資料安全並維持合規性
資料架構如何運作?
資料管理軟體將資料流、使用者、端點、儲存和網路架構整合到資料管理層中,以提供能見度和控制和管理介面。軟體可學習組織的整體資料資產,找出瓶頸,並提出改善效能與存取的建議。
透過軟體,資料工程師可看到高階檢視或深入研究,以提升個別使用案例的效能。該軟體還建立了一個共同的資料環境和一組 API,以與應用程式、資料流和使用案例整合。
Data Fabric 的要素為何?
資料架構通常包含以下層級:
- 資料管理:有助於監控系統健全狀況、資料安全性和網路最佳化。
- 資料擷取:為新引入的資料建立路徑和流程。
- 資料處理:清理、優化和轉換資料,使其為特定用途做好準備。
- 資料調度:確保僅將相關資料傳遞給使用者,幫助系統更有效率地運行。
- 資料探索:幫助在不同資料來源之間建立新的連結,釋放價值並指向新的深度資訊。
- 資料存取:讓各種使用者—應用程式、自動化、組織內的團隊或裝置—都能隨時存取資料,因此能夠順暢使用。
- 資料安全性: 監控並保護您組織內的資料,同時確保符合安全法規。
Data Fabric 的優勢
除了解決許多資料工程挑戰外,資料架構也有助於提供以下全組織優勢:
- 從資料中獲得更多價值: 資料架構旨在協助組織善用資料,例如:為客戶提供更好的體驗、尋找營運效率,並啟用新的商業模式。
- 更好地利用資源:資料架構透過提供組織間資料的高階檢視,並運用 AI 提出建議,藉此顯示成本與資源負載如何累積到各種使用案例中,進而為 IT 決策提供資訊。
- 提高靈活性和韌性:資料架構可以協助組織根據不斷變化的條件或新的現實情況進行擴展或調整,方法是預先建立改變的模型,並提供建立資料架構的一致基礎。
資料結構是否與資料湖泊類似?
許多組織選擇資料湖泊來解決資料存取問題,但資料湖泊是一種由上而下的方法,定義為擁有一個主資料庫。資料湖泊可以在串流和上傳方面創造額外的工作成果,並使資料更難存取和管理。此外,某些資料可能需要距離資料湖泊足夠遠,才能帶來高延遲。實際上,資料架構可以幫助組織從資料湖泊中獲得更多。
資料結構是否與資料虛擬化類似?
這兩個概念比對方更相輔相成。資料虛擬化為管理、移動和使用資料創造了一個介面。另一方面,資料架構是一種全方位的方法,可優化資料營運的各個部分:效能、成本、資源效率、安全性、成長和變更管理。
Data Fabric 使用案例
以下是一些企業如何利用資料架構來改善資料可存取性的範例:
- 大型零售商可以整合複雜的庫存和供應鏈資料,以做出關於生產和規劃的明智決策。
- IT 諮詢公司可以整合客戶支援請求的資料,並根據可用解決方案中的差距,重新制定銷售策略。
- 農夫可以將不同的資料流,如天氣預報、市場狀況和土壤狀況,納入關鍵決策中。
運用 Pure Storage 簡化資料架構
設定完全涵蓋混和雲環境的資料網狀架構,絕非小事。您必須在就地部署、公有雲、私有雲和邊緣環境中整合不同來源的資料,同時維持資料治理和安全性。
您的資料結構有落差,或想要建立自己的資料架構? Pure Storage 提供建立與支援現代化資料架構所需的解決方案:
- Pure1®: AI 驅動資料的儲存管理監控解決方案,可在整個技術堆疊中提供自駕儲存。
- Purity 作業環境:Pure Storage® FlashArray 整合式平台能夠以智慧方式管理資料中心、邊緣或雲端中的資料,並讓您簡化資料管理並消除儲存孤島。
- Pure Fusion™: Storage-as-Code 平台,將雲端作業模式帶入就地部署。輕鬆配置、管理和使用企業級儲存設備。
- Portworx®:完整的 Kubernetes 資料服務解決方案,為您的雲端原生應用程式提供支援。
- Pure Cloud Block Store™:多重雲端解決方案,提供順暢的資料行動性、彈性,以及跨雲端環境的一致使用者體驗。
透過簡化人們使用資料的方式,並與資料互動,Pure 讓創新者得以釋放企業資料中隱藏的潛力。