原始数据对业务有用,但如果您能保证数据质量、进行富化并完成转换,业务价值会更高!处理数据有两种方式:批处理和流式处理。让我们来看看围绕这两种方式的一些关键概念。
本练习是课程的一部分
通过我们的互动练习之一,将理论转化为实践
学习本章后,您将能够解释什么是现代数据架构,以及其关键需求与组成部分。您还将回顾多种现有的数据架构类型,从 Lambda 架构到 Data Mesh。
了解现代数据架构的不同组件与层次——从数据摄取到数据服务。熟悉各层的不同范式与方法,以及用于实现现代数据解决方案的一些云服务,获得贴近实务的经验。
当前练习
深入了解现代数据架构中的横向组件,涵盖数据治理、元数据、数据安全与可观测性等关键方面。通过掌握这些要素,您将能够在保持高数据与服务标准的同时,设计出稳健、安全且高效的数据平台。
学习如何管理工作流、理解云服务成本,并创建现代数据设计。本章将帮助您使用 Apache Airflow 等工具,并介绍节省云成本的方法。完成后,您将了解如何为企业构建并评估高质量的数据系统。