点と点をつなぐ
データパイプラインはデータを処理するために使われます。第1章の最後に、データパイプラインを構築するフレームワークの一つである ETL(Extract、Transform、Load)について学びました。今学んだデータ処理タスクは、実はこのフレームワークに対応しており、抽出・変換・読み込みのいずれかの操作に分類できます。
「保存」と「読み込み」は通常は逆の意味を持ちますが、データエンジニアリングの文脈では同じものとして扱われます。これは、データを保存するということは、パイプラインの次のステップにデータを渡すことに他ならないからです。
データ処理タスクを、抽出・変換・読み込みの操作に正しく分類できますか?
この演習はコースの一部です
