2データの取り込みと処理

• 2.1パイプラインの計画と構築

  データソースとシンクの定義、変換とオーケストレーションのロジック、バッチとストリーミング（ウィンドウ・遅延データ）の処理、そして適切な処理サービス（Dataflow・Apache Beam・Dataproc・Cloud Data Fusion・BigQuery・Pub/Sub・Spark・Kafka）の選択を理解します。

• 2.2パイプラインのデプロイと運用化

  ジョブの自動化とオーケストレーション（Cloud Composer・Workflows）、データクレンジングとAIによるデータエンリッチメント、新しいデータソースとの統合、そして CI/CD によるパイプラインの継続的デリバリーを理解します。