DEA-C01：AWS Certified Data Engineer - Associate データの取り込みと変換

全12問。各問に解説と選択肢ごとの解説がついています。

• 問1Web サイトのクリックストリームを、秒未満の遅延でリアルタイムに取り込み、複数のコンシューマーアプリケーションがそれ…
• 問2オンプレミスのリレーショナルデータベースから、既存データの移行に加えて、その後の変更（挿入・更新・削除）を継続的に A…
• 問3Amazon S3 のデータレイク上のデータを、クラスターの管理をせずサーバーレスで ETL 処理し、スキーマを扱いな…
• 問4大量の CSV ファイルに対する分析クエリが、スキャン量が多くコストと時間がかかっています。クエリのコストと性能を改善…
• 問5「Glue ジョブ → Lambda → Amazon Redshift へのロード」という依存関係のある複数ステップ…
• 問6既存の Apache Airflow の DAG で定義したデータパイプラインを、インフラ運用の手間をかけずにマネージ…
• 問7取り込み処理を担う AWS Lambda 関数が、トラフィックのスパイク時にスロットリングされ、ほかの重要な関数の同時…
• 問8データパイプラインのインフラ（Lambda・Step Functions・Glue ジョブ・IAM ロールなど）を、複…
• 問9ストリーミングで届くイベントデータを、コンシューマーのコードを書かずに、バッファリングしながらほぼリアルタイムで Am…
• 問10既存の Apache Spark / Hadoop エコシステム（独自ライブラリや細かなクラスター調整を含む）を活用し…
• 問11データパイプラインの完了・失敗を、複数の下流システムへ疎結合に通知しつつ、再処理のためにメッセージをバッファリングでき…
• 問12データパイプラインのコードとインフラ定義の変更を、テストとデプロイを自動化して継続的かつ安全に本番へ届けたいと考えてい…