- TOP >
- ASp 東京都 の案件
- > データエンジニア（AWS×GCP）／マルチクラウ
求人・案件情報
データエンジニア（AWS×GCP）／マルチクラウドIaC構築・運用／九段下常駐
本日 15時29分 に公開
業務内容：- データレイク／ETL 基盤の構築
- AWS Glue（Apache Spark）による分散処理・ETL 開発
- S3／Lake Formation を用いたデータ管理・セキュリティ設計
- BigQuery を基盤とした DWH 環境整備
- AWS と GCP 間のデータ連携パイプライン最適化
- BigQuery によるデータモデリング・クエリ最適化
- Terraform によるマルチクラウド IaC 管理、環境差分管理・自動化
- Airflow 等を用いたワークフロー管理と CI/CD 整備
- データ品質テストの自動化
担当工程：
設計、構築、運用、パフォーマンスチューニング、CI/CD 整備、品質管理
スキル：
必須：AWS（S3、IAM、VPC 等）でのインフラ構築・運用経験、GCP（BigQuery、IAM、ネットワーク）での構築経験、BigQuery を用いた分析 SQL 実務経験、AWS Glue（PySpark）での ETL 開発・チューニング、Terraform による IaC 実践（マルチクラウドまたは複数環境）
尚可：Looker Studio 等による BI ダッシュボード構築、Airflow／MWAA でのジョブ管理、Delta Lake／Iceberg／Hudi 等を用いたデータレイクハウス設計、Kinesis／Firehose／Pub/Sub などのストリーミング処理、Python／Go／Java でのツール開発
稼働場所：
東京都（常駐）
その他：
業種：情報・通信・メディア
案件ID：356991
