求人・案件情報
データエンジニア／AWS×GCP／データレイク・ETL基盤構築（東京都常駐）
本日 15時00分 に公開
業務内容：・データレイクおよびETL基盤の構築
・AWS Glue（Apache Spark）を用いた分散処理・ETL開発
・S3／Lake Formationによるデータ管理・セキュリティ設計
・BigQueryを活用したDWH環境整備
・AWSからGCPへのデータ連携パイプライン最適化
・BigQueryでのデータモデリング・クエリ最適化
・Terraformを使用したマルチクラウドIaC構築・環境差分管理
・Airflow等によるワークフロー管理とCI/CD整備
・データ品質テストの自動化
担当工程：
・要件定義／設計／実装／テスト／運用・保守
スキル：
必須：
・AWS上でのインフラ構築・運用経験（S3・IAM・VPC等）
・GCP（特にBigQuery・IAM・ネットワーク設定）での構築経験
・BigQueryを用いた分析SQL実務経験（パーティショニング・クラスタリング等）
・AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング
・TerraformによるIaC実践（マルチクラウドまたは複数環境）
尚可：
・Looker Studio等によるBIダッシュボード構築
・Airflow／MWAAでの複雑ジョブ管理
・Delta Lake／Iceberg／Hudiを用いたデータレイクハウス設計
・Kinesis／Firehose／Pub/Subによるストリーミング処理
・Python／Go／Javaでのツール開発
稼働場所：
東京都（常駐）
その他：
業種：情報・通信・メディア
勤務時間：10:00〜19:00
年齢制限：30代まで
外国籍不可
求められる人物像：情熱を持ち自発的に課題解決できる方、コミュニケーションスキルが高い方、勤怠に問題のない方
案件ID：353317
