求人・案件情報
データエンジニア／AWS×GCP マルチクラウド／データレイク・ETL基盤構築・運用
本日 11時28分 に公開
業務内容：- データレイク・ETL基盤の設計・構築・運用
- AWS Glue（Apache Spark）を用いた分散処理・ETL開発
- S3・Lake Formationによるデータ管理・セキュリティ設計
- BigQueryを活用したDWH環境整備・データモデリング・クエリ最適化
- AWS ↔ GCP間のデータ連携パイプラインの構築・最適化
- TerraformによるマルチクラウドIaC実装・環境差分管理・自動化
- Airflow等を用いたワークフロー管理とCI/CDパイプライン整備
- データ品質テストの自動化
担当工程：
- 要件定義、設計、実装、テスト、運用・保守
スキル：
必須：
- AWS（S3・IAM・VPC等）でのインフラ構築・運用経験
- GCP（特にBigQuery・IAM・ネットワーク設定）での構築経験
- BigQueryを用いた分析SQL実務経験（パーティショニング・クラスタリング含む）
- AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング経験
- TerraformによるIaC実践（マルチクラウドまたは複数環境）
尚可：
- Looker Studio等によるBIダッシュボード構築
- Airflow／MWAAでのジョブ管理経験
- Delta Lake・Iceberg・Hudi等を活用したデータレイクハウス設計
- Kinesis／Firehose／Pub/Sub等のストリーミング処理経験
- Python／Go／Javaでのツール開発経験
稼働場所：
東京都内（常駐）
その他：
- 業種：情報・通信・メディア
- 開始時期：2025年1月〜（長期）
- 勤務時間：10:00〜19:00
- 年齢制限：30代まで
- 人数：1名
- 求める人物像：課題解決に情熱を持ち自発的に行動できる方、コミュニケーションスキルが高く勤怠に問題のない方
案件ID：330838
