求人・案件情報
ハイブリッドデータ基盤構築/AWS×GCP・Terraform・Airflow対応
本日 10時25分 に公開
業務内容:- AWS Glue(PySpark)を用いた分散処理・ETL開発
- S3、Lake Formationによるデータガバナンス・セキュリティ設計
- GCP BigQueryでのデータモデリング・クエリ最適化
- AWSからGCPへのデータ連携フローの最適化
- Terraformによるマルチクラウド環境の自動化
- Airflow等を用いたワークフロー管理・CI/CDパイプライン整備
- CTO/リードエンジニアと共同で基盤全体のアーキテクチャ設計策定
担当工程:
要件定義、設計、実装、テスト、運用保守までの全工程を担当
スキル:
必須:
- AWS(S3、IAM、VPC等)でのインフラ構築・運用経験
- GCP(特にBigQuery)での構築経験およびIAM・ネットワーク設定経験
- BigQueryを用いた分析SQL実務経験(パーティショニング、クラスタリング等)
- AWS Glue(PySpark)でのETL開発・パフォーマンスチューニング経験
- TerraformによるIaC実践経験(マルチクラウドまたは複数環境)
尚可:
- 大規模データ基盤の設計・運用経験
- CI/CDパイプライン構築経験
- データガバナンス・品質保証に関する知見
稼働場所:
東京都(出社メイン)
その他:
業種:情報・通信・メディア
開始時期:随時開始可能
参画期間:随時~長期(応相談)
案件ID:345457
