- TOP >
- アーキテクト の案件
- > データ基盤構築／AWS×GCP：マルチクラウドE
求人・案件情報
データ基盤構築／AWS×GCP：マルチクラウドETL・DWH実装
本日 08時20分 に公開
業務内容：- AWS Glue（PySpark）を用いた ETL 開発およびパフォーマンスチューニング
- S3 と Lake Formation によるデータレイクのガバナンス・セキュリティ設計
- BigQuery を活用したデータウェアハウス構築、データモデリング、クエリ最適化
- AWS と GCP 間のデータ連携フローの設計・最適化
- Terraform によるマルチクラウド環境の IaC 自動化
- Apache Airflow を用いたワークフロー管理と CI/CD パイプライン整備
- テスト自動化によるデータ信頼性向上
- CTO・リードエンジニアと共同で全体アーキテクチャ設計支援
担当工程：
要件定義、設計、実装、テスト、CI/CD 構築、運用支援
スキル：
必須：
- AWS（S3、IAM、VPC 等）でのインフラ構築・運用経験
- GCP（特に BigQuery、IAM、ネットワーク）での構築経験
- BigQuery を用いた実務レベルの SQL 開発経験（パーティショニング・クラスタリング等）
- AWS Glue（PySpark）での ETL 開発経験
- Terraform による IaC 実践経験（マルチクラウドまたは複数環境）
尚可：
- データガバナンス・セキュリティ設計の実務経験
- 大規模データ基盤の運用・改善経験
稼働場所：
東京都（出社中心）
その他：
- 情報・通信・メディア業界向けのハイブリッドデータ基盤構築プロジェクト
- 参画時期は相談に応じます
案件ID：336553
