- TOP >
- 運用 江東区 の案件
- > ハイブリッドデータ基盤構築／AWS×GCP・Bi
求人・案件情報
ハイブリッドデータ基盤構築／AWS×GCP・BigQuery・Terraform・Airflow
本日 09時24分 に公開
業務内容：- AWS Glue（PySpark）による分散ETL開発・パフォーマンスチューニング
- S3・Lake Formationを活用したデータレイク設計・ガバナンス・セキュリティ構築
- GCP BigQueryでのデータモデリング、パーティショニング・クラスタリングを含むSQL分析・クエリ最適化
- AWSからGCPへのデータ連携フロー設計・実装
- Terraformによるマルチクラウド環境のIaC自動化
- Airflowを用いたワークフロー管理、CI/CDパイプライン整備
- データ信頼性向上のためのテスト自動化
- CTO・リードエンジニアと共に全体アーキテクチャ設計方針策定
担当工程：
要件定義、システム設計、実装、テスト、運用・保守
スキル：
必須：AWS（S3、IAM、VPC等）でのインフラ構築・運用経験、AWS Glue（PySpark）でのETL開発経験、GCP（特にBigQuery）での構築・IAM・ネットワーク設定経験、BigQueryを用いた実務レベルのSQL分析経験、TerraformによるマルチクラウドIaC実装経験
尚可：Airflowでのワークフロー・CI/CD構築経験、データガバナンス設計経験、Pythonでのデータ処理経験
稼働場所：
東京都（出社メイン）
その他：
業種：情報・通信・メディア、ハイブリッドクラウド（AWS・GCP）環境でのデータ基盤構築プロジェクト、開始時期：随時（参画時期応相談）、プロジェクト期間：長期
案件ID：356015
