求人・案件情報
ハイブリッドデータ基盤構築/AWS×GCP/Terraform・BigQuery実装
本日 01時48分 に公開
業務内容:- AWS Glue(Apache Spark)による分散処理・ETL開発
- S3・Lake Formation を活用したデータガバナンス・セキュリティ設計
- GCP BigQuery を用いたデータモデリング・クエリ最適化
- AWS から GCP へのデータ連携フロー構築
- Terraform によるマルチクラウド環境の自動化
- Airflow 等を用いたワークフロー管理と CI/CD 整備
- データ基盤全体のアーキテクチャ設計支援
担当工程:
設計、構築、運用、保守、CI/CDパイプライン構築、オーケストレーション
スキル:
必須:AWS(S3、IAM、VPC等)のインフラ構築・運用経験、GCP(BigQuery、IAM、ネットワーク設定)経験、BigQueryでの分析SQL(パーティショニング/クラスタリング)経験、AWS Glue(PySpark)でのETL開発・チューニング経験、TerraformによるIaC実践経験(マルチクラウド)
尚可:大規模データ基盤の設計・運用経験、Airflow等のオーケストレーションツール使用経験、CI/CDパイプライン構築経験
稼働場所:
関東(リモート勤務相談可)
その他:
業種:情報・通信・メディア、データ基盤構築案件、開始時期は相談可能、長期参画歓迎
案件ID:331365
