求人・案件情報
エンタープライズSaaSプロダクト:データパイプライン設計・構築・最適化/データエンジニア/東京都
業務内容:エンタープライズSaaSプロダクトにおけるデータパイプラインの設計、構築、および最適化を担当する。様々な外部データソースとのデータ連携のための処理の実装。データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築。
担当工程:
データパイプラインの設計、構築、最適化
外部データソースとのデータ連携処理の実装
データ品質管理プロセスの設計と実装
データパイプラインの健全性監視システムの構築
スキル:
必須:
- Pythonを用いたデータ処理の実務経験(3年以上)
- Git および Github/Gitlab を利用した開発経験(3年以上)
- GCP を用いた DWH、データレイク、データパイプライン構築の実務経験
- SQL を用いたデータ操作、分析、最適化の実務経験
- バッチ処理およびストリーミング処理を含むデータパイプラインの設計、構築、運用の実務経験
尚可:
- ディメンショナルモデリングなどのデータモデリング手法を用いた DWH 設計の実務経験
- BI ツールを活用したデータ分析、インサイト抽出、ビジネス上の意思決定支援の経験
- RAG を用いた AI Agent の開発経験
その他:
- 勤務地:東京都
- 単価:72万円(スキル見合い)
- 稼働時間:10:00~19:00
- 期間:2023年6月または7月から
- 面談:1回予定(WEB)
案件ID:242590