求人・案件情報
SNS API取得からBigQueryロードまでのデータパイプライン構築/Python・Node.js・GCP対応
昨日 22時08分 に公開
業務内容:- 各種SNS APIを利用したデータ取得ロジックの実装
- レートリミットを考慮した抽出フローの設計・構築
- 取得したRawデータの整形とBigQueryへのロード処理実装
担当工程:
要件定義、設計、実装、テスト、デプロイ
スキル:
必須:PythonまたはNode.jsによるバックエンド開発経験(3年以上)、外部SNS API連携実装経験、BigQueryへのデータロード知識・経験、日本語での円滑なコミュニケーション能力
尚可:X API、Graph API等のSNS API使用経験、Cloud Functions等サーバーレス環境でのバッチ処理実装経験、ETL/データパイプライン設計経験
稼働場所:
フルリモート(東京都在住者歓迎)
その他:
業種:情報・通信・メディア、サービス業、データ基盤構築案件、開始時期:相談
案件ID:352996
