- TOP >
- インフラエンジニア の案件
- > Python／BigQuery／フルリモート：S
求人・案件情報
Python／BigQuery／フルリモート：SNSデータパイプライン開発
本日 19時52分 に公開
業務内容：SNSの投稿データをAPIで取得し、レートリミットを考慮した抽出フローを設計・構築。取得したRawデータを整形し、BigQueryへロードするパイプラインを実装します。
- SNS API（X API / Graph API 等）からのデータ取得
- レートリミット考慮のデータ抽出フロー設計
- データ整形・ETL処理
- BigQuery へのデータロード
担当工程：
要件定義、設計、実装、テスト
スキル：
必須：PythonまたはNode.jsでのバックエンド開発経験（3年以上）、外部SNS API連携実装経験、BigQueryへのデータロード経験
尚可：SNS API（X API / Graph API 等）利用経験、サーバーレス環境（Cloud Functions 等）でのバッチ処理実装経験、データパイプライン（ETL）設計経験
稼働場所：
東京都（フルリモート）
その他：
使用PCは自己所有、情報・通信・メディア領域のデータ処理案件
案件ID：349535
