SNSデータ収集・BigQuery格納パイプライン開発
作業内容
SNS上の投稿データをAPI経由で取得し、分析用基盤へ蓄積するデータパイプラインの実装を担当いただきます。各SNSのAPIを利用したデータ取得処理の実装、APIのレートリミットを考慮した効率的なデータ抽出フローの設計・構築、取得したRawデータを整形し、BigQueryへロードする処理の実装。格納後のSQL分析やBIツール化は別担当が行うため、「データの流し込み」に集中いただけます。
必須スキル
・Python または Node.js を用いたバックエンド開発経験（3年以上） ・外部API（SNS系APIなど）との連携実装の実務経験 ・BigQueryへのデータ格納（ロード）に関する知識・経験 ・日本語でのスムーズなコミュニケーション能力
歓迎スキル
・SNS API（X API / Graph API等）の利用経験 ・サーバーレス環境（Cloud Functions 等）でのバッチ処理実装経験 ・データパイプライン（ETL）の設計経験
稼働条件
週5日 / フルリモート
面談回数
1回
契約形態
業務委託(フリーランス)
開発環境
Python, FastAPI, pandas, Node.js, BigQuery, Google Cloud, Cloud Functions, Cloud Run, Workflows, GitHub, Docker
精算基準時間
64h-96h
募集回数
1回
募集背景
この案件は、新規プロジェクトの立ち上げに伴い、経験豊富なエンジニアを募集しています。チームは10名規模で、アジャイル開発を採用しています。現場の雰囲気は和やかで、コミュニケーションを大切にしています。
募集人数
2名を予定しており、即日参画可能な方を優先的にご案内いたします。経験年数は3年以上を想定しています。フロントエンド1名、バックエンド1名の募集となります。
企業名
大手IT企業の子会社で、安定した経営基盤を持っています。詳細は面談時にご案内いたします。上場企業グループの一員として、長期的なプロジェクトを多数抱えています。
チーム人数
チーム構成はフロントエンド3名、バックエンド5名、インフラ2名となっています。プロジェクトマネージャー1名、デザイナー2名も在籍しています。総勢13名のチームで開発を進めています。
現場の雰囲気
アジャイル開発を採用しており、チーム内のコミュニケーションを大切にしています。週1回の定例会議があり、意見交換が活発です。リモートワークも可能で、柔軟な働き方ができます。
この案件を掲載しているエージェントについて
ROSCA freelance(ロスカフリーランス)
運営会社：ROSCA株式会社案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）