エンド直【Python / BigQuery / フルリモート] BigQueryのデータパイプライン開発

作業内容
SNS上の投稿データをAPI経由で取得し、分析用基盤(BigQuery)へ蓄積するデータパイプラインの実装をご担当いただきます。 各SNSのAPIを利用し、レートリミットを考慮した効率的なデータ抽出フローの設計・構築、およびRawデータの整形からBigQueryへのロードまでを行います。 SQL分析等は別担当が担当するため、データ投入に特化し、開発効率を重視して自走できる方を求めています。
必須スキル
・PythonまたはNode.jsを用いたバックエンド開発経験3年以上の方 ・外部API(SNS系APIなど)との連携実装の実務経験がある方 ・BigQueryへのデータ格納(ロード)に関する知識・経験がある方
歓迎スキル
・SNSAPI(XAPI/GraphAPI等)の利用経験がある方 ・サーバーレス環境(CloudFunctions等)でのバッチ処理実装経験がある方 ・データパイプライン(ETL)の設計経験がある方
勤務形態
フルリモート
勤務地
新橋駅
開発環境
Node.js, Python, SQL
作業時間
要相談
精算基準時間
要相談
募集回数
1回
募集背景
この案件は、新規プロジェクトの立ち上げに伴い、経験豊富なエンジニアを募集しています。チームは10名規模で、アジャイル開発を採用しています。現場の雰囲気は和やかで、コミュニケーションを大切にしています。
募集人数
2名を予定しており、即日参画可能な方を優先的にご案内いたします。経験年数は3年以上を想定しています。フロントエンド1名、バックエンド1名の募集となります。
企業名
大手IT企業の子会社で、安定した経営基盤を持っています。詳細は面談時にご案内いたします。上場企業グループの一員として、長期的なプロジェクトを多数抱えています。
チーム人数
チーム構成はフロントエンド3名、バックエンド5名、インフラ2名となっています。プロジェクトマネージャー1名、デザイナー2名も在籍しています。総勢13名のチームで開発を進めています。
現場の雰囲気
アジャイル開発を採用しており、チーム内のコミュニケーションを大切にしています。週1回の定例会議があり、意見交換が活発です。リモートワークも可能で、柔軟な働き方ができます。
案件について詳しく聞いてみませんか?
知りたい内容を選んでください(複数選択可)