募集中1ヶ月前
【Python/dbt/フルリモート】Youtubeデータ取得バッチ基盤リファクタリングおよびdbt移行業務
845,000〜945,000/月
作業内容
【募集背景】 ライブ配信事業におけるYoutubeデータ取得基盤のリファクタリングおよびdbt移行を推進するための増員となります。 【作業内容】 ・StepFunctionsベースの既存バッチをk8sコンテナベース構成へ移行いたします。 ・バッチシステムからdbt部分を分離いたします。 ・既存バッチの処理フローを整理し、運用負荷軽減と可読性向上を図ります。 ・Youtubeの既存バッチの保守作業を行います。 ・新バッチの設計および開発を行います。 【求める人物像】 ・既存システムの構造を理解しながら主体的に改善提案ができる方を求めております。 ・バッチ処理やデータ基盤に関する知見を活かし、周囲と連携しながら業務を進められる方を求めております。 【ポジションの魅力】 ・ライブ配信事業におけるデータ基盤の中核部分の改善に携わることができます。 ・k8sコンテナベース構成やdbtなどモダンなデータ基盤技術に関わる経験を積むことができます。 【開発環境】 ・Python ・dbt ・AWS ・k8sコンテナ基盤 ・GitHub
必須スキル
フルリモート ・Pythonでのバッチ開発経験 ・スクレイピング系の開発経験 ・dbtの開発経験 ・ETLの開発経験 ・AWSでの開発経験 ・GitHubを利用した開発経験
歓迎スキル
・Goでのバッチ開発経験 ・Snowflakeを用いた開発経験
稼働条件
週5日 / 常駐
契約形態
業務委託
募集回数
1回
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
3件以上の応募でご希望の条件の案件に参画しやすくなります
人気案件は申し込みが集中します。ご相談はお早めに！
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）