データ基盤エンジニア Youtubeデータ取得バッチ基盤リファクタリングおよびdbt移行業務

募集中2ヶ月前

データ基盤エンジニア Youtubeデータ取得バッチ基盤リファクタリングおよびdbt移行業務

1,000,000〜1,050,000/月

作業内容

ライブ配信事業における、Youtubeのデータ取得バッチ基盤リファクタリングおよびdbt移行に携わって頂きます。目的はStepFunctionsベースの既存バッチをk8sコンテナベース構成へ移行し、バッチシステムからdbt部分の分離、既存運用負荷軽減・可読性向上です。業務内容はYoutubeの既存バッチの保守、StepFunction管理dbtの分離、既存バッチの処理フローの整理、新バッチ開発です。

必須スキル

・Pythonバッチ開発経験 ・dbt, ETLの開発経験 ・AWSでの開発経験 ・GitHubを利用した開発経験

歓迎スキル

・Goバッチ開発経験 ・Snowflake開発経験

稼働条件

週5日 / フルリモート

面談回数

1

契約形態

業務委託(フリーランス)

作業時間

11:00-20:00

募集回数

1回

職種・ポジション

スキル

バックエンド:
インフラ:

企業名

サービス/プロジェクト名

詳細スケジュール/リリース時期

現場責任者の雰囲気

開発体制の詳細

詳細は面談でお伝えします。ご相談ください。

一部の情報は非公開の場合があります

案件について詳しく聞いてみませんか?

知りたい内容を選んでください(複数選択可)