募集中3ヶ月前

【週４リモート/AWS・Databricks】ビッグデータ解析・分散処理基盤開発データエンジニア募集！

850,000/月

一部リモート

要確認

作業内容

自社サービスのデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、その推進をお願いできればと考えております。＜具体的な業務例＞・Databricks 上に構築された社内向けの新データ基盤の開発・運用・AWS 上に構築された旧データ基盤の運用・社内各所の要求に応じた dbt によるデータモデリング・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計・実装、運⽤フロー⾃動化の提案、実装・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど）に応じたデータセットの作成・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持

必須スキル

・pull request ベースでの Python 等のプログラム開発経験（5年以上）・データ基盤の設計/構築、または運用経験（3年以上）・SQL によるデータ分析やデータモデリングの経験（3年以上）・AWS もしくは GCPを利用したサービスの構築経験（3年以上）・dbtを用いたデータモデルやデータパイプラインの開発経験（1年以上）【あると望ましいスキル・経験】・データ基盤チームのチームリードの経験・Databricks, Snowflake などのプラットフォーム上に構築されたデータ基盤の開発・運用経験・Terraform による IaC の経験・Apache Spark 等の分散処理フレームワークを利用した開発経験・Apache Airflow などのワークフローオーケストレーションを利用した開発経験・アジャイル（スクラムベース）での開発経験

稼働日数

要確認

勤務形態

一部リモート

開発環境

AWS, GCP, Python, SQL

募集回数

1回

募集背景

★日本最大級の求人検索サービスを支える重要ポジションで高度な技術領域に挑戦できます ★週４リモート＆フレックスで柔軟な働き方が可能です！ ★ 最新技術（Databricks、dbt、Terraformなど）を活用した環境でスキルアップが可能です ★ プロダクトドリブンな組織で、要件定義から運用まで裁量を持って取り組めます ★業務委託で参画後、正社員としての採用についても前向きな企業様です！