Python/自社サービスのデータレイク開発案件・求人

募集中3年前

Python/自社サービスのデータレイク開発案件・求人

〜950,000/月

作業内容

自社が展開しているインターネット広告代理店業における、各広告媒体が保有している膨大なデータを データレイクへ蓄積するプロダクトのサーバーサイド開発・運用・保守をお願いします。 【ポイント】 データレイクが取り扱うデータ量は数十TB/月を誇り、毎日数10億単位のレコードを蓄積しているため、 そんな大規模データと向き合った開発にチャレンジすることができます。 複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。 【開発チームと配属先について】 当事業部には現状で約60名のエンジニアが在籍しており、複数のチームに分かれて開発を進めています。 今回お願いしたいポジションは DSU (Data Solution Unit) というチームにおけるサーバサイドエンジニアです DSU では複数のプロダクトを管理しており、現在8名のエンジニアが在籍しています。 さまざまな技術領域を扱っているため、新技術・新領域へのチャレンジや、将来的に開発リーダーにチャレンジしたい方にもオススメです。 具体的には、下記のようなプロダクトを開発しています。 ・Infeed 領域の広告運用のための分析用プロダクト ・インターネット広告関連データをデータレイクに蓄積するプロダクト ・インターネット広告関連データが蓄積されたデータレイクを中心としたデータ基盤 (ETL/DWH) ・機械学習を用いたプロダクト ・掲載情報や実績情報を出力・レポーティングするための新しい分析基盤

必須スキル

Python ・Python の Web フレームワークを用いた開発経験:2年以上 ・Web 系サービスの開発経験:2年以上 ・AWS を利用した開発経験 ・Docker など、コンテナ技術を利用した開発経験 ・GitHub での PR を活用した開発経験

歓迎スキル

・外部 API を用いた開発経験 ・大規模データを扱った開発経験 ・Kubernetes など、コンテナオーケストレーションサービスを利用した開発経験 ・インターネット広告についての基礎知識

契約形態

業務委託契約(フリーランス)

開発環境

・AWS ・Docker ・Kubernetes ・Snowflake ・Python (FastAPI, Pyramid) ・Scala (Apache Spark) ・TypeScript (React, Next.js) ・Java (Spring Boot) ・GitHub ・Slack ・Asana など

精算基準時間

固定

募集回数

1回

企業名

サービス/プロジェクト名

詳細スケジュール/リリース時期

現場責任者の雰囲気

開発体制の詳細

詳細は面談でお伝えします。ご相談ください。

一部の情報は非公開の場合があります

案件について詳しく聞いてみませんか?

知りたい内容を選んでください(複数選択可)