【Databricks/Python/Spark/フルリモート】某エンド企業データパイプライン移行PJ

掲載終了26日前

【Databricks/Python/Spark/フルリモート】某エンド企業データパイプライン移行PJ

550,000〜750,000/月

作業内容

既存のSPARKパイプラインについて、現状の調査と仕様の整理を行います。 その後、DatabricksへのETLパイプラインの移行と実装を進めます。 シルバーおよびゴールドレイヤーにおけるデータ変換処理の開発とテストを担当し、 移行後の動作確認および品質保証を行います。

必須スキル

DWHまたはデータパイプラインの開発・運用経験がある方。 Pythonを用いたデータ処理の実務経験がある方。 SQLによるデータ加工・集計の実務経験がある方。 Apache Spark / PySparkの使用経験がある方。 Databricksの使用経験がある方。 複数名チームでのプロジェクト参画経験がある方。

歓迎スキル

シルバーデータ/ゴールドデータの設計・開発経験がある方。 アジャイル開発やスクラム開発の経験がある方。

稼働条件

週5日 / フルリモート

契約形態

業務委託(フリーランス)

開発環境

DWH、Python、SQL、Apache Spark、PySpark、Databricks

募集回数

1回

スキル

企業名

サービス/プロジェクト名

詳細スケジュール/リリース時期

現場責任者の雰囲気

開発体制の詳細

詳細は面談でお伝えします。ご相談ください。

一部の情報は非公開の場合があります

案件について詳しく聞いてみませんか?

知りたい内容を選んでください(複数選択可)