【Databricks/AWS・Python/フルリモート】GRデータ蓄積基盤のデータパイプライン構築

掲載終了8ヶ月前

【Databricks/AWS・Python/フルリモート】GRデータ蓄積基盤のデータパイプライン構築

750,000〜850,000/月

作業内容

GRデータ蓄積基盤の構築プロジェクトにて、Databricks on AWSを用いたデータパイプラインの設計・実装・運用を担当いただきます。 具体的には、S3を起点としたデータ取り込み、変換、蓄積処理のパイプライン化、IAM等の権限設計、ワークフローのジョブ管理、品質担保のためのテスト設計・実施を想定しています。 フルリモートでの稼働となり、商談は1回を予定しています。

必須スキル

フルリモート ・AWS上でのDatabricks実務経験(Azure Databricks経験のみでも可) ・Pythonでのデータ処理/ETL実装経験 ・AWS基盤の基本知識(S3、IAMの利用経験)

歓迎スキル

・データエンジニアリング案件におけるリーダーまたはテックリード経験 ・ジョブオーケストレーション(Databricks Jobs、Airflow など)の運用経験 ・品質管理や監視設計の実務経験

稼働条件

週5日 / フルリモート

面談回数

1

契約形態

業務委託(フリーランス)

開発環境

・クラウド:AWS(S3、IAM ほか) ・DWH/レイク:Databricks(Lakehouse) ・言語:Python ・その他:ジョブ管理、リポジトリ運用、監視/ログ基盤との連携

作業時間

9:30~18:30目安(応相談)

精算基準時間

140~180時間 (上下割)

募集回数

1回

募集背景

GRデータの利活用強化に伴い、レイクハウス基盤上でのパイプライン整備を加速するための増員募集です。 担当工程 基本設計,詳細設計,実装,テスト,運用・保守,マネジメント 募集人数 1人 チーム規模 2-5名 平均稼働時間 160時間前後/月を想定 現場の雰囲気 落ち着いたコミュニケーションで、技術選定や改善提案が歓迎される環境です。 案件担当のコメント Databricks経験を重視する案件です。Azureでの実績しかない方でも、AWSでのキャッチアップ意欲があればご提案可能です。

スキル

バックエンド:
インフラ:

企業名

サービス/プロジェクト名

詳細スケジュール/リリース時期

現場責任者の雰囲気

開発体制の詳細

詳細は面談でお伝えします。ご相談ください。

一部の情報は非公開の場合があります

この案件のおすすめポイント

  • フリーランス多数
  • 新技術に積極的
  • 安定稼働
  • 長期案件
  • 即日参画可能
案件について詳しく聞いてみませんか?

知りたい内容を選んでください(複数選択可)