DWH分析基盤設計構築(Python/AWS/Spark)
この案件を3行でまとめると
- 位置情報ビッグデータ分析基盤の設計・構築を担当し、移動体データの評価・比較やデータ調達支援を行い、位置情報データ処理ソリューションの活用を推進します。
- スケーラブルなデータパイプラインやETL基盤の構築、AWS環境での位置情報データ分析やCI/CDシステム構築、機械学習モデルを活用した予測分析を行います。
- 高単価で5年以上の経験を活かし、AWS・Sparkを駆使したスキルをさらに磨き、千代田区神田でハイブリッド勤務が可能です。
作業内容
位置情報ビッグデータ分析基盤において、移動体の地理空間データの評価・比較やデータ調達支援、位置情報データ処理ソリューションの設計・開発を担当。 スケーラブルなデータパイプラインおよびETL基盤の構築、大規模位置情報データ処理環境の設計・改善、AWS環境での位置情報データ分析やCI/CDシステム構築、機械学習モデルを活用した予測分析、関連ドキュメント作成まで一貫して対応いただきます。 データエンジニアとして5年以上の経験と、大規模データ処理・データパイプライン構築・AWSおよびSparkを用いた開発経験を持つエンジニア向けの高単価案件です。
必須スキル
DBエンジニアとしての実務経験5年以上, 要件定義からの一連の開発工程の経験, 大規模データの処理経験, データパイプラインおよびデータ処理基盤の構築経験, AWS環境での開発経験, Apache Sparkなどのビッグデータフレームワークの利用経験, Python、Java、SQLを用いた開発経験」「LinuxおよびBashの利用経験」「データベースおよびサーバーサイドの設計・実装経験
歓迎スキル
AirflowやStep Functions、Dagsterなどのワークフローオーケストレーションツールの利用経験がある方, DockerやKubernetes(特にEKS)を用いたコンテナ・オーケストレーションの経験がある方, GeoJSONやShapefile、OSM、PBFなどの空間データ形式に関する知識がある方, PostgreSQLやPostGIS、pgRoutingを用いた開発・運用経験がある方, DWHやレイクハウスアーキテクチャに関する知見をお持ちの方, PM補佐や開発リーダーとしてのマネジメント経験がある方, 顧客対応や要件定義など上流工程の経験がある方
面談回数
1回
契約形態
業務委託(フリーランス)
開発環境
Java, Python, SQL, RestAPI, Shell, AWS, Linux, Kubernetes, Docker, EC2
作業時間
09:00 〜 18:00
募集回数
1回
職種・ポジション
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
この案件のおすすめポイント
- 千代田区神田でハイブリッド勤務が可能で、通勤の負担を軽減しつつ、オフィスでの協働も実現でき、柔軟な働き方を実感できます。
- 高単価(800,000円〜850,000円/月)で、5年以上の経験を活かし、AWS・Sparkを駆使したスキルをさらに磨き、業界トップレベルのデータエンジニアとしての価値を高められます。
- 位置情報ビッグデータを扱うプロジェクトで、地理空間データの評価・比較やデータ調達支援を行い、実務経験をさらに深められます。
よくある質問
案件について詳しく聞いてみませんか?
知りたい内容を選んでください(複数選択可)
