DWH分析基盤設計構築（Python／AWS／Spark）
作業内容
位置情報ビッグデータ分析基盤において、移動体の地理空間データの評価・比較やデータ調達支援、位置情報データ処理ソリューションの設計・開発を担当。 スケーラブルなデータパイプラインおよびETL基盤の構築、大規模位置情報データ処理環境の設計・改善、AWS環境での位置情報データ分析やCI/CDシステム構築、機械学習モデルを活用した予測分析、関連ドキュメント作成まで一貫して対応いただきます。 データエンジニアとして5年以上の経験と、大規模データ処理・データパイプライン構築・AWSおよびSparkを用いた開発経験を持つエンジニア向けの高単価案件です。
必須スキル
DBエンジニアとしての実務経験5年以上, 要件定義からの一連の開発工程の経験, 大規模データの処理経験, データパイプラインおよびデータ処理基盤の構築経験, AWS環境での開発経験, Apache Sparkなどのビッグデータフレームワークの利用経験, Python、Java、SQLを用いた開発経験」「LinuxおよびBashの利用経験」「データベースおよびサーバーサイドの設計・実装経験
歓迎スキル
AirflowやStep Functions、Dagsterなどのワークフローオーケストレーションツールの利用経験がある方, DockerやKubernetes（特にEKS）を用いたコンテナ・オーケストレーションの経験がある方, GeoJSONやShapefile、OSM、PBFなどの空間データ形式に関する知識がある方, PostgreSQLやPostGIS、pgRoutingを用いた開発・運用経験がある方, DWHやレイクハウスアーキテクチャに関する知見をお持ちの方, PM補佐や開発リーダーとしてのマネジメント経験がある方, 顧客対応や要件定義など上流工程の経験がある方
面談回数
1回
契約形態
業務委託(フリーランス)
開発環境
Java, Python, SQL, RestAPI, Shell, AWS, Linux, Kubernetes, Docker, EC2
作業時間
09:00 〜 18:00
募集回数
1回
職種・ポジション
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）