【Python/AWS/Spark】位置情報ビッグデータ分析基盤のデータエンジニア
作業内容
この案件では、移動体に関する地理空間データの評価と比較を行い、データ調達を支援します。 具体的には、位置情報データ処理ソリューションの設計から開発までを担当していただきます。 スケーラブルなデータパイプラインやETL基盤の構築に携わり、機械学習モデルを活用した予測分析にも貢献していただきます。
必須スキル
以下に挙げるスキルと経験が必須となります。 ・データエンジニアとしての5年以上の実務経験 ・要件定義からの一連の開発工程経験 ・大規模データ処理に関する豊富な経験 ・データパイプラインおよびETL基盤の構築経験 ・AWS環境での開発経験 ・Apache Sparkなどのビッグデータフレームワークの活用経験 ・Python、Java、SQLを用いた開発経験 ・Linux/Bashの知識、データベースおよびサーバーサイドの設計実装能力
歓迎スキル
以下のスキルをお持ちの方は歓迎いたします。 ・Apache Airflowの利用経験 ・DockerやKubernetesを用いたコンテナ技術の知識 ・PostGISの利用経験 ・DWH（データウェアハウス）やレイクハウスに関する深い知識
稼働条件
週2日出社 / 一部リモート可
契約形態
業務委託(フリーランス)
開発環境
主な開発言語はPython、Java、SQLです。 クラウドプラットフォームとしてAWS環境を使用し、ビッグデータ処理にはApache Sparkを利用します。 OSはLinuxで、シェルスクリプトはBashを用います。 データベースやサーバーサイドの設計実装も含まれます。 また、Apache Airflow、Docker、PostGIS、Kubernetes、DWH/レイクハウスといった技術も活用する可能性があります。
募集回数
1回
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）