【AWS Glue/PySpark/フルリモート】受発注管理システム更改におけるETL再実装
作業内容
受発注管理システムの更改に伴い、需要予測システムの出力データを抽出・変換し、DWHからデータマートへ連携するETLの設計～開発を担当いただきます。 既存のPython ShellベースのETLが性能要件を満たせていないため、AWS GlueのVisual ETLおよびPySparkを用いた再実装が主業務です。 DWH/DMはAmazon Redshiftを使用しており、S3連携やパフォーマンス・チューニング、スキーマ設計の見直しなども発生します。 フルリモート・地方在住可で、複数名募集の長期参画を想定しています。
必須スキル
フルリモート ・AWS GlueのVisual ETL（Studio/ジョブ）の実務経験 ・PySparkによるETL実装の実務経験（両方ある方歓迎、片方のみでも可） ・RDBMSに関する実務経験（スキーマ設計、チューニング、クエリ最適化等）
歓迎スキル
・PythonによるETL/バッチ実装経験 ・SQL最適化の経験 ・Amazon Redshiftの運用・パフォーマンスチューニング経験 ・Amazon S3を用いたデータレイク/連携の経験 ・Power BIなどBIツールでのレポーティング/データモデリング経験
稼働条件
平均160～180時間/月程度 / フルリモート
面談回数
2回
契約形態
業務委託(フリーランス)
開発環境
・クラウド/データ基盤：AWS（Glue、S3、Redshift） ・言語/フレームワーク：PySpark、Python、SQL ・方式：DWH→データマートのETL再実装、性能改善、スキーマ最適化 ・その他：フルリモート、オンライン面談（Web2回）
作業時間
9:00～18:00目安（フレックス気味、応相談）
精算基準時間
140〜180時間
募集回数
1回
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）