掲載終了6ヶ月前

【Python/AWS・データエンジニア/リモート】データ分析基盤のETL構築支援

600,000〜680,000/月

作業内容

様々なシステムから収集したデータを加工し、分析基盤（DWH）へ蓄積するAWS上のETL仕組みを構築いただきます。 (1) 外部データソース取り込みのワークフロー設計：取得タイミングやサイクルの検討、蓄積方式（洗い替え・積み上げ・差分取込など）の設計 (2) AWS Glueでのワークフロー定義（必要に応じて開発）・CloudFormation（YAML）テンプレート作成・必要に応じてPython/SQLでのデータ取得・加工・GitHub ActionsでS3へデプロイ、動作検証 ※定型的な作業は標準化済みですが、収集元が多様なため個別実装が発生する場合があります。 (3) AthenaでDWH参照用のView作成：内製BIツールから参照するためのViewを設計・作成役割はSEとして、要件整理から設計・実装・検証・運用設計まで幅広く対応いただきます。作業場所は基本リモートですが、月に数回程度、大阪への出張が発生します（旅費は実費精算）。

必須スキル

・Pythonによる開発経験3年以上・SQLでのデータ抽出/調査クエリ作成が可能であること・GitHub Actionsの実務利用経験・AWS上での開発/運用経験（Glue, S3, Athenaのいずれかに触れた経験）・ETL/データパイプラインに関する基本的な理解

歓迎スキル

・AWS Glueのジョブ/ワークフロー設計・実装経験・CloudFormation（YAML）によるIaCの実務経験・Athena/PrestoでのView設計・最適化経験・データモデリング（スキーマ設計、パーティション設計）の知見・BIツール連携を考慮したDWH設計の経験・GitHubフロー/レビュー運用の経験

稼働条件

週5日 / 一部リモート可

面談回数

1回

契約形態

業務委託(フリーランス)

開発環境

・クラウド：AWS（Glue, S3, Athena, CloudFormation）・言語/SQL：Python, SQL ・CI/CD：GitHub Actions（S3デプロイ）・その他：内製BIツール連携、ワークフロー設計、データ収集/加工パイプライン・開発体制：SEとして要件整理〜設計/実装/検証まで担当

作業時間

9:00〜18:00目安（応相談）

精算基準時間

140~180時間 (上下割)

募集回数

1回

募集背景

分析基盤へのデータ流通を強化するため、AWS上でのETL構築に長けたデータエンジニアを増員募集。多様なデータソースへの対応と継続的な拡張に向けた体制強化のための採用です。担当工程要件定義,基本設計,詳細設計,実装,テスト,運用・保守,データ分析募集人数 1人チーム規模 6-10名平均稼働時間平均160時間前後を想定現場の雰囲気標準化されたプロセスのもとで自律的に動ける落ち着いた現場。オンライン中心でコミュニケーションはスムーズです。案件担当のコメント Python×AWS GlueのETL実装に強みのある方にマッチします。要件整理から設計まで自走できる方を歓迎。基本リモートで働きやすく、標準化済みの運用がある一方、データソースごとの作り込みでスキルの幅を広げられる環境です。