【Python/AWS/リモート併用】toB向けWEBサービス基盤構築：データエンジニア
作業内容
様々なシステムからデータを収集、加工して、分析基盤に蓄積していくための仕組み (ETL)をAWS環境へ構築する案件です。 (1)外部のデータソースを取り込むためのワークフロー設計データの取得タイミングや取得サイクルを検討して、 どのようにデータを蓄積するか（※）を設計する※洗い替えなのか積み上げなのか、差分取込なのか、など (2)AWS Glue にワークフロー定義（必要に応じて開発） ・CloudFormation のテンプレート作成（yamlファイル） ・（必要に応じて）PythonやSQLなどでデータ取得・加工 ・Github Actions で S3 にデプロイ ・動作検証 ※定型的な作業は既に標準化されているが、データの収集元は色々なものがあるので、場合によっては都度作り込みが必要となる。 (3)Athena にDWHのデータ参照のためのView作成 分析基盤のデータ（DWH）を BIツール（内製システム）で参照するためのViewを作成する
必須スキル
リモート併用 ・Python開発経験3年以上 ・SQLで相応のデータ抽出ができる、データ調査のSQLを組める ・GitHub Actionsの利用経験
稼働日数
Python
勤務形態
リモート
勤務地
大阪府 大阪府
面談回数
1回
開発環境
Python,SQL,AWS Glue,CloudFormation,Github Actions,S3,Athena
募集回数
1回
募集背景
この案件は、新規プロジェクトの立ち上げに伴い、経験豊富なエンジニアを募集しています。チームは10名規模で、アジャイル開発を採用しています。現場の雰囲気は和やかで、コミュニケーションを大切にしています。
募集人数
2名を予定しており、即日参画可能な方を優先的にご案内いたします。経験年数は3年以上を想定しています。フロントエンド1名、バックエンド1名の募集となります。
企業名
大手IT企業の子会社で、安定した経営基盤を持っています。詳細は面談時にご案内いたします。上場企業グループの一員として、長期的なプロジェクトを多数抱えています。
チーム人数
チーム構成はフロントエンド3名、バックエンド5名、インフラ2名となっています。プロジェクトマネージャー1名、デザイナー2名も在籍しています。総勢13名のチームで開発を進めています。
現場の雰囲気
アジャイル開発を採用しており、チーム内のコミュニケーションを大切にしています。週1回の定例会議があり、意見交換が活発です。リモートワークも可能で、柔軟な働き方ができます。
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）