【Phyton/embulk/digdag/Linux】美容総合プラットフォームなどの事業を展開する企業でデータ分析基盤の運用/保守支援

■募集背景： 今後のデータ利用拡大のための新しいデータ分析基盤の構築を進めています。 今回は、素早く安心なデータ利用のためにデータマネジメントを意識したデータ基盤を構築・運用できる体制を整えるため、チーム強化の増員を行っています。 ■業務内容： オンプレミス上のデータ分析基盤の運用保守 <業務内容詳細> ・同期DBの追加作業(yamlファイルの更新、リリース作業) ・DWHのクエリ改修 ・停止したデータパイプラインの再実行（embulk, digdag）

・バックエンドエンジニア または データエンジニアとしての業務経験3年以上 ・RDBMSの利用経験 ・アプリケーション開発経験 または ETL/ELTツールを利用した開発経験 ・Python等の高級言語を利用したプログラミング経験 ・Gitによるバージョン管理を用いた開発管理業務経験 ・基本的なLinuxやネットワークの知識 ・BigQuery、Redshift、Hadoop、Snowflakeなどの分散データ基盤の利用経験

・Prefect/Airflow/digdagなどのワークフローエンジンの利用経験 ・第三正規化、スタースキーマなどによるデータモデリング経験 ・分析SQLの記述（集約関数、Window関数、CTE、サブクエリー） ・APIやBigQuery連携等でのGoogle Analyticsの利用経験 ・データマネジメントに関する基本的な知識 ・処理件数・処理時間・回復性・冪等性・整合性・可観測性・スケーラビリティなどを意識した設計能力 ・利用者からヒアリングを行い、要件を整理する能力

週4日

六本木一丁目

1回