【Phyton/embulk/digdag/Linux】美容総合プラットフォームなどの事業を展開する企業でデータ分析基盤の運用/保守支援


〜1,000,000円/月
業務委託(フリーランス)
六本木一丁目

この案件を3行でまとめると
  • データエンジニア向け、勤務地は六本木一丁目、リモート可否は不明で、週4〜5日稼働のオンプレ運用保守案件、月額100万円です。
  • 迅速で安心なデータ利用のための基盤運用がミッションです。yaml更新による同期DB追加、DWHクエリ改修、embulk・digdag再実行を行います。
  • 必須は3年以上の開発経験、RDBMSとPython、Git、Linuxや分散DWHの利用経験です。ワークフローやデータモデリング経験は歓迎です。

開発環境

言語:
クラウドサービス:
実践・概念:

作業内容

■募集背景: 今後のデータ利用拡大のための新しいデータ分析基盤の構築を進めています。 今回は、素早く安心なデータ利用のためにデータマネジメントを意識したデータ基盤を構築・運用できる体制を整えるため、チーム強化の増員を行っています。 ■業務内容: オンプレミス上のデータ分析基盤の運用保守 <業務内容詳細> ・同期DBの追加作業(yamlファイルの更新、リリース作業) ・DWHのクエリ改修 ・停止したデータパイプラインの再実行(embulk, digdag)

必須スキル

・バックエンドエンジニア または データエンジニアとしての業務経験3年以上 ・RDBMSの利用経験 ・アプリケーション開発経験 または ETL/ELTツールを利用した開発経験 ・Python等の高級言語を利用したプログラミング経験 ・Gitによるバージョン管理を用いた開発管理業務経験 ・基本的なLinuxやネットワークの知識 ・BigQuery、Redshift、Hadoop、Snowflakeなどの分散データ基盤の利用経験

歓迎スキル

・Prefect/Airflow/digdagなどのワークフローエンジンの利用経験 ・第三正規化、スタースキーマなどによるデータモデリング経験 ・分析SQLの記述(集約関数、Window関数、CTE、サブクエリー) ・APIやBigQuery連携等でのGoogle Analyticsの利用経験 ・データマネジメントに関する基本的な知識 ・処理件数・処理時間・回復性・冪等性・整合性・可観測性・スケーラビリティなどを意識した設計能力 ・利用者からヒアリングを行い、要件を整理する能力

稼働日数

週4日

勤務地

六本木一丁目 東京都 港区 六本木一丁目

募集回数

1回

募集背景

この案件は、新規プロジェクトの立ち上げに伴い、経験豊富なエンジニアを募集しています。チームは10名規模で、アジャイル開発を採用しています。現場の雰囲気は和やかで、コミュニケーションを大切にしています。

募集人数

2名を予定しており、即日参画可能な方を優先的にご案内いたします。経験年数は3年以上を想定しています。フロントエンド1名、バックエンド1名の募集となります。

企業名

大手IT企業の子会社で、安定した経営基盤を持っています。詳細は面談時にご案内いたします。上場企業グループの一員として、長期的なプロジェクトを多数抱えています。

面談でお伝えできます。
ぜひご相談ください。
一部非公開の場合がございます

チーム人数

チーム構成はフロントエンド3名、バックエンド5名、インフラ2名となっています。プロジェクトマネージャー1名、デザイナー2名も在籍しています。総勢13名のチームで開発を進めています。

現場の雰囲気

アジャイル開発を採用しており、チーム内のコミュニケーションを大切にしています。週1回の定例会議があり、意見交換が活発です。リモートワークも可能で、柔軟な働き方ができます。

よくある質問

六本木一丁目です。

現時点でリモートの可否についての記載はありません。詳細は応募後に確認いたします。

週4〜5日を想定しています。

バックエンドまたはデータエンジニアとして3年以上、RDBMS、Python、Git、基本的なLinuxやネットワーク、BigQuery/Redshift/Hadoop/Snowflake等の分散DWHの利用経験が必要です。

オンプレ分析基盤の運用保守、yaml更新による同期DB追加、DWHクエリ改修、embulk・digdagで停止したパイプラインの再実行です。
案件について詳しく聞いてみませんか?

知りたい内容を選んでください(複数選択可)

関連する求人