【Databricks/Azure】某大手エネルギー企業向けDWH運用保守支援（勝どき）
作業内容
某大手エネルギー企業の基幹システムや製油所から受信するデータを活用するプロジェクトです。 Azure Databricksのデータウェアハウス（DWH）と周辺のETLシステムにおいて、障害調査、技術的な問い合わせ対応、プログラム改修、さらに小規模な機能開発といった運用保守業務をご担当いただきます。 DWHシステムは、固定長や可変長ファイルをDatabricksのメダリオンアーキテクチャ（Bronze/Silver/Gold）を通じて段階的に加工し、格納する仕組みとなっています。
必須スキル
Databricksを用いた運用・保守の実務経験（設計や構築経験があれば尚歓迎いたします）。 Azureクラウド環境での運用・保守経験。 DWHおよびETLシステムの運用・保守経験。 ジョブ管理ツール（System Walker Operation Managerなど）の運用・保守経験。 夜間や休日作業にも柔軟にご対応いただける方。
歓迎スキル
Azure Data Factoryの設計、開発、運用、保守経験。 Azure Storage Account（Data Lake）の運用・保守経験。 Windows OSの運用・保守・構築・設計経験。 Unity Catalog（テーブルやアクセス権管理）の運用・保守経験。 PySparkおよびSQLを用いた設計・開発経験。 SQL Databaseの運用・保守経験。 GitHubを活用したバージョン管理、運用・保守経験。
稼働条件
週5日 / 月間140〜180時間程度の稼働を想定しています。 / 常駐
契約形態
業務委託(フリーランス)
開発環境
主要なテクノロジーはAzure DatabricksおよびAzure Data Factoryです。 データレイクにはAzure Storage Account、テーブル管理にはUnity Catalogを利用しています。 ETL処理はPySparkとSQLで行い、データベースにはSQL Databaseを使用します。 ジョブ管理システムとしてSystem Walker Operation Manager、バージョン管理にはGitHubを導入しており、OSはWindows環境が中心です。
精算基準時間
140h〜180h
募集回数
1回
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）