【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化
作業内容
トラック製造・販売メーカー向けに、車両輸送状況をリアルタイムに可視化する業務アプリのパフォーマンス改善を担当いただきます。現状、車両から送信される膨大なGPSログ解析で処理遅延が発生しており、Databricks を中心にデータ処理基盤の抜本的なチューニングと改善実装を行います。 想定業務: ・Databricks（PySpark/Scala）環境のパフォーマンス最適化 ・大規模データ処理（数億行規模）の実装・改修 ・Azure データ基盤（Data Factory など）のパフォーマンス改善 ・保守運用、構成管理、リファクタリング 商流はエンド→弊社→貴社。弊社から複数名稼働中で意思決定・動きは速い環境です。
必須スキル
必須スキル: ・Databricks 上でのコーディング経験（PySpark/Scala） ・コード/ジョブのチューニング実務経験 ・Spark クラスタの構造や処理方式、最適化手法に関する知識・実務 ・大規模データの実務経験（Hadoop/Spark クラスタで数億行規模の処理）
歓迎スキル
尚可スキル: ・データ基盤の構築/運用経験（特に Azure: Data Factory, SQL Server/SQL Database, Databricks, Functions, DevOps 等） ・Azure インフラ知識（VNet, Private Link Service, Private Endpoint, Load Balancer 等） ・クエリチューニング（Transact‑SQL での複雑ロジック実装、SQL/テーブル設計最適化） ・スクリプト開発（Python, PowerShell） ・GitHub を用いたソースコード管理経験
稼働条件
週5日 / 一部リモート可
面談回数
1回
契約形態
業務委託(フリーランス)
開発環境
開発/運用環境: ・プラットフォーム: Azure（Databricks, Data Factory, SQL Server/SQL Database, Functions, DevOps） ・言語: PySpark, Scala, SQL, Python, PowerShell ・データ処理: Spark, Hadoop クラスタ ・構成/管理: GitHub, Azure DevOps ・ネットワーク: VNet, Private Endpoint など
作業時間
10:00～19:00 目安（実際はプロジェクト規定に準拠）
精算基準時間
140~180時間 (上下割)
募集回数
1回
募集背景
GPS ログ増加に伴う処理遅延の解消と、将来的なスケールを見据えたデータ処理基盤の最適化/運用強化のための増員です。 担当工程 詳細設計,実装,テスト,運用・保守,データ分析 募集人数 1人 チーム規模 6-10名 平均稼働時間 平均160～180時間/月を想定 現場の雰囲気 データ志向で技術検証が活発。課題解決スピード重視で、実装～検証のサイクルが短いチームです。 案件担当のコメント Databricks/Spark の最適化に強みのある方にフィットします。弊社から複数名参画中で進行が速く、意思決定もスムーズです。上振れ相談可能なレンジのため高スキルの方もぜひ。
スキル
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
この案件のおすすめポイント
- 30代活躍中
- フリーランス多数
- 新技術に積極的
- 安定稼働
- 長期案件
- 急募
この案件を掲載しているエージェントについて
広済堂ビジネスサポート
運営会社：株式会社広済堂ビジネスサポート案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）