Hadoopの業務委託案件・フリーランス求人一覧

Hadoop
Hadoop

Hadoopの業務委託案件・フリーランス求人一覧

全 270 件中 1-40件表示
募集中1ヶ月前

【Hadoop/Spark】大規模データレイクの保守・運用業務支援の求人・案件

〜600,000円/月
業務委託東京都
職務内容

Hadoopに関する運用業務(ユーザサポート・定常業務・メンテナンス)の支援、プロダクト保守/運用業務、利用者からの問い合わせ対応(Trino/Sparkジョブ、クラスタ自体に関する質問等)、定常的なクラスタ運用業務(定期メンテナンスや増強、利用者要望への対応など)の対応。

必須スキル

・HadoopまたはSparkの運用業務経験 ・インフラ支援業務経験 ・コミュニケーション力

募集中4ヶ月前

【リモート併用/墨田区/Scala】生命保険業界 データエンジニア(バイリンガル)

710,000円〜770,000円/月
業務委託東京都
職務内容

生命保険業界のデータプラットフォーム構築プロジェクトにおいて、要件調整から設計、データパイプライン構築(Scala / Spark / Java)、CI/CDの自動化、スクリプト開発、運用支援などを担当。クラウドはAzureを中心とし、大規模なデータ処理基盤を構築・最適化する役割を担っていただきます。 【技術スタック】 ・開発言語:Scala、Java、Python ・フレームワーク:Spark ・インフラ:Azure ・データベース:Oracle、MS SQL Server ・その他:Git、Shell、CI/CD

必須スキル

・日英バイリンガル(ビジネスレベル以上) ・Scala / Java / Pythonのいずれかの開発経験 ・Hadoop / Sparkの分散処理システムの知識 ・Azureの利用経験 ・SQL、Shell、CI/CDの実務経験

募集中4ヶ月前

【Databricks/PySpark/Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

800,000円〜1,050,000円/月
業務委託東京都
職務内容

トラック製造販売メーカー向けに、商用車の輸送状況をリアルタイム可視化する業務アプリのパフォーマンス改善を担当いただきます。 膨大な車載GPSログの解析で発生している処理遅延を解消するため、Databricks(PySpark/Scala)を中心にデータ処理基盤の抜本的なチューニングおよび改善実装を実施します。 主な作業内容: ・Databricks(PySpark, Scala)環境のパフォーマンス最適化 ・大規模データ処理の実装/改修(数億行規模) ・Azure上のデータ基盤のボトルネック解析と改善 ・保守、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて初月は週3出社、その後は週1出社を想定(状況により変更の可能...

必須スキル

必須スキル: ・Databricksでの実装経験(PySpark, Scala) ・コード/ジョブのチューニング経験 ・Sparkクラスタの構造・処理方式・最適化手法に関する知見 ・大規模データ処理の実務経験(Hadoop/Sparkで数億行規模のデータ取り扱い)

募集中5ヶ月前

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

800,000円〜1,050,000円/月
業務委託東京都
職務内容

トラック製造・販売メーカー向けに、車両輸送状況をリアルタイムに可視化する業務アプリのパフォーマンス改善を担当いただきます。現状、車両から送信される膨大なGPSログ解析で処理遅延が発生しており、Databricks を中心にデータ処理基盤の抜本的なチューニングと改善実装を行います。 想定業務: ・Databricks(PySpark/Scala)環境のパフォーマンス最適化 ・大規模データ処理(数億行規模)の実装・改修 ・Azure データ基盤(Data Factory など)のパフォーマンス改善 ・保守運用、構成管理、リファクタリング 商流はエンド→弊社→貴社。弊社から複数名稼働中で意思決定・動きは速い環境です。

必須スキル

必須スキル: ・Databricks 上でのコーディング経験(PySpark/Scala) ・コード/ジョブのチューニング実務経験 ・Spark クラスタの構造や処理方式、最適化手法に関する知識・実務 ・大規模データの実務経験(Hadoop/Spark クラスタで数億行規模の処理)

募集中5ヶ月前

【Databricks/SQL/Python/フルリモート】データ解析システム構築支援案件

700,000円〜800,000円/月
業務委託その他
この案件を3行でまとめると
  • Databricksを活用するデータエンジニア向けの案件で、勤務地はその他、勤務形態は常駐、週5日稼働・月70〜80万円です。
  • Databricksでのデータ解析システム構築支援がミッションです。設計・実装・テストを担い、SQL/PythonやSparkでの処理実装を進めていただきます。
  • 必須はSQL/Python/Spark、データパイプライン、Git、ユニットテスト、要件〜テスト設計、ドキュメント作成力で、Databricks等は歓迎です。
おすすめポイント
  • 最新のデータ解析基盤に携われ、DatabricksやクラウドDWH活用で着実なスキルアップが望めます。
  • 週5日・月70〜80万円のレンジで、データ基盤の設計から実装・テストまで幅広く関わりたい方に最適です。
  • 主体的に動きチームで成果を出せる方、分散処理やクラウド経験を活かしたい方におすすめです。
募集中5ヶ月前

【Java】データベース基盤リプレイス【日本人限定/一部リモート】

700,000円/月
業務委託
職務内容

下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日(月〜金)で稼働可能な方 *副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー Hadoopへの移行に伴い、HadoopからTrinoやその他システムからデータ連携できるためのJavaの修正や管理を行う業務をご担当いただきます。 週5日、リモート

必須スキル

・Javaでの開発経験 ・Hadoopの知見がある方 ・セキュリティ意識レベルが高い方 ・コミュニケーションと取りながらチームの中で能動的に動ける方 ・報告/連絡/相談が適切にできること ・勤怠良好な方

募集中5ヶ月前

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

800,000円〜1,050,000円/月
業務委託東京都
職務内容

トラック製造販売メーカー向けに、車両のGPSログを用いたリアルタイム可視化アプリのパフォーマンス最適化を行います。 現状、膨大なGPSデータ解析で処理遅延が発生しており、Databricks(PySpark/Scala)およびAzureデータ基盤を中心に、抜本的なチューニングと改善施策の設計・実装をご担当いただきます。 想定業務: ・Databricks(PySpark, Scala)のパフォーマンス最適化 ・大規模バッチ/ストリーミング処理の実装・改修 ・Azureデータ基盤(ADF/SQL/Functions等)の性能改善 ・保守運用、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて、初月は週3出社、その後は週1...

必須スキル

必須スキル: ・Databricksでの開発経験(PySparkおよびScalaでのコーディング) ・Sparkクラスタの構造/処理方式の理解と各種最適化手法によるチューニング実務 ・大規模データ処理の経験(Hadoop/Sparkクラスタで数億行規模のデータ取り扱い) これまでの実案件での性能改善(スケジューリング/パーティション設計/キャッシュ戦略/ジョイン最適化 など)の実績が望まれます。

募集中9ヶ月前

【常駐/春日駅/Redshift】Hadoop→Redshiftへのデータ移行・検証業務

660,000円〜710,000円/月
業務委託東京都 文京区 春日
職務内容

現在JavaによりHadoop環境で構築されているデータ変換処理を、Redshiftへ移行するプロジェクトです。SQLベースでの同等処理を再設計・実装し、パフォーマンスの検証を行います。また、生成AIを活用したコード変換・改善も検討対象です。Redshiftへの移行により、データ処理基盤の効率化とパフォーマンス向上を図ります。 【技術スタック】 ・開発言語:Java ・データベース:Redshift、PostgreSQL、Oracle ・クラウド:AWS ・OS:Linux

必須スキル

・Linux環境での開発経験 ・RedshiftまたはPostgreSQL、Oracleの経験 ・AWS環境での作業経験 ・Java開発経験 ・生成AI活用経験(利用経験要)

募集中11ヶ月前

【二子玉川/SQL/Python】 AIプラットフォームの構築

830,000円〜900,000円/月
業務委託東京都 二子玉川(東京都)
職務内容

AIモデルのエンドツーエンド開発:ビジネス部門との議論、データ収集、EDA(探索的データ分析)、モデル学習、評価、リリースまでを担当 モデル評価と改善:月次でのパフォーマンス評価と継続的な改善 ビジネスへの説明:EDAやモデル結果をビジネス部門に分かりやすく説明 目標の共有と調整:ビジネス部門と目標を共有し、フィードバックを反映

必須スキル

・データパイプライン・統合ソリューション設計/構築経験 ・SQL/NoSQL・データウェアハウス・データモデリング知識 ・データマイニング・機械学習アルゴリズム理解 ・Pythonでの機械学習モデル開発経験 ・Linuxコマンド/スクリプト操作経験 ・Hadoop、Hive等ビッグデータツール利用経験 ・要件に応じたツール設計・構築経験 ・データサイエンス基盤の構築・運用経験

募集中11ヶ月前

【PL】プロダクト開発におけるテックリードの業務委託案件・フリーランス求人

〜900,000円/月
業務委託東京都 千代田区 神保町
職務内容

企業不正という社会課題に向き合い、実務とテクノロジーの融合で課題解決を図るポジションです。高い自由度と柔軟性、社会的意義を兼ね備えた案件です。

必須スキル

Webアプリ開発におけるプロジェクトマネジメントの経験 モダンなJavaを用いた開発経験、もしくはそれに近しい経験(静的型付け言語やサーバーサイドKotlinを用いた開発経験) / AWSを用いたアーキテクチャの設計経験 / GitHubを用いたコードレビューの経験 / Agile手法の経験(Scrum, Kanban) / 内製開発チームのマネジメント経験 / NoSQL開発、CI/CD構築経験 / AWS各種サービス、Flutter、Hadoop、Airflow経験

募集中1ヶ月前

【kubernetes】大規模ビッグデータ基盤構築運用におけるインフラエンジニアの業務委託案件・フリーランス求人

〜700,000円/月
業務委託東京都 世田谷区 池尻大橋
職務内容

・HPE製品(特にHPE Ezmeral)を用いたインフラ基盤の構築・運用・保守。 ・Linux(RHEL)上での操作、Kubernetes環境での運用、およびHadoop基盤の運用補助。 【体制(人数/構成)】 ・河原代表からの引き継ぎ。エンドチームは5〜6名の若手主体チーム。

必須スキル

HPE製品(HPE Ezmeral等)の構築・運用経験 / Red Hat Enterprise Linuxの操作・設定経験

募集中3ヶ月前

携帯料金システムのJavaエンジニア募集

〜750,000円/月
業務委託東京都 港区
職務内容

携帯料金システムの刷新プロジェクトにおけるJavaエンジニアを募集します。 業務は基本設計、一部要件定義、長期的なプロジェクト管理が含まれます。 リモート勤務が可能で、スキル次第で単価の調整が可能です。 ■ 業務内容 ・基本設計及び要求事項の定義 ・プロジェクト管理と推進 ・関連技術の活用:Java, Spring, Kafka, Hadoop等 【アピールポイント】 ・注目の通信業界での経験を積める ・リモート勤務で働きやすい環境 ・経験に応じて単価調整可能

必須スキル

・Java ・Spring Framework ・Java EE

募集中3ヶ月前

データ抽出業務

350,000円〜500,000円/月
業務委託千葉県 千葉市 土気
職務内容

SQLを使ったデータ抽出。証券の次期システムの開発支援。クレジットカード業務の開発。AIを活用したCOBOLシステムのJavaマイグレーション支援。生命保険システム開発保守。COMPANY導入支援。Splunkエンジニア。地方銀行行員代替。

必須スキル

・SQLでのデータ操作スキルがあること(SELECT、UPDATE、INSERT) ・PLSQLでの経験(過去10年以内の経験がある方) ・C++での開発経験(過去20年以内に経験がある方) ・システム設計書のレビュー経験 ・既存システム仕様を理解し、設計内容の妥当性を判断できる方 ・Javaを用いた開発経験5年以上目安 ・Spring Bootの経験 ・COMPANY導入または設定経験 ・顧客折衝経験 ・要件定義~設定/開発までの対応経験 ・Splunkを自身で設計および構築した経験(3年以上)

募集中3ヶ月前

データエンジニア案件希望

950,000円〜1,100,000円/月
業務委託
職務内容

経験20年、データ基盤構築を中心に要件定義から一貫して対応可能。言語/FW: Python、Scala、PHP。インフラ/その他ツール: AWS、Snowflake、GCP、MySQL、MongoDB、Hadoop、Spark、Kafka、Airflow、Linux、Apache、Kudu、ShellScript、Git、SVN、Redmine。

必須スキル

Python

募集中3ヶ月前

(リモート)【Java】カード基幹系システム オープン系開発

750,000円/月
業務委託大崎
職務内容

・カード基幹系システム開発 ・現行システム(COBOL)から新システムへのマイグレーション開発(ホスト→Hadoop基盤へのデータ連携) ・工程:基本設計、詳細設計、製造、テスト、本番リリース、運用/保守 週5日、リモート

必須スキル

・Javaを用いた開発経験5年以上 ・Linux、Windows(ファイル連携システム開発のためDB無) ・主体的に業務が遂行できる方、顧客との相談、調整が可能な方

募集中3ヶ月前

(一部リモート)【インフラ】MAシステムDB移行

700,000円/月
業務委託川崎
職務内容

下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日(月〜金)で稼働可能な方 *副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー OracleDBやHadoopを移行するに際し、移行設計やツールなどの作成実施をご担当いただきます。 週5日、リモート

必須スキル

・インフラ基盤設計、構築経験(Linux) ・システム移行経験、移行ツールの作成などの経験がある方 (OracleDBに詳しくなくてもOK)

募集中4ヶ月前

Java/車載ビッグデータ可視化システム追加開発案件・求人

〜800,000円/月
業務委託愛知県 名古屋市 伏見
職務内容

「走行データ」という巨大な資産を価値に変える。エンジニアとしての知的好奇心を刺激するプロジェクトです。本プロジェクトでは、車両から収集される膨大なデータを可視化するシステムの機能追加・維持保守を担当します。 ・監視レポート作成および分析報告 ・設計、製造、単体〜システムテスト、リリース作業までの一貫したデリバリー 市場価値・キャリアメリット: 「Connected Car × Cloud」の専門性を磨き、市場価値の高いエンジニアへ。 現在、自動車業界で最も注目される車載データの活用に携わることで、IoT分野の深い知見が得られます。また、AWSを用いたビッグデータ処理の経験は、今後のクラウドネイティブなキャリアにおいて強力...

必須スキル

Java ・Javaを用いたWebアプリケーション開発経験(5年以上) ・AWS環境下での開発経験(2年以上) ・基本設計からテスト、リリースまでの一連の工程を自走できる方 ・各種レポート、報告書の作成スキル

募集中4ヶ月前

【リモート併用/データ分析】生命保険向けBSA・システム分析業務

910,000円〜990,000円/月
業務委託東京都
PMPMO2
職務内容

大手生命保険会社向けの業務分析およびシステム分析業務。要件定義からデータモデリング、データフロー設計、開発チームとの連携による仕様策定や成果物のレビューまで幅広く担当いただきます。日英バイリンガルスキルがある方を歓迎し、Hadoop/Spark環境での分析業務も含まれます。 【技術スタック】 ・データベース:Oracle、MS SQL Server、MongoDB ・ビッグデータ基盤:Hadoop、HBase、Spark ・OS:Linux

必須スキル

・システム開発/BSAとしての実務経験(6〜10年) ・プロジェクト管理経験 ・データ/システム分析スキル(各種言語を用いた分析) ・Oracle、MS SQL Server、MongoDBなどのDB知識 ・Hadoopエコシステム(Hive、HBase、Spark等)の理解 ・Linux、ネットワークの基礎知識 ・優れたコミュニケーション・問題解決能力

募集中6ヶ月前

【インフラ】MAシステムDB移行

700,000円/月
業務委託神奈川県 川崎市 川崎
この案件を3行でまとめると
  • インフラエンジニア(DB移行)向け、神奈川県川崎の案件です。リモート可否と稼働日数は未記載で、単価は月70万円です。
  • MAシステムのOracleDBやHadoopの移行設計がミッションです。移行計画策定から移行ツールの作成・実施までご担当いただきます。
  • 必須はLinuxでのインフラ設計・構築とシステム移行・移行ツール作成経験です。OracleDB知識は不問で、歓迎スキルの記載はありません。
おすすめポイント
  • OracleDBに詳しくなくてもご応募いただけます。移行設計やツール作成の経験を活かせます。
  • MAシステムのDB移行に設計から実施まで一貫して携われ、スキルの幅を広げられます。
  • 月70万円の報酬で、LinuxやHadoopなどのインフラ・データ基盤経験を発揮できます。
募集中7ヶ月前

【Java/Spring/フルリモート】大規模ECサイトの新規開発・保守

400,000円〜500,000円/月
業務委託東京都
職務内容

大規模な総合ECサイトにおいて、機能追加を含む新規開発および既存機能の保守運用を担当いただきます。 要件定義から設計・実装・テスト・リリース後の運用まで一貫して関わるポジションで、チームをリードしながら品質とスピードの両立を図っていただきます。 主な環境/技術: - 言語: Java、Objective-C、C# - フレームワーク: Spring(Spring Boot想定) - インフラ: 各種クラウド環境(AWS/GCP/Azureのいずれか) - ビッグデータ関連技術: 分散処理/ストリーミング基盤等(例: Hadoop/Spark/Kafka など) 体制: 複数チーム体制のうち、数名規模のサブチームをリードいた...

必須スキル

フルリモート ・Javaでの開発経験5年以上 ・要件定義など上流工程の実務経験 ・数名規模チームのリーダー/サブリーダー経験 ・リモート環境で円滑にコミュニケーションでき、安定した勤怠で稼働できること

募集中7ヶ月前

【フルリモート/CI/CD】ヘルステック企業での患者向けコンテンツ配信基盤エンジニア

830,000円〜900,000円/月
業務委託東京都 港区 新橋
職務内容

既存プロダクトと連携し、患者向けコンテンツ配信基盤の役割を担うPEHubと呼ばれるプロダクトの開発を担当頂きます。 ・プロダクトマネージャとの仕様策定 ・各種AWSサービスをフル活用したアーキテクチャ設計 ・社内プロダクトや社内サービスとのシステム連携 ・他プロダクトチームとシステム仕様・アーキテクチャのすり合わせ ・設計したシステムの実装と運用 ・各種インフラ運用の自動化、CI/CDの強化

必須スキル

・設計に関するプラクティスを理解し、状況に合わせて選択し適用した経験 ・既存の仕組みに対して主体的に問題の提起や改善策の提案を行い、設計を継続的に改善した経験 ・CI/CD、監視、テスト自動化などの DevOps の経験 ・プロダクトマネージャーなどエンジニア以外のメンバーと協議しながら要件を決定した経験 ・他チームまたは外部パートナーとのシステム連携の経験

募集中9ヶ月前

Python/大手デジタルマーケ企業の営業支援プラットフォームにおけるバックエンド開発案件・求人

〜900,000円/月
業務委託西新宿
職務内容

■仕事内容 開発プロジェクトチームに入り、弊社エンジニアと一緒に開発に従事していただきます。 【具体的な業務イメージ】 ■要件定義・設計 ・ステークホルダーとの開発要件のすり合わせ、設計、実装方針の策定 ・レビュー、コードレビューなど品質管理 ・インフラ設計、パフォーマンス最適化 ■新規プロダクト開発 / 既存サービスの拡張開発 ・機能開発における実装とテスト ・保守・運用を含む開発作業全般 ・デリバリー対応、障害対応 下記マインドを持っている方を募集いたします。 ・自立自走、課題や問題のキャッチアップを自ら行える ・関係者を巻き込んで率先して動ける ・コーディング / UTが自立して出来る ・未...

必須スキル

Python ■基本スキル: ・Pythonを用いたWebアプリケーション開発経験(最低3年以上) ・SaaS / cloud環境での開発経験 ・自立自走・自ら課題や問題をキャッチアップできる方 ・アジャイルまたはスクラム開発のご経験 ・AWS環境での開発経験

募集中9ヶ月前

【フルリモート/Python/AWS】製薬業界向けサービスを展開する事業会社でのアプリケーションエンジニア募集

830,000円〜900,000円/月
業務委託東京都 中央区 銀座
職務内容

薬局経営を支援する薬局ダッシュボードの画面・機能開発する責務を担っていただきます。 ■開発環境 ・React、Next ・TypeScript ・AWS(Cognito、Amplify、API Gateway、Lambda、RDS、S3) ・Python ・その他(GitHub、Datadog、Google Analytics、GTM、KARTE)

必須スキル

・Pythonを利用した開発経験(目安:2年以上) ・AWSを利用した開発・運用経験(目安:2年以上) ・Webアプリケーションの開発経験(目安:5年以上) ・複数人でチームを組みサービス開発をした経験 ・RDBMS / NoSQLの知識・設計の経験

募集中11ヶ月前

【Python/リモートあり】GenerativeAI向けデータ基盤構築・運用支援(データエンジニア)

670,000円〜720,000円/月
業務委託新宿
職務内容

【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! 【作業場所】新宿(週2リモート) 【時間】フレックスタイム制(コアタイム応相談) 【面談回数】1〜2回(オンライン) 【必須スキル】 ・Python/SQLによるデータ処理経験 ・RDB/NoSQL/DWHにおけるDB設計・運用経験 ・クラウド(GCP/AWSなど)の利用経験 ・Docker/Kubernetesを用いたインフラ構築経験 ・API開発またはデータ連携設計・実装経験 ・ビジネスレベルの日本語での円滑なコミュニケーション 【尚可スキル】 ・LLM/GenerativeAIの知見または活用経験 ・AI学習用...

必須スキル

・Python/SQLによるデータ処理経験 ・RDB/NoSQL/DWHにおけるDB設計・運用経験 ・クラウド(GCP/AWSなど)の利用経験 ・Docker/Kubernetesを用いたインフラ構築経験 ・API開発またはデータ連携設計・実装経験 ・ビジネスレベルの日本語での円滑なコミュニケーション

募集中11ヶ月前

Ruby/自社DMPプロダクトバックエンド開発案件・求人

〜1,000,000円/月
業務委託虎ノ門
職務内容

自社で提供するDMP(データマーケティングプラットフォーム)の開発業務をご担当いただきます。 Ruby on Railsによるアプリケーションと分析、媒体連携用データを保持する Google Cloudのデータ基盤を開発、運用します。 ▼工程 基本設計から実装、保守運用まで実施いただきます。 ビジネス要件はビジネス担当部門が行います。 設計に必要な要件の明確化などのコミュニケーションは適宜行っていただきます。 ▼主な業務内容 ・管理画面の開発、保守、運用 ・分析データ基盤の開発、保守、運用

必須スキル

Ruby ・<重視>クラウドデータ基盤を用いた分析、ETLジョブの開発経験 ・Webアプリケーションフレームワーク'Ruby on RailsやDjango等)を用いたWebサービスの開発経験:3年以上 ・Git/GitHubを利用したチーム開発経験

掲載終了3年前

AWS/不動産データプラットフォームシステムの基盤構築案件・求人

〜900,000円/月
業務委託福岡県 福岡市 天神
職務内容

不動産業界向けデータプラットフォームシステムの基盤構築に携わっていただきます。 ・高速かつ容易な分析を可能とする基盤のアーキテクチャ検討 ・データ分析基盤の構築、運用 ・データソース間の移送、統合 ・データ分析を必要とするビジネスメンバーのサポート、分析作業

必須スキル

AWS ・AWS基盤構築経験:3年以上 ・テーブル設計、DBチューニングの実務経験 ・SQLを使ったデータ集計、データ分析業務の経験 ・RDBMSに対する知識

掲載終了4年前

SQL/データ活用ソリューション企業のデータエンジニア案件・求人

〜900,000円/月
業務委託東京都 港区 虎ノ門
職務内容

マーケティングソリューションやデータ活用ソリューションを展開する企業にて、 社内外のデータを利用したプロジェクトにエンジニアとして関り、 プロジェクト内での課題の把握と必要な作業の洗い出し、 実作業としてデータ加工、データパイプラインやワークフローの作成、ETL処理を行っていただきます。 ・社内に蓄積されているデータとそれを利用する環境の状況整理 ・データを用いたプロジェクトにおける課題の把握 ・アドホックなデータ抽出作業、データ加工処理 ・データパイプラインの構築や行われる処理の自動化 ・ETL処理のワークフロー化、およびその作業のシステム的な監視の構築 【具体的な仕事内容】 ・データサイエンティスト、エ...

必須スキル

SQL ・SQLに関する基本的な知識 ・複数のRDBMSを扱った開発経験 ・Webサービスやプロダクトのデータを用いた抽出業務やデータ加工処理の経験 ・プログラミング言語を利用したアプリケーション開発経験 ・パブリッククラウドを利用した開発経験

掲載終了15日前

エンド社内のデータ活用・分析運用開発支援

500,000円〜700,000円/月
業務委託東京都 千代田区 永田町
職務内容

システム間の連携部分をPythonで開発や社内データ分析対応などを担当 → ・上記付随した業務調査(SQLクエリの調査・修正等) ・データの整備、ジョブ作成 ※エラー発生時はJavaのソース解読が発生する可能性有

必須スキル

・Python ・SQL(Join、Union) ・ETLツール、データ加工バッチの開発経験 ・Hadoop、Tableauの利用経験 ・機械学習の知見(アルゴリズム選定、ライブラリ実装、パラメータ調整等) ・事業データの分析経験、広告事業領域の経験 ・長期間参画できる方(※数年レベルで対応できる方) ・コミュニケーション力(報連相がしっかりとれる方) ・出勤可能(地方の方)

掲載終了1ヶ月前

【Snowflake,VBA】エンド向けデータ抽出・可視化支援案件

400,000円〜450,000円/月
業務委託田町駅
職務内容

▍環境面:リモート併用相談可! ▍インボイス未登録の方OKです! AIエージェント開発支援業務にて Snowflake,VBAの経験者を募集しています! ◆想定作業◆ ・SQLによるデータ抽出・加工対応 ・Snowflake上でのデータ整形作業 ・ダッシュボード用データ作成業務 ・ExcelVBAによる定型処理支援対応 ・複数案件の並行対応および進行管理補助 ~~~~~~~~~~~~~~~~~~~~ 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください!

必須スキル

◎必要スキル・経験◎ ・SQLでの開発経験のある方 ・ExcelVBAでの開発経験のある方 ・Snowflakeを用いた開発経験のある方 ・Hadoop環境での作業経験のある方 ◎尚可・歓迎◎ オンサイト作業が可能な方! _ _ ―――――――――――――――――――― ◎給与・報酬◎ 400,000円 ~ 450,000円(税込) あくまでも目安ですのでご相談下さい! _ ――――――――――――――――――――

掲載終了1ヶ月前

【Snowflake,VBA】SQLエンジニア/SQL×VBAデータ集計・可視化支援業務

400,000円〜450,000円/月
業務委託東京都 港区
職務内容

案件多数!フリーランス未経験の方もOK! インボイス未登録の方もご応募ください! リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・SQLによるデータ抽出・加工対応 ・Snowflake上でのデータ整形作業 ・ダッシュボード用データ作成業務 ・ExcelVBAによる定型処理支援対応 ・複数案件の並行対応および進行管理補助

必須スキル

・SQLでの開発経験のある方 ・ExcelVBAでの開発経験のある方 ・Snowflakeを用いた開発経験のある方 ・Hadoop環境での作業経験のある方 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。

掲載終了1ヶ月前

【サーバー(Linux系)】分析基盤更改インフラ設計構築(最大65万円|リモート可|東京)

460,000円〜650,000円/月
業務委託東京都 千代田区
職務内容

【業務内容】 インフラ分析基盤の更改およびスマートデータレイク基盤の導入における設計および設定業務を担当いただきます。分析基盤およびデータレイク基盤に対して、OSやネットワーク設計、認証、監視、運用設計などを実施し、既存環境からの移行および新基盤構築に携わっていただきます。また関連サービスとの連携や冗長化構成の設計にも対応いただきます。 【作業内容】 ・分析基盤およびデータレイク基盤の更改対応 ・OSおよびネットワーク設計および設定対応 ・認証および監視環境の設計および構築 ・HULFT連携および移行作業対応 ・冗長化および負荷分散など周辺サービス構築対応

必須スキル

・テクノロジースキル Cloudera; Hadoop; Linux; Microsoft; VMWare; NAS,PostgreSQL,Pacemaker,HAProxy,openLDAP ・環境/OSスキル Linux; UNIX; Windows ・経験年数 5~10年

掲載終了1ヶ月前

【DBエンジニア(SQL全般)】ゲーム事業向けデータ分析基盤集計(最大80万円|フルリモート|六本木)

560,000円〜800,000円/月
業務委託東京都 港区 六本木
職務内容

【業務内容】 社内外からの依頼に基づく集計/可視化の要件定義と仕様設計を担当します。SQLを用いたビッグデータの加工および集計、ダッシュボードの作成を行います。分析結果のレポーティングを実施します。企画担当者やデータアナリスト、ゲームエンジニアと連携しながら業務を推進します。 【作業内容】 ・集計および可視化要件定義と仕様設計 ・SQLを用いたビッグデータ加工および集計 ・ダッシュボード作成 ・分析結果レポーティング ・関係者との調整および連携

必須スキル

・SQLおよびデータベースに関する知識 ・BigQuery、Redshift、Hadoopなどを利用した大規模データ分析基盤の利用経験または開発経験 ・SQLと連携させたBIツール(Data Portalなど)の利用経験

掲載終了1ヶ月前

【Hadoop】データ分析基盤向けAPI開発(最大60万円|渋谷)

420,000円〜600,000円/月
業務委託東京都 渋谷区 渋谷
職務内容

【業務内容】 データ分析や機械学習領域を支えるWebサービスにおいて、バックエンドおよびフロントエンド開発、API設計・開発、インフラ構築まで一貫して担当していただきます。DjangoやVue.jsを用いた開発を中心に、クラウド環境を活用したシステム開発に携わっていただきます。 【作業内容】 ・Djangoを使用したWebサービスのバックエンド開発 ・Vue.jsを用いたフロントエンド開発 ・APIおよびシステムの設計および開発 ・GCPやAWSを利用したインフラ構築および運用

必須スキル

以下のいずれかを得意としていて、その他の分野に対しては、キャッチアップしていく意欲がある方 ・Djangoを使ったWEBサービスの開発経験(1年以上) ・バックエンドエンジニアとしてWebサービスの開発に携わられた経験 ・コンピュータサイエンスの基礎知識(アル ゴリズム、データ構造 、データベース、ネットワーク等) ・何らかのサービス ・プロジェクトにおけるAPIやシステムの開発、および運用経験

掲載終了1ヶ月前

【Python(Web開発系)】ゲーム事業向けデータ分析基盤の開発および運用(最大100万円|リモート可|六本木)

700,000円〜1,000,000円/月
業務委託東京都 港区 六本木
職務内容

【業務内容】 ゲーム事業におけるデータ分析基盤の開発および運用をご担当いただきます。BigQueryやCloudComposerを活用し、データパイプラインや分析基盤の改善を行いながら、データアナリストやインフラ担当者と連携し、事業課題の解決に向けたデータ活用基盤の構築・運用を推進していただきます。また、クラウド環境を活用したDevOpsやインフラ設計にも携わっていただきます。 【作業内容】 ・データ分析基盤およびデータパイプラインの開発運用 ・BIツールの開発および運用対応 ・データアナリストとの連携による課題解決支援 ・クラウド環境でのインフラ設計およびDevOps構築運用 ・GCPおよびAWSを用いたクラウ...

必須スキル

・PythonまたはPHPを使用したアプリケーションの開発経験 ・一般的なミドルウェアの基礎知識 ・MySQL/NoSQLを利用した開発経験 ・インフラ/DevOpsを含めたシステム全体の設計/構築/運用経験 ・GCP/AWSを使用した開発経験 ・k8s、dockerを使用した開発経験 ・BigQuery、Redshift、Hadoopなどを使用したデータ分析基盤の開発経験

掲載終了1ヶ月前

【運用・保守】大規模データレイクの保守・運用業務支援

〜550,000円/月
業務委託東京都
職務内容

Hadoopに関する運用業務(ユーザサポート・定常業務・メンテナンス)の支援、プロダクト保守/運用業務、利用者からの問い合わせ対応(Trino/Sparkジョブ、クラスタ自体に関する質問等)、定常的なクラスタ運用業務(定期メンテナンスや増強、利用者要望への対応など)の対応。

必須スキル

・HadoopまたはSparkの運用業務経験 ・インフラ支援業務経験 ・コミュニケーション力

掲載終了2ヶ月前

【Hadoop/Spark/フルリモート検討可】大規模データレイクの保守・運用業務支援

3,500円〜7,000円/時
業務委託フルリモート
PMOPM1
職務内容

〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓〓 【案件名】 大規模データレイクの保守・運用業務支援 【案件概要】 Hadoopを中心としたデータレイク基盤における運用・保守支援案件。 ユーザサポート、定常運用、クラスタメンテナンスなどを担当。 【業務内容】 ・Hadoopに関する運用業務(ユーザサポート、定常業務、メンテナンス) ・プロダクト保守/運用業務 ・利用者からの問い合わせ対応 (Trino/Sparkジョブ、クラスタ関連の問い合わせ対応) ・定常的なクラスタ運用業務(メンテナンス、増強、利用者要望対応) 【勤務地】 紀尾井町(フルリモ検討可能) 【勤務時間】 10:00~19:00 【勤務開始】 2026年4月2...

必須スキル

フルリモート検討可

掲載終了2ヶ月前

【注力案件一覧:テスター/クラウド/JavaScript/Hadoop/コーダー】

350,000円〜440,000円/月
業務委託品川駅
職務内容

懇意の元請け直案件、弊社プロパー含め複数アサイン中の案件になります。 有名エンド様の社内で、現在も稼働中のオンラインサイトや基幹システムの テストチームへとアサインいただきます。稼働は安定、長期で続くPJです。

必須スキル

・開発、テストの現場経験 ⇒2年以上 ・Pythonの現場経験 ⇒自学でも割と触っている方なら検討します。 ※ただし、あくまでもテスターなのでそこが問題ない方。 開発希望が強すぎる方は合いません。 ・コミュニケーション良好で、主体性の有る方。 ・長期参画可能な方

掲載終了2ヶ月前

【注力案件一覧:テスター/クラウド/JavaScript/Hadoop/JavaScript, WordPress】

350,000円〜440,000円/月
業務委託品川駅
職務内容

懇意の元請け直案件、弊社プロパー含め複数アサイン中の案件になります。 有名エンド様の社内で、現在も稼働中のオンラインサイトや基幹システムの テストチームへとアサインいただきます。稼働は安定、長期で続くPJです。

必須スキル

・開発、テストの現場経験 ⇒2年以上 ・Pythonの現場経験 ⇒自学でも割と触っている方なら検討します。 ※ただし、あくまでもテスターなのでそこが問題ない方。 開発希望が強すぎる方は合いません。 ・コミュニケーション良好で、主体性の有る方。 ・長期参画可能な方

掲載終了2ヶ月前

【注力案件一覧:テスター/JavaScript/Hadoop/JavaScript, WordPress】

350,000円〜440,000円/月
業務委託品川駅
職務内容

懇意の元請け直案件、弊社プロパー含め複数アサイン中の案件になります。 有名エンド様の社内で、現在も稼働中のオンラインサイトや基幹システムの テストチームへとアサインいただきます。稼働は安定、長期で続くPJです。

必須スキル

・開発、テストの現場経験 ⇒2年以上 ・Pythonの現場経験 ⇒自学でも割と触っている方なら検討します。 ※ただし、あくまでもテスターなのでそこが問題ない方。 開発希望が強すぎる方は合いません。 ・コミュニケーション良好で、主体性の有る方。 ・長期参画可能な方

掲載終了2ヶ月前

【インフラエンジニア】DB性能検証業務

〜550,000円/月
業務委託神奈川県
必須スキル

・DB構築経験がある方 ・調査、分析、レポートの作成経験がある方 ・Hadoop、KVSなどの開発経験がある方 ・手の動きがはやい方

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

15万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。

単価相場

Hadoop案件の単価相場と案件傾向

  • 現在の公開案件数は270件です。単価だけでなく、工程・働き方・稼働日数も合わせて確認してください。

Hadoop案件を、単価相場・働き方・担当工程の観点で整理しました。求人一覧を見る前に、募集傾向と単価帯の目安を確認できます。

公開案件数
270件 現在一覧で確認できる案件数
平均単価
データなし 単価データがある案件から算出
中央値
データなし 極端な高単価案件の影響を受けにくい目安
最高単価
データなし 掲載案件で確認できる上限単価

Hadoop案件を見るときのポイント

Hadoop案件は、単価だけでなく担当工程、働き方、求められる周辺スキルによって条件が大きく変わります。求人一覧では、報酬レンジとあわせて開発フェーズ、リモート可否、稼働日数を確認すると、自分に合う案件を見つけやすくなります。

Hadoop案件の仕事内容

Hadoop案件は、データレイクや分析基盤といった「大量データを貯めて処理する基盤」を対象に、安定稼働を支える運用保守から、データパイプラインの開発・改善まで幅広く見られます。クラスタの定常運用、増強やメンテナンス、利用者からの問い合わせ対応など、基盤をサービスとして提供する立ち回りも重要になります。

開発寄りの案件では、SparkやHive/Presto/Trinoなどと組み合わせて、バッチ処理やETL/ELT、SQLによるデータ抽出・加工、ジョブ作成を担当するケースが多いです。既存環境の移行(オンプレHadoopからクラウドDWHへ、OSS HadoopからCloudera CDPへ等)や、PoCを通じた性能検証・アーキテクチャ検討が含まれることもあります。

また、業務部門やデータサイエンティスト、分析利用者と連携し、要件を聞き出してデータ提供までつなげる役割も散見されます。ダッシュボード用のデータ整備や、分析結果をプロダクト改善に反映する流れまで関与する案件では、単なる基盤作業に留まらず、ビジネス側の意思決定スピードを上げることが期待されます。

Hadoop案件で求められる必須スキル

必須要件としてまず中心に置かれやすいのは、Hadoop(またはSpark)環境での実務経験です。運用保守案件ではクラスタ運用や障害切り分け、利用者問い合わせ対応など、基盤の状態を理解して適切に対処できることが重視されます。開発案件では、分散処理の特性を踏まえた実装や、ジョブ運用を想定した作り込みが求められます。

周辺スキルとしてはSQLの利用経験が広く必須になりやすく、JoinやUnionなどのクエリ調査・修正、集計の実装に対応できることが前提になりがちです。加えてPythonやJava、Scalaなど何らかの言語で、ETLバッチやデータ処理ロジックを実装・保守できるスキルが求められる傾向があります。

基盤寄りの案件ではLinuxの設計・構築や運用経験、クラウド環境での作業経験、インフラ支援経験が必須になりやすい点も特徴です。さらに、関係者と認識合わせをしながら進める場面が多いため、報連相やドキュメント作成を含むコミュニケーション力を要件に含める求人も目立ちます。

Hadoop案件であると有利な歓迎スキル

歓迎スキルとしては、Hadoopエコシステムの各コンポーネントに触れていることが評価されやすいです。HiveやHBase、HDFS、Parquetといった保存・参照まわりに加え、Presto/TrinoなどSQLエンジン側の理解があると、データ連携や利用者対応の場面で強みになります。

また、KafkaやFlink、ストリーミング処理、CDCなど、バッチとリアルタイムの両方を扱うデータパイプライン経験があると選択肢が広がります。クラウド移行・最適化の文脈では、BigQueryやSnowflake、Redshift、Databricksなど周辺基盤の知見も歓迎されることがあります。

運用自動化・基盤改善の観点では、AnsibleやTerraformなどのIaC、CI/CD、監視やログ基盤、ユニットテストを含む品質担保の経験があると有利です。単に動くジョブを書く以上に、再実行性や可観測性、チューニングまで踏み込める人材が評価されやすい傾向があります。

Hadoop案件で評価されやすい実務経験

評価されやすいのは、Hadoopクラスタの設計・構築や、運用しながらの改善経験です。増強やメンテナンス計画、障害対応のリード、利用者要望を取り込みながら運用ルールを整備するなど、基盤を「提供する側」としての実績があると説得力が出ます。

データエンジニアリング寄りでは、データパイプラインの設計から実装、運用までを一貫して回した経験が強みになります。例えば、ETL/ELTのジョブ設計、データ品質の担保、停止ジョブのリカバリ、クエリ改修や性能検証など、日々の運用で起きる課題を継続的に解消してきた経験が評価につながります。

さらに、移行・リプレイスの実務経験も武器になります。オンプレのHadoop環境からクラウドDWHへの移行、Hadoopディストリビューションの切替、Hadoopを前提とした既存処理を別基盤へ置き換える際の再設計・検証などは、要件整理や性能比較が伴うため、上流工程やPoC経験を示せると応募判断がしやすくなります。

Hadoop案件でよく使われる開発環境

開発環境は、Hadoop単体というよりSparkと組み合わせた構成が多く、SQL系ではHiveQL、Hive、Presto/Trinoが登場しやすいです。データ加工やジョブ開発ではPythonが頻出し、既存処理の保守や周辺システム連携、基盤側のツール実装ではJavaやScalaが使われるケースも見られます。

インフラ・基盤面ではLinuxが前提になりやすく、クラウドはAWS/Azure/GCPのいずれか、または複数を扱う案件もあります。クラウド上のHadoopとしてはEMR、Dataproc、Azureのマネージド基盤、あるいはDatabricksを中核に据えつつHadoop/Sparkの知識を要求する形も見受けられます。

参画後に動きやすくするには、バージョン管理(Git/GitHub/GitLab)、ジョブや運用自動化(AnsibleやTerraform等)、ワークフロー(Airflow、digdag等)、CI/CDや監視の基本を押さえておくと効果的です。特にデータ処理は「定期実行・失敗時の復旧・性能劣化の検知」がセットになりやすいため、運用まで含めて理解していると立ち上がりが早くなります。

Hadoop案件を選ぶときのチェックポイント

まず確認したいのは、役割が「クラスタ運用中心」か「データ処理開発中心」かです。運用中心の場合は問い合わせ対応や定常作業、増強・メンテが主になりやすく、開発中心の場合はETL/バッチ、SQL実装、パイプライン構築、テストまでが期待範囲になりがちです。自分が得意な軸と一致しているかを最初に見極めるとミスマッチを減らせます。

次に、対象基盤がオンプレかクラウドか、また移行フェーズか安定運用フェーズかを確認すると、求められる動き方が読みやすくなります。PoCやリプレイスでは性能検証やアーキテクチャ比較、要件の詰めが発生しやすい一方、安定運用では手順化・自動化やSLAを意識した改善が主テーマになりやすいです。

最後に、Hadoopの周辺でどのコンポーネントが重要視されているかを確認しましょう。SQLエンジン(Hive/Presto/Trino)寄りなのか、ストリーミング(Kafka/Flink)まで含むのか、あるいはDatabricksやDWH(BigQuery、Snowflake等)と接続する前提なのかで、必要なキャッチアップが変わります。担当範囲、チーム体制、レビューやドキュメントの文化も事前に聞けると安心です。

Hadoop案件の将来性・需要

求人からは、Hadoopが「既存の大規模データ基盤として運用され続ける領域」と、「クラウドDWHやDatabricks等へ橋渡しする領域」の両方で需要が見られます。特にデータレイクの運用保守、利用者サポート、基盤の増強や安定化といったテーマは継続しやすく、長期で参画する前提の案件も散見されます。

一方で、Hadoop環境から別基盤への移行、分散処理の最適化、SQLエンジンの置き換えなど、変化に対応する案件も目立ちます。そのため、Hadoop単体の経験だけでなく、Sparkの最適化やクラウドサービス、データパイプライン全体の設計といったスキルセットを広げている人ほど、選べる案件の幅が広がります。

加えて、データ基盤は非機能要件(性能、可用性、セキュリティ、運用性)の比重が高い分野です。要件定義やPoC、アーキテクチャ設計、運用設計を含む上流経験を積むほど、データ活用の中核に近いポジションで評価されやすく、今後も価値が上がりやすい領域だと言えます。

Hadoop案件のよくある質問

Hadoopは「運用経験」だけでも応募できますか?

運用保守を主目的とした案件では、HadoopやSparkの運用経験、インフラ支援経験、問い合わせ対応の経験が重視される傾向があります。開発経験が必須でない場合もありますが、障害切り分けや作業手順の整理、関係者調整などを自走できることが前提になりやすいです。

Hadoop案件では、SQLはどの程度必要ですか?

SQLは多くの案件で基礎スキルとして扱われ、クエリの調査・修正や集計が発生しやすいです。HiveQLを含むSQLでのデータ抽出・加工に加え、性能面の観点で改善提案ができると評価されやすくなります。

クラウド経験がないと難しいですか?

オンプレ中心の案件もありますが、クラウド上のデータ基盤や移行案件も見られるため、クラウド経験が歓迎されやすい状況です。未経験でも、Linux運用やHadoopクラスタの理解があり、学習しながら手を動かせる前提で検討されるケースはあります。

SparkやDatabricksの経験は必須ですか?

必須かどうかは案件の目的次第です。Hadoopクラスタ運用を中心とする案件では必須でない場合がある一方、データ処理の実装・最適化を担う案件ではSpark(PySpark/Scala)やDatabricks経験が強く求められることがあります。応募前に、担当する処理がバッチ中心か、性能改善が主題かを確認すると判断しやすくなります。

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

15万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。