Apache Sparkの業務委託案件・フリーランス求人一覧｜ページ4

≪SQL/Python≫新規データマート作成

★【～60万円/フリーランス】≪SQL/Python≫新規データマート作成※30~50代活躍中!!【業務内容】 ・新規データマート要件定義、既存集計フロー効率化 ・ユーザの要望を聞いて、新しいデータマートを作成したり 既存の集計フローを自動化することで効率化を図ります ・データマート作成 ・既存帳票(Excel,CSV)からSQL作成、BIでの可視化 ・データのETL処理やETL処理のためのスクリプト・ システム開発運用改善業務 - AWSのGlue・Athena等を使用し、SQL・Pythonでコーディングし、 S3にデータレイク、データマートを構築 - 既存の基盤改修・改善 ・データマート日次運用保守業務【求める人物像】 ...

≪Go≫大規模ライブ配信アプリ開発 AWSインフラエンジニア

★【~80万円/フリーランス】≪Go≫大規模ライブ配信アプリ開発 AWSインフラエンジニア※30～50代活躍中!!【業務内容】 ライブ配信アプリを開発しております。 この度、インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。 具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。 【開発環境】 ・分散DB（Cloud Spanner） ・言語：Go言語 ・通信 ：connect-go proto ・コンピューティング：Kubernetes → Cloud Run ・DWH・パイプライン構築 ・BigQuery ・Apache Spark【求める人物像】 【必須条件】 ・過去...

≪AWS≫クラウドでのデータ分析基盤開発エンジニア

★【~70万円/フリーランス】クラウドでのデータ分析基盤開発エンジニア※30～50代活躍中!!【業務内容】 クラウドでのデータ分析基盤開発をご担当いただきます。【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100％（平日の週5日）稼働が可能な方。 ※副業希望の方はご案内ができかねます。 ・日本語ネイティブな方。（日本語でのコミュニケーション必要不可欠になります。） ・日本在住の方 ・ITスキルを使用した実務経験をお持ちの方 【尚可条件】 ・首都圏にお住まいの方 ・出社ができる方(フル出社尚良し) ※下記の方はご応募いただけません ・現在就業中の方で、退職時期が決...

≪デザイナー≫コンシューマ向けゲーム開発における3Dエフェクト

★【~65万円/フリーランス】≪デザイナー≫コンシューマ向けゲーム開発における3Dエフェクト※30～50代活躍中!!【業務内容】 既存ゲームの追加開発もしくは新規ゲーム開発において、エフェクトデザイナーとして制作業務を担当していただきます。 ・ゲーム開発に関するエフェクト制作業務、クオリティ管理 ・エフェクトの選定、修正業務【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100％（平日の週5日）稼働が可能な方。 ※副業希望の方はご案内ができかねます。 ・日本語ネイティブな方。（日本語でのコミュニケーション必要不可欠になります。） ・日本在住の方 ・ITスキルを使用...

≪ITエンジニア≫金融機関向けDatabricks開発

★【~87万円/フリーランス】≪ITエンジニア≫金融機関向けDatabricks開発※30～50代活躍中!!【業務内容】 大手金融機関向けに、Databricksを使用した開発を担当していただきます。 データエンジニアリング領域での業務です。【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100％（平日の週5日）稼働が可能な方。 ※副業希望の方はご案内ができかねます。 ・日本語ネイティブな方。（日本語でのコミュニケーション必要不可欠になります。） ・日本在住の方 ・ITスキルを使用した実務経験をお持ちの方 【尚可条件】 ・首都圏にお住まいの方 ・出社ができる方(フ...

【SQL】ビッグデータ分析に伴うデータ抽出案件

大量のデータを分析するため、特定の条件を満たすデータを抽出する業務を担当いただきます。 ビッグデータプラットフォーム上のデータを対象とし、適切なクエリを作成し、抽出されたデータを報告書やダッシュボード等に反映させます。

【Databricks】データ解析システム開発支援(基本リモート)

Databricksによるデータ解析システムの開発案件です。 データエンジニアを1名募集致します。設計～テストまでご担当頂きます。 ■募集背景 人員不足のため。

【Python】データ解析システム構築支援(基本リモート)

Databricksによるデータ解析システムの構築支援 ■募集背景 増員のため

【データアナリスト】大手SIer データ基盤構築/活用支援（Snowflake）の求人・案件

国内外の様々なお客様にSnowflakeの導入とそれに伴うデータ活用の支援 -Snowflakeの導入コンサルティング -Snowflakeを中心としたデータ基盤の開発支援、データ活用支援 -Snowflakeや周辺技術領域（モダンデータスタック）の情報収集、技術検証 -データ基盤やデータエンジニアリングに関する技術情報発信

【Kubernetes】既存プロダクトにおけるバックエンド開発支援(フルリモート)

・コア基盤の技術選定、アーキテクチャ設計、開発、および持続的な運用 ・データ変換、意味づけ、活用を柔軟に行うための、プロダクト向けデータプラットフォームの設計・開発 ・各アプリケーションとデータプラットフォームの境界を定義し、抽象化されたAPIの設計・開発 ■募集背景 既存プロダクトにおける開発組織を強化するため。

スクラム開発(アジャイル開発)支援/メーカー企業のエンジニア求人・案件 IT

・Spark/DevOps/NoSQLを用いたアジャイル開発支援 ・テスト実施支援

【Java】ECサイトのデータ分析基盤の運用改修業務/化粧品系のエンジニア求人・案件 業務 / IT

・某化粧品系ECサイトのデータ分析基盤の運用機能改修

工場データの共通基盤構築支援【長崎】/半導体メーカーのエンジニア求人・案件 IT

・データ共通基盤構築(要件定義～基本設計) ・開発ベンダーの管理(進捗、成果物レビュー)

【Spark】ECサイトのデータ分析基盤運用機能改修支援/分散処理/Javaのエンジニア求人・案件 IT

・某化粧品系ECサイトのデータ分析基盤の運用/機能改修支援 ・分散処理のフレームワークはSparkを使用

【spark on scala】美容系ECサイト向けデータ分析基盤の運用・機能改修/六本木一丁目/即日～のエンジニア求人・案件 IT

美容系ECサイトにおけるデータ分析基盤の運用と機能改修業務

【Databricks/Azure/Python】小中学生向け学習支援サービスにおけるデータ分析基盤の保守開発支援(フルリモート)

・既存システムのキャッチアップ ・データ分析基盤の保守開発 Databricksをベースとした既存データ分析基盤からの即時キャッチアップが求められており、加えて即時運用開発へ移行できる即戦力要員を募集しております。 ■募集背景 増員のため。

【Databricks/Azure/Python】小中学生向け学習支援サービスにおけるデータ分析基盤の保守開発支援(フルリモート)

・既存システムのキャッチアップ ・データ分析基盤の保守開発 Databricksをベースとした既存データ分析基盤からの即時キャッチアップが求められており、加えて即時運用開発へ移行できる即戦力要員を募集しております。 ■募集背景 人員不足のため。

【Azure】小中学生向け学習支援サービスにおけるデータ分析基盤の保守開発の求人・案件

・既存システムのキャッチアップ ・データ分析基盤の保守開発

【Java・Python/基本リモート/週5日】某通信会社向け開発支援作業

某通信会社向け開発支援作業

【Java/Scala/Spark】流通向けアプリケーション開発支援（リモート併用可）

データ分析基盤構築およびアプリケーション開発(Java,Scala,Spark) AWS上でのjavaバックエンド開発 ■募集背景 人員不足のため。

【Python/SQL】SaaS企業におけるデータエンジニアの業務委託案件・フリーランス求人

世の中のクリエイティブデータを解析するSaaS！ LLMエンジニア募集

【Python/AWS】データマート作成などにおける上流SE支援(基本出社)

・新規データマート要件定義、既存集計フロー効率化 ユーザの要望を聞いて、新しいデータマートを作成したり既存の集計フローを自動化することで効率化を図ります。 ・データマート作成 既存帳票(Excel,CSV)からSQL作成、BIでの可視化 ・データのETL処理やETL処理のためのスクリプト・システム開発運用改善業務 - AWSのGlue・Athena等を使用し、SQL・Pythonでコーディングし、S3にデータレイク、データマートを構築 - 既存の基盤改修・改善 ・データマート日次運用保守業務 ■募集背景 人員不足のため。

人流データの抽出処理に関する検証、改修業務 - フリーエンジニア IT 案件 求人【エンジニアルーム】ITフリーランス ITエンジニア IT個人事業主 仕事 転職 募集

【人流データ抽出処理に関する検証、改修業務】☆ Spark（Scala）によるバッチ処理改修 BashによるShellスクリプト改修 Gitlabでのissue/コード登録 外部設計～リリース

人流統計処理開発支援 - フリーエンジニア IT 案件 求人【エンジニアルーム】ITフリーランス ITエンジニア IT個人事業主 仕事 転職 募集

【人流統計処理開発支援】☆ Spark(Scala)によるバッチ処理改修 BashによるShellスクリプト改修 Gitlabでのissue/コード登録 外部設計/内部設計/開発/単体テスト/結合テスト/リリース

【フルリモート/Python】通信会社向け開発支援作業

■概要 通信会社向け開発支援作業 ■工程・担当業務 基本設計～テスト ■募集人数 ２～３名 ■働き方 フルリモート

【エンド直/フルリモート/フレックス有/Python/AWS】データエンジニア募集

【仕事内容(概要)】 - 『SaaS+Database』サービスを支えるビッグデータ（数十TBオーダー）基盤の構築・改善 【仕事内容】 以下のいずれか、もしくは複数を対応いただきます。 - Webデータクローリングのためのパイプライン新設や改善 - データのクレンジングやエンリッチメント処理 - データの品質改善を目的とした品質モニタリング環境の構築 - スケーラブルかつコスト効果の高いデータ基盤への改善 - 将来的なデータサイエンス活用を踏まえたデータ基盤やデータ品質整備設計

【SQL】【インフラエンジニア】製造業様向けAzure Databricks開発の求人・案件

製造業様向けAzure Databricks開発業務に携わっていただきます。\n\n主に下記作業をご担当いただきます。\n・顧客の作成中のソースのレビュー、データ変換・移行に関する分析\n・Bronzeにあるデータを変換して次のSilver Layerに持っていく（Bronze⇒Silver⇒Gold）\n・Gold LayerのデータをMLなどに活用、BIで分析\n・Azure Databricksソリューションの設計とデリバリー\n・要件分析とソリューションアーキテクチャ設計及び仕様の作成\n・データモデリングとデータアーキテクチャ設計\n・ETL、データ統合、およびデータ移行の設計\n・データ品質システムとプロセスの設計...

Python／広告事業のデータマイニング・機械学習エンジニア募集案件・求人

複数ある自社広告配信プロダクトの100億レコード以上/日のログを分析し、広告配信を最適化する業務を担当いただきます。 【主な仕事内容】 ・ビジネスインパクトが大きなKPI改善の見極め ・KPI（CPCなど）最適化の改善及び運用

【Java/Python/生成AI】生成AI/LLM専任チーム

■概要 ・プロダクトへの生成AI/LLM技術適応の開発 ・生成AI・LLMに関わるサービスの技術選定、アプリケーションのアーキテクチャ設計 ・生成AI・LLMに関わる最先端の技術キャッチアップ・外部発信

【六本木/リモート併用】AzureDatabricks開発支援

■概要 Azure Databricks 開発案件（CXプロジェクトの一環としてデータマネージメントシステム）。 顧客の作成中のソースのレビュー、データ変換・移行に関する分析。 １つLayerにあるデータを変換して次のLayerに持っていく。 （Layer 1⇒Layer 2⇒Layer 3） Layer 3でMLなどに活用、BIで分析（別チームが動いている）

【Java】新たなマーケティングに繋げるデータベースエンジニア案件

Webサイトやスマホアプリからユーザーの行動データを収集して マーケティングやWeb施策に活用するために抽出、集計を行うためのDMPの構築 フェーズ：設計、製造・単体テスト、結合テスト

Scala/　サーバーサイドエンジニア案件

広告技術のDSP開発をお願いします。 本事業部では、各社とのシステム連携により広告を表示しています。 1つのリクエストに対して100ミリ秒で応答を返すという制限(低レイテンシ)と 秒間1万を超えるリクエストを処理(ハイスループット)するシステムを作ります。 メイン言語はScalaを利用し、インフラ環境はGoogleCloudPlatformを利用しています。 エンジニア５人程度のチームでアジャイル開発のプロセスをベースにカンバンなどで作業進捗を確認しながらすすめ、 ドキュメントはコミュニケーションと保守に必要な最低限の情報で作成し、システムの実装、開発、運用をしています。

【Java】データベースエンジニア案件

設計、製造・単体テスト、結合テスト 抽出・集計を行うためのDMP構築・Webサイト・スマホアプリからのユーザーデータの収集

【Python】収集データ分析システム開発

メディアの収集データを分析してくれるシステムを開発していく案件での人員募集になります。 元請け側のチームに参画し、 維持管理しているシステムの定常業務＋案件が発生したときに対応するメンバーを募集します。 直近だとSnowflakeに移行する案件などが維持管理に移ったりしているのでそういった案件を維持しつつ発生案件に対応していきます。 基本は、Snowflakeの開発案件が多いチームです。 長期的に支援いただける要員を探しております。 ※Pythonとrubyとでそれぞれ案件が複数あり、現状はRuby案件に入っていただく予定です。 その為、PythonかRubyいずれでも技術をお持ちの方を探しております。

【SE】金融機関データマネジメントシステム開発支援の求人・案件

金融機関データマネジメントシステム開発支援業務に携わっていただきます。\n\n主に下記作業をご担当いただきます。\n・データ分析用データマネジメントシステムのクラウド環境移行開発支援\n・お客様先の開発チームに参画し業務対応\n・上流設計対応、または詳細設計、及び実装作業\n・データパイプライン（Apache Spark、databricks、SAS Viya等）を用いた開発業務\n\n開発環境：AWS、GCP\n工 程 ：上流設計、詳細設計、実装、テスト実施

【SQL】【アナリティクスエンジニア】DWH層のテーブルの設計・開発・保守の求人・案件

国内シェアNo.1のクラウド会計サービス運営企業におけるアナリティクスエンジニア\nとしてご参画いただきます。\n\n【案件内容】\n意思決定をデータドリブンに行っていくために必要なDWH層のテーブルの設計・開発・保守を行っていただきます！\n想定している業務内容は以下になります。\n・DWH層テーブルの設計\n・DWH層テーブルのSQLおよびPySparkを用いた実装\n・DWH層テーブルについての問い合わせ対応・不具合調査\n・DWH層開発環境の設計・開発・保守・運用\n・DWH層開発環境の設計・開発・保守・運用\n\n【開発環境】\n言語：SQL,Python\nＦW：Apache Spark\n環境・ＯＳ：GCP (G...

【AWS/GoogleCloudPlatform】マーケ支援の基盤を支えるデータエンジニアの業務委託案件・フリーランス求人

.

QL/Python/週2~3/フルリモート/国内シェアNo.1のクラウド会計サービス運営企業におけるアナリティクスエンジニア

意思決定をデータドリブンに行っていくために必要なDWH層のテーブルの設計・開発・保守を行っていただきます！ 想定している業務内容は以下になります。 ・DWH層テーブルの設計 ・DWH層テーブルのSQLおよびPySparkを用いた実装 ・DWH層テーブルについての問い合わせ対応・不具合調査 ・DWH層開発環境の設計・開発・保守・運用 ・DWH層開発環境の設計・開発・保守・運用 以下のような方はお見送りになっております...。 ・DWH層の設計・構築経験が読み取れない方 ・クラウドのDWHの利用経験がない方 ・実装メインのため、プロジェクトマネージャーとしてのご経験が主な方 ・自然言語処理、画像処理がメインの方

【エフェクトデザイナー】自社スマホゲーム開発会社でのエフェクトデザイナー募集！

3Dエフェクトの制作実務経験 ゲーム業界での業務経験1年以上 / RPGやアクションゲームのリアルタイム3Dエフェクト制作経験 / spark gearの使用経験 / Bishamon等エフェクト制作ミドルウェアの使用経験 / MAYA等3Dツールを使用したモデリング経験

分析プログラム改修 - フリーエンジニア IT 案件 求人【エンジニアルーム】ITフリーランス ITエンジニア IT個人事業主 仕事 転職 募集

【分析プログラム改修】☆ Pyhonのバージョンアップ改修 Scala記述部分のApacheApark差し替え