Apache Sparkのフリーランス案件・求人一覧|ページ4

業務委託Apache Spark
業務委託Apache Spark

Apache Sparkのフリーランス案件・求人一覧|ページ4

全 523 件中 121-160件表示
掲載終了8ヶ月前
600,000円〜800,000円/月
業務委託基本リモート
職務内容

案件概要:データ分析基盤構築案件(Talend、RedShift、Apache Sparkなど) 業務内容: 現状のデータ分析基盤はTalend、RedShiftを用いたアーキテクチャだが 性能限界が見込まれいるため、改善すべき処理や課題の抽出を実施する案件 場所:基本リモート 外国籍:NG

必須スキル

・大量データを扱うバッチ設計 ※現行データ分析基盤(Talend、RedShift)の課題や改善点など抽出可能なこと ・Apache Sparkなどフレームワークを利用した大量データを処理するバッチシステムの設計・開発スキル保有

掲載元:1on1Freelance
掲載終了9ヶ月前
500,000円〜700,000円/月
業務委託東京都 江東区 門前仲町
職務内容

概要:大手通信業者様のデータ情報系システム(大規模DWH)を 段階的にクラウドシフトしている案件です。 担当工程:設計、製造、試験の一連タスクを対応 勤務形態:出勤+在宅の併用型 参画直後の2ヶ月はフル常駐。本番作業時も出社。 出社時は門前仲町駅 面 談:1回web、その他顔合わせの可能性があり 単 価:スキル見合い、140-180h、15分単位、支払サイト35日、法人契約可

必須スキル

・基本設計~開発、試験工程までの経験が有り この工程範囲を1人称で進められる方 ・チーム特性からある程度自主的に動ける方 ・spark、linux、RDBの開発経験 #シェルの作り込みなどLinuxに長けてる必要あり

掲載元:Adeccoフリーランス
掲載終了9ヶ月前
900,000円〜950,000円/月
業務委託(準委任)フルリモート
職務内容

・新データ基盤の設計・構築(AWS/BigQuery/Snowflake等) ・ETL/ELTパイプラインの改善・最適化 ・データモデル設計/マルチテナント対応 ・データガバナンス、セキュリティ設計・運用、コンプライアンス対応 ・全社業務データ/IoTデータ/行動データの統合管理 ・BIツール連携設計 ・データ基盤運用・最適化、チーム技術育成・レビュー (工程)要件定義、設計、構築、運用、最適化、技術リード (開発環境) 言語:Python/Go/Java クラウド:AWS/GCP/Snowflake IaC:Terraform/CloudFormation/CDK DWH:BigQuery/RDBMS...

必須スキル

・クラウド(AWS/GCP/Snowflake等)での大規模データ基盤構築・運用経験 ・Terraform/CloudFormation/CDK等によるIaC本番運用経験 ・RDBMS/SQLを用いたテーブル設計・ETL開発経験 ・Python/Go/Java等でのデータ処理バッチ設計・開発経験 ・ステークホルダー調整を伴う基盤開発推進経験 ・技術的リード経験 ・セキュリティ/データ品質に関する強い意識 ・マルチクラウド/ハイブリッド構築経験 ・数百万件規模/リアルタイム処理のパイプライン構築経験 ・ETLフレームワーク(Spark/dbt/Dataform/Trocco等)利用経験 ・機械学習を用いた予測...

掲載元:テックリーチ
掲載終了9ヶ月前
600,000円〜620,000円/月
業務委託東京都
職務内容

大手通信企業向けの大規模データ分析基盤における保守・機能拡張プロジェクトです。 AWSを中心に、新サービス導入の技術検討からインフラ構成検討・設計、リリースまで一連の工程を担当します。 直近ではCI/CD、Databricks、チャットボット、コンテナなどの新技術をPOC的に継続導入しています。今回は技術面でのサブリーダーとして、リーダーの補完やメンバーフォローを担える方を募集します。上位からは現在7名参画中です。 <想定業務> ・AWS環境でのサーバ構築やシステム開発 ・Spark/EMRによるデータ分析・抽出 ・データ集計、手動更新、テストデータ投入 ・AWS Lambdaでのジョブ実行コントロール ほか <システム...

必須スキル

Spark ・AWS等クラウドを用いたインフラ設計・構築・運用経験(目安5年) ・サブリーダー経験、またはAWS設計/構築のエキスパート ・汎用プログラミング言語での開発経験(Python/Node.js/Java/Go等) ※ゲーム領域出身でもAWSスキルが高ければ提案可

掲載元:広済堂ビジネスサポート
掲載終了11ヶ月前
750,000円〜900,000円/月
業務委託東京都
職務内容

顧客内製システムにおける自動化開発プロジェクトです。 人手で行っている障害発生時の切り分け作業を、業務フローを統合して自動化する仕組みを開発します。DEVチームに所属し、進捗に応じてQA支援を行う場合があります。 ・対象:データパイプライン(ETL)、サーバレス/マイクロサービス基盤、ワークフロー自動化 ・役割:設計〜実装〜テスト〜運用の推進、フレームワーク/ツール/プロセスの選定、チームリード ・出社:基本フルリモートだが、月1回程度 品川出社の可能性あり

必須スキル

リモート <超必須> ・Pythonによる開発経験10年以上 ・約5名規模の開発チームリーダー経験 ・開発フレームワーク/ツール/プロセスの選定・標準化の実務経験 ・ETL開発およびデータパイプライン構築経験 ・マイクロサービス/サーバレスアーキテクチャの理解 ・DWH/ビッグデータ実装(ETL等)の理解 ・Pytest等を用いたテストコード実装経験(または相応の知見) ・AWS上でのシステム開発実務経験 ・サーバレス型ワークフロー開発経験 ・AirflowおよびDAGの開発経験、もしくは概念理解 <必須> ・Pandasを用いた開発経験 ・Kinesisを用いた開発経験 ・Sparkを用いた開発経験 ・Redshiftを用...

掲載元:広済堂ビジネスサポート
掲載終了11ヶ月前
650,000円〜700,000円/月
業務委託東京都 渋谷区 渋谷
職務内容

大手通信企業向けの大規模データ分析基盤にて、保守開発および新規技術導入を推進するサブリーダーを募集します。 AWSを中心に、インフラ構成の検討・設計からリリースまで一連を担当。CI/CD、Databricks、チャットボット、コンテナ等のPOC的導入・刷新にも関与いただきます。 具体的には、AWS環境でのサーバ構築やシステム開発、EMR/Sparkを用いたデータ分析・抽出、データ集計・手動更新、テストデータ導入、AWS Lambdaによるジョブ実行コントロールなどをお任せします。

必須スキル

Spark ・AWSなどクラウドを用いたインフラ設計・構築・運用の実務経験 ・サブリーダー相当の推進経験、またはAWS設計構築のエキスパートスキル ・汎用プログラミング言語での開発経験(Python/Node.js/Java/Go いずれか)

掲載元:フリコネ
掲載終了11ヶ月前
750,000円〜900,000円/月
業務委託フルリモート想定
職務内容

【案 件 名】学習支援サービスにおけるデータ分析基盤の保守開発 【内 容】 ・既存システムのキャッチアップ ・データ分析基盤の保守開発 Databricksをベースとした既存データ分析基盤からの即時キャッチアップが求められており、 加えて即時運用開発へ移行できる即戦力を求めております。 【場 所】フルリモート想定 【期 間】7月初旬~ 【募集人数】2名 【人 物 像】コミュニケーション問題ない方/自走できる方 【金 額】75万~90万 【面 談】2回

必須スキル

【ス キ ル】 必須スキル ・データ分析基盤の構築経験が豊富 ・Databricksの経験(1人称) ・既存システムの仕様把握・キャッチアップ能力が高い方 ・以下の技術を利用したシステム構築および開発経験 Azure関連:Azure Data Factory, Azure Data Lake Storage, Azure Databricks ツール,言語関連:SQL, Python(特にPySpark), Apache Spark 尚可スキル ・以下の技術を利用したシステム構築および開発経験 Delta Lake,Koalas(PandasライクなSparkライブラリ)

掲載元:案件ナビ
掲載終了1年前
1,250,000円〜1,350,000円/月
業務委託東京都 世田谷区 二子玉川
職務内容

データ分析とインサイト抽出:サイバーセキュリティ関連データの詳細な分析を行い、傾向、パターン、異常を特定。可視化やレポートを通じてステークホルダーに共有。 AIモデルの展開と運用:AI/MLモデルを本番環境に展開・監視・保守し、高可用性と高パフォーマンスを確保。 AIインフラ管理:クラウドリソースや専用ハードウェアを含むAI/データインフラの選定、導入、管理。 データパイプラインの構築:大規模なサイバーセキュリティ関連データの取り込み、処理、変換のための堅牢かつスケーラブルなパイプラインを設計・構築・保守。 AIモデルの性能最適化:本番環境でのAI/MLモデルの性能を最適化(ファインチューニング、スケーリング、リソース...

必須スキル

・SQL、Spark、Airflow、クラウドストレージ等のデータエンジニアリングツール経験 ・統計分析・データマイニング・機械学習に精通 ・データ分析・探索的調査の知識 ・LangChain、ベクタDB、HuggingFace、OpenAI API等のAIツール活用経験 ・Python/Node.js等によるAIサービスの統合 ・PyTorch/TensorFlowによるAI/MLモデル開発 ・MLflow/Weights & Biases等のMLOps知識 ・大規模データセット・データウェアハウスの取扱経験 ・SQLなどデータベース言語に精通 ・Python、R、PowerShell等のスクリプト言語習熟 ・Tableau...

掲載元:エンジニアファクトリー
掲載終了1年前
〜900,000円/月
業務委託東京都
職務内容

学生向け学習支援サービスにおけるデータ分析基盤の保守開発をご担当いただきます。 既存システムの仕様を迅速にキャッチアップし、Azure関連技術を活用したシステムの保守および開発に従事していただきます。 【具体的には】 ◆既存データ分析基盤の保守・開発業務 ◆既存システムの仕様把握・キャッチアップ ◆Azure Data Factory、Data Lake Storage、Databricks 等の利用 ◆SQL、Python(PySpark)、Apache Sparkを用いた開発

必須スキル

◆データ分析基盤の構築経験が豊富な方 ◆既存システムの仕様把握・キャッチアップ能力が高い方 ◆Azure Data Factory, Azure Data Lake Storage, Azure Databricks を用いた開発経験 ◆SQL、Python(特にPySpark)、Apache Spark の利用経験

掲載元:フォーカスフリーランス
掲載終了1年前
600,000円〜800,000円/月
業務委託東京都 江東区
職務内容

▍通勤面:リモート併用環境! ▍インボイス未登録の方OKです! データ分析ツール導入および保守開発支援にて、 Pythonの経験者を募集しています! 作業内容は以下の通りです。 ◆想定作業◆ ・生保向けデータ分析ツール導入/開発保守 ・開発より調査やドキュメント作成が多い想定 ・Azureへの移行 ・その他付随する作業 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください! 相談のみのご応募も歓迎です!

必須スキル

・週5日ご勤務頂ける方 ・勤務地出社可能な方優遇 ❖給与・報酬❖ 600,000~800,000円(税込) あくまでも目安ですのでご相談下さい!

掲載元:Re:search
掲載終了1年前
600,000円〜750,000円/月
業務委託東京都 中央区
職務内容

?通勤面:リモート併用環境! ?インボイス未登録の方OKです! 玩具メーカー/出版社向けWEBアプリ開発にて PHP,Laravelの経験者を募集しています! 管理サイトや応募サイトなど各種サイト等の バックエンド側開発をご対応お願い致します。 ▼ご担当工程: ・基本設計~詳細設計~製造 ・テスト~リリース~運用保守 ・その他付随する作業 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください! 相談のみのご応募も歓迎です!

必須スキル

・週5日ご勤務頂ける方 ・基本設計からリリースまでのご経験 ・PHP(Laravel)を用いた開発のご経験 ?勤務地出社可能な方優遇!? ※出社頻度はご相談ください! ?給与・報酬? 600,000~750,000円(税込) あくまでも目安ですのでご相談下さい! 以下キーワードの方が活躍中! #フリーランス#業務委託 #在宅#リモート#テレワーク #エンジニア#プログラマ#SE#PG #Python #SQL #Spark #データ分析

掲載元:Re:search
掲載終了1年前
550,000円〜700,000円/月
業務委託東京都 江東区
職務内容

?通勤面:リモート併用環境! ?インボイス未登録の方OKです! データ分析ツール開発保守PJにて、 Python/Spark経験者を募集しています! ▼ご担当工程: ・データ分析、利活用ツールの導入 ・保守開発等(開発より調査やドキュメント作成の方が多い想定) ・Azureへの移行 ・その他付随する作業 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください! 相談のみのご応募も歓迎です!

必須スキル

・週5日ご勤務頂ける方 ・Pythonを用いたデータ分析のご経験 ・Sparkのご経験 ?勤務地出社可能な方優遇!? ※出社頻度はご相談ください! ?給与・報酬? 550,000~700,000円(税込) あくまでも目安ですのでご相談下さい! 以下キーワードの方が活躍中! #フリーランス#業務委託 #在宅#リモート#テレワーク #エンジニア#プログラマ#SE#PG #Python #SQL #Spark #データ分析

掲載元:Re:search

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

8万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

8万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。