分散処理のフリーランス案件・求人一覧|ページ6

業務委託分散処理
業務委託分散処理

分散処理のフリーランス案件・求人一覧|ページ6

全 252 件中 201-240件表示
掲載終了7ヶ月前
〜1,100,000円/月
業務委託東京都
職務内容

データ基盤構築をお任せします。 ・データレイク / ETL 基盤の構築 ・ AWS Glue(Apache Spark)による分散処理・ ETL 開発 ・ S3 / Lake Formation を用いたデータ管理・セキュリティ設計 ・ BigQuery ベースの DWH 環境整備 ・ AWS → GCP 間データ連携パイプラインの最適化 ・ BigQuery によるデータモデリング・クエリ最適化 ・ IaC を軸としたマルチクラウド管理 ・ Terraform による環境差分管理・自動化 ・ 品質管理・運用効率化 ・ Airflow などのワークフロー管理と CI/CD 整備 ・ データ品質テスト...

必須スキル

・ AWS 環境でのインフラ構築・運用経験 ・ GCP 環境でのインフラ構築経験 ・ETL開発及びパフォーマンスチューニング経験

掲載元:ACWEBフリーランス
掲載終了7ヶ月前
850,000円〜1,050,000円/月
業務委託東京都
職務内容

AWSとGCPを活用したデータ基盤の構築をご担当いただきます。サービス運用やビジネス分析、出版社支援など多様なデータ活用ニーズに応えるためのスケーラブルな基盤を目指します。 主な担当領域: - データレイク/ETL基盤の整備 ・AWS Glue(Apache Spark)を用いた分散処理・ETL開発 ・S3やLake Formationを活用したデータガバナンス/セキュリティ設計 - BigQueryベースのDWH構築 ・AWS→GCP間のデータ連携フロー最適化 ・BigQueryにおけるデータモデリングとクエリ性能改善 - IaCによるマルチクラウド管理 ・Terraformでの環境差異の制御と自動化 - 運用効率化と品質...

必須スキル

・AWS上でのインフラ構築/運用経験(S3、IAM、VPC など) ・GCPの構築経験(特に BigQuery と IAM/ネットワーク設定) ・BigQueryを用いた分析SQLの実務経験(パーティショニング/クラスタリング) ・AWS Glue(PySpark)によるETL開発およびパフォーマンスチューニング経験 ・Terraformを用いたIaC実践(マルチクラウドまたは複数環境での運用)

掲載元:広済堂ビジネスサポート
掲載終了7ヶ月前
1,300,000円〜1,350,000円/月
業務委託(準委任)東京都 渋谷区
職務内容

基盤の運用および改善業務を担当して頂きます。 具体的な業務内容 ユーザーからの依頼および問い合わせ対応 テーブル・ビュー追加/改修作業 データ閲覧権限管理作業 データパイプライン運用/改修作業 Google Cloud設定変更作業 技術調査/検証作業 その他運用改善に伴うツール開発/改修業務 ※社内のデータ基盤ユーザーとのコミュニケーション ★期間:随時~ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。(但し、企業都合退場は対象外) ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急...

必須スキル

・Pythonもしくはオブジェクト指向、スクリプト言語の経験 ・SQLの実用的・高度な知識とリレーショナル データベース、クエリ作成 SQL の操作経験 ・Linux、Docker、ネットワークの基礎知識 ・IaC(terraform)を利用したインフラリソースの管理経験 ・Github,Gitを利用したコード管理・チーム開発経験 ・3年以上のデータ分析基盤に関する業務経験 ・Google Cloudでのデータ基盤運用経験

掲載元:テックリーチ
掲載終了8ヶ月前
1,450,000円〜1,500,000円/月
業務委託(準委任)東京都 渋谷区
職務内容

基盤の運用および改善業務をお任せいたします。 ※社内のデータ基盤ユーザーとのコミュニケーションが発生します ユーザーからの依頼および問い合わせ対応 テーブル・ビュー追加/改修作業 データ閲覧権限管理作業 データパイプライン運用/改修作業 Google Cloud設定変更作業 技術調査/検証作業 その他運用改善に伴うツール開発/改修業務 ★期間:随時~ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。(但し、企業都合退場は対象外) ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ば...

必須スキル

・Pythonもしくはオブジェクト指向、スクリプト言語の経験 ・SQLの実用的・高度な知識とリレーショナルデータベース、クエリ作成、SQL の操作経験 ・Linux、Docker、ネットワークの基礎知識 ・IaC(terraform)を利用したインフラリソースの管理経験 ・Github,Gitを利用したコード管理・チーム開発経験 ・データ分析基盤に関する業務経験3年以上 ・Google Cloudでのデータ基盤運用経験

掲載元:テックリーチ
掲載終了8ヶ月前
550,000円〜600,000円/月
業務委託東京都
職務内容

大手メガバンク向けに、銀行側と信託側のシステムを統合(一元化)する大型プロジェクトです。 12月~基本設計、1月~詳細設計、3月~CD/UT、5月~IT(結合/総合テスト)を予定し、C/Oは2027年2月を見込みます。良好であれば以降の延長可能性もあります。 担当想定は以下の通りです。 ① 既存システムの保守・運用 ② 銀行側と信託側のシステム統合(取込)により、信託側をクローズ 環境はJava、Shell(Java起動)、Spark(分散処理・データマッピング)、Python(Spark起動)で、AWS上での稼働が想定されています。 稼働は水天宮前/人形町駅付近での常駐、定時は8:50~17:30です。弊社体制で参画中で、ベ...

必須スキル

AWS ・Javaを用いた開発経験が豊富で、詳細設計以降を自走できる方 ・プロジェクト完遂に向けて協調的に取り組める方

掲載元:広済堂ビジネスサポート
掲載終了8ヶ月前
700,000円〜1,000,000円/月
業務委託埼玉県 小川町
職務内容

AWS(データレイク)とGCP(DWH)を組み合わせたハイブリッドクラウド基盤を構築中です。 この基盤をスケールさせ、俊敏なデータ活用を全社に浸透させるために、 AWS Glue や BigQueryを活用したデータパイプライン開発を担当いただくデータエンジニアを募集します。 ・ データレイク / ETL 基盤の構築 ・ AWS Glue(Apache Spark)による分散処理・ ETL 開発 ・ S3 / Lake Formation を用いたデータ管理・セキュリティ設計 ・ BigQuery ベースの DWH 環境整備 ・ AWS → GCP 間データ連携パイプラインの最適化 ・ BigQuery によるデータモデリン...

必須スキル

必須スキル: ・ AWS 環境でのインフラ構築・運用経験(S3 / IAM / VPC など) ・ GCP での構築経験(特に BigQuery と IAM/ネットワーク設定) ・ BigQuery を用いた分析 SQL 実務経験(パーティショニング/クラスタリング) ・ AWS Glue(PySpark)での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践(マルチクラウド or 複数環境)

掲載元:Adeccoフリーランス
掲載終了8ヶ月前
850,000円〜1,050,000円/月
業務委託東京都
職務内容

AWS×GCPを活用したデータ基盤の設計・構築を担当いただきます。サービス運用支援、ビジネス分析、出版社支援など、多様なデータ活用ニーズに応えられる基盤を目指します。 主な業務: ・データレイク/ETL基盤の整備 └ AWS Glue(Apache Spark/PySpark)での分散処理およびETL開発 └ S3やLake Formationを用いたデータガバナンス/セキュリティ設計 ・BigQueryベースのDWH環境構築 └ AWS→GCP間のデータ連携フロー最適化 └ BigQueryでのデータモデリング/性能チューニング ・IaCによるマルチクラウド管理 └ Terraformでの環境差異管理と自動化 ・運用効率化...

必須スキル

・AWSでのインフラ構築/運用経験(S3, IAM, VPC など) ・GCPの設計/構築経験(特に BigQuery および IAM・ネットワーク設定) ・BigQueryでの分析SQL実務(パーティショニング/クラスタリングの活用) ・AWS Glue(PySpark)でのETL開発および性能チューニング経験 ・Terraformを用いたIaC実践(マルチクラウドまたは複数環境での運用)

掲載元:広済堂ビジネスサポート
掲載終了8ヶ月前
850,000円〜1,050,000円/月
業務委託東京都
職務内容

AWSとGCPを横断したデータ基盤の構築をご担当いただきます。サービス運用、ビジネス分析、出版社支援など多様なデータ活用ニーズに対応できるプラットフォームを目指します。 主な業務内容: ・データレイク/ETL基盤整備 - AWS Glue(Apache Spark/PySpark)による分散処理・ETL開発 - S3やLake Formationを活用したデータガバナンス/セキュリティ設計 ・BigQueryベースのDWH構築 - AWS→GCPのデータ連携フロー最適化 - BigQueryでのデータモデリング、クエリ最適化(パフォーマンス改善) ・IaCによるマルチクラウド管理 - Terraformで環境差異の...

必須スキル

・AWSでのインフラ構築/運用経験(S3、IAM、VPC等) ・GCP構築経験(特にBigQuery、IAM/ネットワーク設定) ・BigQueryを用いた分析SQL実務(パーティショニング/クラスタリングの設計・運用) ・AWS Glue(PySpark)でのETL開発/チューニング経験 ・TerraformによるIaC実践(マルチクラウドまたは複数環境での運用)

掲載元:広済堂ビジネスサポート
掲載終了9ヶ月前
850,000円〜1,050,000円/月
業務委託東京都
職務内容

AWSとGCPを併用したデータ基盤の設計・構築・運用を担当いただきます。サービス運用やビジネス分析、出版社支援など多様なデータ活用ニーズに対応できる堅牢な基盤を目指します。 主な業務内容: ・データレイク/ETL基盤の整備 └ AWS Glue(Apache Spark/PySpark)を用いた分散処理・ETL開発およびパフォーマンス最適化 └ S3、Lake Formationを活用したデータガバナンス/セキュリティ設計 ・BigQueryベースのDWH構築 └ AWS→GCPのデータ連携フロー最適化 └ BigQueryでのデータモデリング、クエリ最適化(パーティション/クラスタリング) ・IaCによるマルチクラウド管理...

必須スキル

・AWS上でのインフラ設計/構築/運用経験(S3、IAM、VPC等) ・GCPの構築運用経験(BigQuery必須、IAM/ネットワーク設定の実務) ・BigQueryでの分析SQL実務(パーティション/クラスタリング設計) ・AWS Glue(PySpark)によるETL開発とチューニング経験 ・Terraformを用いたIaC実践(マルチクラウドまたは複数環境)

掲載元:広済堂ビジネスサポート
掲載終了9ヶ月前
〜1,150,000円/月
業務委託長崎県 佐々町 神田
職務内容

データ基盤構築をお任せします。 ・データレイク / ETL 基盤の構築 ・ AWS Glue(Apache Spark)による分散処理・ ETL 開発 ・ S3 / Lake Formation を用いたデータ管理・セキュリティ設計 ・ BigQuery ベースの DWH 環境整備 ・ AWS → GCP 間データ連携パイプラインの最適化 ・ BigQuery によるデータモデリング・クエリ最適化 ・ IaC を軸としたマルチクラウド管理 ・ Terraform による環境差分管理・自動化 ・ 品質管理・運用効率化 ・ Airflow などのワークフロー管理と CI/CD 整備 ・ データ品質テストの自動化 ・期間は即...

必須スキル

・ AWS 環境でのインフラ構築・運用経験 ・ GCP 環境でのインフラ構築経験 ・ETL開発及びパフォーマンスチューニング経験

掲載元:Adeccoフリーランス
掲載終了9ヶ月前
600,000円〜650,000円/月
業務委託東京都
職務内容

メガバンク向けに、銀行側と信託側のシステムを一本化する大規模プロジェクトです。既存システムの保守・運用を行いつつ、段階的に基本設計、詳細設計、製造・単体テスト、結合テスト、ITを実施し、最終的に信託側システムをクローズします。 期間の目安: ・12月~ 基本設計 ・1月~ 詳細設計 ・3月~ 製造/UT ・5月~ IT ・C/O:2027年2月予定(以降の延長可能性あり) 環境:Java、Shell(Java起動)、Spark(分散処理・データマッピング)、Python(Spark起動)、AWS想定 作業場所:水天宮前/人形町駅(常駐) 定時:8:50~17:30 体制:元請けから複数名体制で参画中。ベテラン+若手のセット提案...

必須スキル

・Javaでの開発経験が豊富で、詳細設計以降を自走できる方 ・プロジェクト完遂に向けて主体的かつ協力的に動ける方

掲載元:広済堂ビジネスサポート
掲載終了9ヶ月前
750,000円〜1,050,000円/月
業務委託東京都
職務内容

AWS(データレイク)とGCP(DWH)を組み合わせたハイブリッドクラウド基盤を拡張中です。 全社で高速にデータ活用を進めるため、AWS Glue や BigQuery を用いたデータパイプラインの設計・実装・運用をお任せします。 主な業務: - データレイク/ETL基盤の構築 - AWS Glue(Apache Spark/PySpark)による分散処理・ETL開発 - S3 / Lake Formation を活用したデータ管理・セキュリティ設計 - BigQuery ベースのDWH整備 - AWS→GCP 間のデータ連携パイプライン最適化 - BigQuery によるデータモデリング/クエリ最適化 - IaC を軸とし...

必須スキル

データパイプライン 必須スキル: - AWSでのインフラ構築・運用経験(S3 / IAM / VPC などの実務) - GCPの構築経験(特に BigQuery と IAM/ネットワーク設定) - BigQuery を用いた分析SQLの実務経験(パーティション/クラスタリング設計を含む) - AWS Glue(PySpark)でのETL開発とパフォーマンスチューニング経験 - Terraform によるIaC実践(マルチクラウドまたは複数環境での運用)

掲載元:広済堂ビジネスサポート
掲載終了9ヶ月前
600,000円〜650,000円/月
業務委託東京都
職務内容

メガバンク向けに、銀行側と信託側システムの一元化を進める大規模プロジェクトです。12月から基本設計、1月から詳細設計、3月以降CD/UT、5月以降ITと工程が進み、C/Oは2027年2月予定の長期案件です。 既存システムの保守・運用を継続しつつ、信託側機能の取り込みによる統合を実施します。弊社体制参画中で、今後PG枠の増員を予定しています。 勤務は水天宮前/人形町駅近辺での常駐、定時は8:50〜17:30です。

必須スキル

・Javaを用いた開発経験が豊富で、詳細設計から自走できる方 ・プロジェクト完了に向けて主体的かつ協働的に取り組める方

掲載元:広済堂ビジネスサポート
掲載終了10ヶ月前
400,000円〜500,000円/月
業務委託東京都
職務内容

大規模な総合ECサイトにおいて、機能追加を含む新規開発および既存機能の保守運用を担当いただきます。 要件定義から設計・実装・テスト・リリース後の運用まで一貫して関わるポジションで、チームをリードしながら品質とスピードの両立を図っていただきます。 主な環境/技術: - 言語: Java、Objective-C、C# - フレームワーク: Spring(Spring Boot想定) - インフラ: 各種クラウド環境(AWS/GCP/Azureのいずれか) - ビッグデータ関連技術: 分散処理/ストリーミング基盤等(例: Hadoop/Spark/Kafka など) 体制: 複数チーム体制のうち、数名規模のサブチームをリードいた...

必須スキル

フルリモート ・Javaでの開発経験5年以上 ・要件定義など上流工程の実務経験 ・数名規模チームのリーダー/サブリーダー経験 ・リモート環境で円滑にコミュニケーションでき、安定した勤怠で稼働できること

掲載元:広済堂ビジネスサポート
掲載終了1年前
750,000円〜950,000円/月
業務委託東京都
職務内容

大手企業向けのデータ活用基盤移行プロジェクトにおいて、dbt を用いたETL/ELT開発を担当いただきます。 主なミッションは、既存の Informatica で構築された処理を、Databricks 環境で動作する dbt ベースのデータパイプラインへリプレースすることです。 具体的には、要件整理・変換ロジックの再設計、dbt モデルの実装・テスト、データ品質の担保、運用を見据えたパイプライン整備を行います。Databricks 上での開発経験や PySpark を用いた分散処理の知見がある方は歓迎します。 就業形態は原則リモートですが、状況により都内23区内でのオンサイト対応をお願いする場合があります。

必須スキル

dbt・Databricks ・ETL またはデータパイプラインの設計・実装経験 ・Python を用いた業務開発経験(3年以上) ・SQL を用いた業務経験(3年以上)

掲載元:広済堂ビジネスサポート

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

7万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。

インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる

7万件以上のフリーランス案件から一括検索

エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。

あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。