トラック製造販売メーカー向けに、車両のGPSログを用いたリアルタイム可視化アプリのパフォーマンス最適化を行います。 現状、膨大なGPSデータ解析で処理遅延が発生しており、Databricks(PySpark/Scala)およびAzureデータ基盤を中心に、抜本的なチューニングと改善施策の設計・実装をご担当いただきます。 想定業務: ・Databricks(PySpark, Scala)のパフォーマンス最適化 ・大規模バッチ/ストリーミング処理の実装・改修 ・Azureデータ基盤(ADF/SQL/Functions等)の性能改善 ・保守運用、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて、初月は週3出社、その後は週1...
必須スキル: ・Databricksでの開発経験(PySparkおよびScalaでのコーディング) ・Sparkクラスタの構造/処理方式の理解と各種最適化手法によるチューニング実務 ・大規模データ処理の経験(Hadoop/Sparkクラスタで数億行規模のデータ取り扱い) これまでの実案件での性能改善(スケジューリング/パーティション設計/キャッシュ戦略/ジョイン最適化 など)の実績が望まれます。
案件:某損害保険会社のデータ分析基盤におけるPoC支援 担当工程・作業 設計~試験、導入、顧客向け資料作成および説明 場所:原則テレワーク(地方不可) ※作業内容によっては豊洲出社や客先作業となる日もあります。 ※客先作業が東京近郊より遠方になる場合は、別途対応を相談させていただきます。 参画時期:2026年1月~ 募集:1名 単価:70万~80万 スキル見合い 面談:1回+顔合わせ
必須スキル: ①インフラ基盤 基本設計 5年以上 ②AWS 基本設計~ 下記サービス経験 S3/IAM/Lambda/StepFunctions/CloudWatch/CloudWatchLogs ③自身作業について、作業計画作成およびQCDのセルフマネジメントができること。 任意スキル(必須ではないか、あるのが望ましい) ・Databricks環境の設計・構築経験を有する。 もしくは業務経験はないが、以下の経験・知識を生かしてDatabricks環境の設計・構築ができる。 Snowflake等の類似ソリューションの設計・構築経験 研修/資格取得(Databricks DataEngineer Assosia...
自社サービスのデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。 今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、 その推進をお願いできればと考えております。 <具体的な業務例> ・Databricks 上に構築された社内向けの新データ基盤の開発・運用 ・AWS 上に構築された旧データ基盤の運用 ・社内各所の要求に応じた dbt によるデータモデリング ・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計 ・実装、運⽤フロー⾃動化の提案、実装 ・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定 ・各所ニーズ(マーケター、サイエンティスト、機械...
・pull request ベースでの Python 等のプログラム開発経験(5年以上) ・データ基盤の設計/構築、または運用経験(3年以上) ・SQL によるデータ分析やデータモデリングの経験(3年以上) ・AWS もしくは GCPを利用したサービスの構築経験(3年以上) ・dbtを用いたデータモデルやデータパイプラインの開発経験(1年以上) 【あると望ましいスキル・経験】 ・データ基盤チームのチームリードの経験 ・Databricks, Snowflake などのプラットフォーム上に構築されたデータ基盤の開発・運用経験 ・Terraform による IaC の経験 ・Apache Spark 等の分散処理フレームワークを...
以下、概要になります ・リモート可能です ・AIエージェントの検証および試験運用支援プロジェクト ・役割:PoC技術支援 ・フェーズ:PoC ・主な業務:AIエージェントの検証・試験運用、PoC関連ドキュメント作成、開発メンバーへのスキルトランスファー、AI基盤構築など
・以下いずれかもしくは複数を満たす ・ Microsoft Copilot StudioもしくはDifyの経験 ・ AIエージェントの実装・テスト経験(プロンプト開発・テスト含む) ・ Python等でのLLM設計構築の経験 ・ OpenAI API、RAG構成の経験 ・PoCフェーズの経験 ・AI基盤(Databricks、Amazon Bedrock)の設計・構築経験
以下、概要になります ・フルリモート可能です ・クラウドDWHサービスの製品開発、導入カスタマイズ、運用保守 ・役割:開発担当 ・フェーズ:設計~運用保守 ・主な業務:クラウドDWH環境の設計・構築、ETL/ELT処理の開発、導入済み顧客の問合せ対応、障害時の原因調査・解決など
・Snowflake、Databricks、Microsoft Fabric、AWS Glue(AWS Step Functions)、Azure Data Factoryいずれかの設計または構築経験 ・AzureまたはAWSでの環境構築経験 ・クラウド環境の問題発生時に原因調査・解決を自走できる方 ・SQLに関する基礎知識 ・BIツール(Power BI、Tableauなど)の導入またはレポート開発経験
PM/リモート可/調剤薬局向けサービスでのDBA・PM 製薬系の複数事業のデータオペレーション業務や、プロジェクトの進行アシスタント業務を行って頂きます。 ・アンケート作成 ・データ集計 ・レポート作成 ・SQLを用いたデータ抽出 ・サポート業務(関係者の日程調整) etc. [関連ワード]フリーランス、案件、エンジニア、プログラマー、業務委託
・PM・PMOとしてプロジェクト管理を行った経験 ・SQLを用いたデータ抽出経験 ・Excelマクロを用いた自動化のご経験 ・BIツールを用いたレポート作成経験5年以上 ※特にDatabricks
GR向けのデータ蓄積基盤構築案件です。 Databricks on AWS を用いたデータパイプラインの設計・実装・運用を担当いただきます。S3を中心としたストレージ設計、IAMを考慮したセキュリティ設計、ETL/ELT処理の実装、ワークフローのオーケストレーション、品質担保のためのテスト・監視整備までを一貫して対応します。 基本はフルリモートでの参画を想定しています。
フルリモート ・AWS上でのDatabricks実務経験(Azure Databricks経験のみでも可) ・Pythonによるデータ処理実装経験 ・AWSの基礎知識(S3、IAM)
既存のTableau環境にDatabricksを新たに採用し、社内外データを一元管理できる統合データ基盤を構築するプロジェクトです。 主にデータパイプラインの設計・実装、データモデリング、品質担保、運用設計までをご担当いただきます。 リアルタイム処理や高効率なETL/ELTの仕組みづくりにも関与いただく想定です。
フルリモート ・大規模データ基盤プロジェクトにおける実務経験(データ設計、データパイプライン実装など) ・Pythonを用いたデータ処理/分析の実務経験 ・自走力があり、主体的に業務を推進できる方
大手損害保険会社のデータ分析基盤におけるPoC支援案件です。Databricksを中心とした分析基盤の設計〜試験、導入、ならびに顧客向け資料作成・説明までをご担当いただきます。 原則はテレワークですが、作業内容に応じて豊洲での出社や客先常駐が発生する場合があります。遠方の客先の場合は別途調整を行います。 開始時期は2026年1月を想定しています。
リモート ・インフラ基盤の基本設計経験:5年以上 ・AWSの基本設計〜構築経験(以下サービスの実務経験):S3/IAM/Lambda/Step Functions/CloudWatch/CloudWatch Logs ・自身のタスクに対する作業計画の立案およびQCDを意識したセルフマネジメントができること
AIエージェント化、セマンティックモデル、データカタログ整備を横断的に実行し、 検証~運用をドライブして経営に寄与する示唆創出を実現いただきます。 ※その他詳細は、面談時にご説明させていただきます。 <フェーズ> 検証~運用 ※※こちらの案件は現在募集を終了しております※※
・データ分析の自走経験(目的設計、EDA、可視化、要因分析、予測、レポーティング、手順のドキュメント化等) ・Snowflake, BigQuery, Amazon Athena, Databricks, Oracle Analytics等データ分析基盤の実務経験 ・データベース知識(データ分析基盤検討に必要な設計理解、DBやSQL等のクエリ操作) ・ステークホルダー調整力(関連組織とのデータ調達・優先度策定・進捗/リスク管理) ・案件を独力で推進できる、またはメンバーを指揮してプロジェクトをリードした実務経験
某自動車メーカ―様の調達業務においてデータ・システムのサイロ化にともなう課題が\n発生しておりデータ分析基盤プロジェクトを実施します。\n元請けSIerのPMのもと、Databricksを中心としたデータ分析基盤の構築\nをご実施いただきます。\nDatabricksを中心としたデータ分析基盤の設計、構築、テストをご担当して\nいただきます。\n\nご対応工程:設計、構築、テスト\n\n最寄り駅:渋谷駅・神谷町駅
※すべて満たしていなくても可 ・Databricksの設計・構築・運用経験 ・dbtによるデータ加工処理経験 ・Fivetran等によるデータ連携処理経験 ・Airflowやdagster等のワークフロー管理ツールの利用経験
某自動車メーカ―様の調達業務においてデータ・システムのサイロ化にともなう課題が\n発生しておりデータ分析基盤プロジェクトを実施します。\n元請けSIerのPMのもと、Databricksを中心としたデータ分析基盤の構築\nをご実施いただきます。\nDatabricksを中心としたデータ分析基盤の設計、構築、テストをご担当して\nいただきます。\n\nご対応工程:設計、構築、テスト\n\n最寄り駅:渋谷駅・神谷町駅
・Databricksの設計・構築・運用経験 ・Terraformによるインフラ構築自動化経験 ・AWS環境の設計・構築経験
某自動車メーカ―様の調達業務においてデータ・システムのサイロ化にともなう課題が\n発生しておりデータ分析基盤プロジェクトを実施します。\n元請けSIerのPMのもと、Databricksを中心としたデータ分析基盤の構築\nをご実施いただきます。\nDatabricksを中心としたデータ分析基盤の設計、構築、テストをご担当して\nいただきます。\n\nご対応工程:設計、構築、テスト\n\n最寄り駅:渋谷駅・神谷町駅
・PJ管理、チーム管理の経験 ・Databricksの設計・構築・運用経験 ・dbtによるデータ加工処理経験 ・Fivetran等によるデータ連携処理経験 ・Airflowやdagster等のワークフロー管理ツールの利用経験
大手損害保険会社のデータ分析基盤におけるPoC支援案件です。インフラ基盤の基本設計からAWSサービスを活用した構築、さらにDatabricks環境の設計・構築支援を行っていただきます。設計〜試験〜導入〜顧客向け資料作成・説明まで一連の工程をご担当いただきます。
・インフラ基盤の基本設計経験(5年以上) ・AWS基本設計〜構築経験(S3/IAM/Lambda/StepFunctions/CloudWatch/CloudWatchLogs) ・作業計画作成およびQCDのセルフマネジメントが可能な方
大手通信会社向けのDWH開発プロジェクトに参画いただきます。 AWS(Redshift)やDatabricksを用いたデータ基盤の設計・実装・運用、ならびにSQLを用いたデータ加工・集計処理、各種バッチの開発・改修を担当します。 Linux環境での作業が中心で、既存ジョブの保守やパフォーマンスチューニング、顧客や関連チームとの連携も発生します。 開始は1月想定、3カ月単位での延長の可能性があります。
・SQLでの開発/データ加工の実務経験 ・AWS(Redshift)またはDatabricksの利用経験 ・Linux環境での開発/運用経験
Databricks もしくは Snowflake を用いたデータ基盤において、以下いずれか(または両方)の業務を担当いただきます。 - Databricks 上のデータ活用システムの設計・構築 - Snowflake ベースのデータ基盤の運用・保守全般 BI ツールと SQL を活用し、データモデリング、クエリ最適化、ダッシュボード連携、運用自動化などを進めていただきます。ハイブリッド勤務(週1〜2回の出社)となります。
Databricks・Snowflake ・BIツールの実務経験(例:Tableau、Power BI、Looker など) ・日常的にSQLを記述できること(分析/集計、パフォーマンスを意識したクエリ)
外資系生命保険会社システムにおける\nシステム間のデータ連携業務に携わっていただきます。\n\n・Data領域:Azure Data Factoryを利用して、\nデータをGroup Officeのシステムへ連携\n・DataBricks:DataBricksを利用して、\nOpenFrameやLife/Jのデータを連携\n\n・ご担当工程:設計、開発、移行\n\n最寄り駅:勝どき駅
・Azure Data Factoryの経験 ・DataBricksの経験
エンドクライアントのデータ事業部にて、戦略・方針策定に向けた実態把握のためのデータ抽出を担当いただきます。 依頼者の意図を正確にくみ取り、要件整理から仕様検討、SQLでの抽出実装、進行管理まで一連の対応をお願いします。 クエリの読み書きだけでなく、業務ドメインのキャッチアップが早く、関係者と連携しながらデータ利活用を推進できる方を求めています。 稼働は基本フルリモート(初日出社あり)。大手町・五反田へ状況に応じて出社の可能性があります。
・SQLを用いたデータ抽出の実務経験 ・Databricks、Redshift、BigQueryいずれかでの大規模データハンドリング経験 ・Webシステムの基礎理解と業務開発の経験 ・要件を整理し、仕様を検討してデータ抽出まで完遂できるコミュニケーション力
クライアント(HR系)のデータ事業部にてデータ抽出業務を担当いただきます。 主に戦略・方針策定のための実態の把握に向けたデータ抽出を担当します。 クエリの「読み・書き」ができるだけでなく、ドメインへの深いキャッチアップ及び、依頼者側がどのような用件でデータ抽出したいのかを汲み取って使仕様検討・データ抽出ができる方を求めています。 対応工程 ・基幹データやアクセスログからのデータ抽出 └新規のSQL作成、既存SQLの調査/改修 ・依頼者(事業担当者)との抽出要件の整理、プロジェクトの進行管理 【求める人物像】 周囲と適切にコミュニケーションをとりながら抽象的な課題を整理して解決に導く能力・スタンス ★期間:随時...
・SQL を用いたデータ抽出経験 ・Databricks、Redshift、BigQueryでの大量データのハンドリング経験 ・Web システムに関する基本的な理解と業務開発経験
データレイクハウスやBIツール導入に伴い、データベースの活用をするにあたり 社内部署やベンダーと調整しながら運用を進めていける方を募集しております。 ★期間:随時~ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。(但し、企業都合退場は対象外) ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎 ★面談回数:2回 ・OracleやSQLの実務経験 5年以上 ・データウェアハウス/データレイクハウス(DatabricksもしくはSnowflak...
・OracleやSQLの実務経験 5年以上 ・データウェアハウス/データレイクハウス(DatabricksもしくはSnowflake)の実務経験 ・Dataspiderの実務経験
顧客先のデータ事業部にて、データ抽出業務(主に戦略・方針策定のための実態の把握に向けたデータ抽出)をご担当いただきます。 クエリの読み/書きができるだけでなく、ドメインへの深いキャッチアップ及び、 依頼者側がどのような用件でデータ抽出したいのかを汲み取って使仕様検討・データ抽出ができる方を求めています。 <担当工程> ・基幹データやアクセスログからのデータ抽出 -新規のSQL作成、既存SQLの調査/改修 ・依頼者(事業担当者)との抽出要件の整理、プロジェクトの進行管理 <勤務時間> 10:00-19:00 ※※こちらの案件は現在募集を終了しております※※
・SQL を用いたデータ抽出経験 3年以上 ・Databricks、Redshift、BigQueryでの大量データのハンドリング経験 1年以上 ・Web システムに関する基本的な理解と業務開発経験
以下、概要になります ・フルリモート可能です ・データ基盤系プロジェクトにおける開発業務 ・役割:データ基盤開発担当 ・主な業務:データパイプライン構築、データモデル設計、ETL処理開発、データ品質管理、データ基盤の運用保守、ドキュメント作成など
<必須要件> ・DatabricksまたはSnowflakeを用いた商用案件での実務経験 ・SQL、Python、またはScalaを使用したETL/ELTパイプラインの開発経験 ・大規模データ処理におけるパフォーマンスチューニング(クエリ最適化、クラスタリング設計等)の経験 ・データレイクハウスやデータウェアハウスの アーキテクチャ設計 に携わった経験 ・データモデリング手法(スター型、データボールトなど)に基づいた スキーマ設計の経験 ・AWS、Azure、または GCP 上でのデータ基盤構築経験 ・指示を待つだけでなく、要件定義から運用まで自律的に推進できる
▍通勤面:リモート併用環境! ▍インボイス未登録の方OKです! 生成AIモデル構築業務にて、 Azureの経験者を募集しています! 作業内容は以下の通りです。 ◆想定作業◆ ・Azure Databricksを用いた生成AIモデル構築 ・Azure Cognitive ServicesやMachine Learning連携 ・AI基盤の設計・構築サポート ・成果物のドキュメント作成 ・その他付随する作業 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください! 相談のみのご応募も歓迎です!
・週5日の実務可能な方 ・生成AIに関する知識・経験がある方 ・Azure環境の設計・構築経験がある方 ◎勤務地出社可能な方優遇!◎ ※出社頻度はご相談ください!
大手銀行向けに、アイリス(社内ツール)上へデータレイクを構築します。 Pythonで大量データの加工処理を実装し、Databricksへ格納・管理します。対象データは約2,000~3,000本を想定しています。 担当は基本設計~テストまでの工程を中心に、メンバーとして参画いただきます。 作業場所は中野での常駐勤務です。
・基本設計~テストまで一連の工程対応が可能な方 ・Pythonでの開発実務経験(目安3年以上) ・データ加工/ETLの実装経験 ・チームでのレビュー/品質担保の経験
GRデータ蓄積基盤の構築プロジェクトにて、Databricks on AWSを用いたデータパイプラインの設計・実装・運用を担当いただきます。 具体的には、S3を起点としたデータ取り込み、変換、蓄積処理のパイプライン化、IAM等の権限設計、ワークフローのジョブ管理、品質担保のためのテスト設計・実施を想定しています。 フルリモートでの稼働となり、商談は1回を予定しています。
フルリモート ・AWS上でのDatabricks実務経験(Azure Databricks経験のみでも可) ・Pythonでのデータ処理/ETL実装経験 ・AWS基盤の基本知識(S3、IAMの利用経験)
大手銀行で利用しているアイリス(ツール)上にデータレイクを構築し、Pythonでデータ加工処理を実装してDatabricksへ格納します。 対象データは約2,000~3,000本を想定しており、基本設計からテストまで一連の工程を担当いただきます。 役割はメンバー想定で、常駐での参画となります(勤務地:中野)。 契約形態は準委任、商流は元請→上位→当社です。
・基本設計~テストまでの実務対応が可能な方 ・Pythonによる開発経験3年以上 ・データ加工/ETL処理の実務経験 ・常駐勤務が可能な方
大手銀行向けに、アイリス(社内ツール)上へデータレイクを構築します。 Pythonで大量データの加工パイプラインを実装し、Databricksへ格納・運用します。 対象データは約2,000~3,000本を想定しており、スケーラブルな処理設計と品質確保が求められます。 役割はメンバーポジションで、設計~実装~テスト~運用まで一連を担っていただきます。
・Databricksの利用経験(年数不問、実案件での活用経験が望ましい) ・Pythonでのデータ加工・ETL実装経験 ・大規模データの取扱いにおける基本的なパフォーマンス/品質観点 ・チーム開発でのコミュニケーションスキル
AWSを中心としたクラウド環境におけるデータ基盤の構築・運用を支援いただきます。 主な業務は以下の通りです。 ・AWS上でのデータ分析基盤の設計・実装・運用 ・Databricksを用いたデータ処理パイプラインの開発、運用・改善 ・開発、テスト、改善提案など一連の工程を通した対応 ・品質向上や運用効率化に向けた継続的な改善提案
フルリモート ・AWS上でのDatabricks実務経験(他クラウド上でのDatabricks経験でも可) ・SEレベルでの要件把握と設計〜実装〜運用の推進経験
データレイクハウスやBIツール導入に伴い、データベースの活用をするにあたり 社内部署やベンダーと調整しながら運用を進めていける方を募集しております。 ※※こちらの案件は現在募集を終了しております※※
・OracleやSQLの実務経験 5年以上 ・データウェアハウス/データレイクハウス(DatabricksもしくはSnowflake)の実務経験 ・Dataspiderの実務経験
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
7万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
7万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。