大手鉄道グループの既存帳票システムをクラウドに移行する業務です。 Azure環境への段階的な移行を進めながら、データ基盤(Azure Databricks)を中心にモダナイズし、設計~実装を担当します。 ■ 業務内容 ・既存帳票システムのクラウド移行に伴うアーキテクチャ設計と実装 ・Azure Databricksを用いたデータ基盤の環境構築 ・レガシー資産のPython等への置き換えおよびデータ処理ロジックの再設計 ・DB設計、性能チューニング ・CI/CDやIaCを含む運用改善 【アピールポイント】 ・フルリモートで柔軟な働き方が可能 ・大手鉄道グループのプロジェクトに参画 ・最新のクラウド技術を活用...
・Python ・PL ・PM
医療DXを推進する企業にて、データ基盤チームのメンバーとして、 データの利活用とセキュリティの視点からデータプラットフォームの開発・運用を担当いただきます。 全社的なデータの利活用を支え、要件定義から運用まで一貫して携わるポジションです。 DatabricksやTerraformを駆使し、ステークホルダーと連携しながら、自律的なデータ管理環境を構築します。 ■ 業務内容 - データメッシュの設計・開発・運用 - データパイプラインの設計・開発・運用 - 運用業務の改善・自動化 【アピールポイント】 - フルリモートで柔軟な働き方が可能 - 中長期でスキルアップが可能な環境 - 医療業界のDXをリードする重...
・Java ・Python ・AWS
大阪市西淀川区の大手製造業クライアント向けに、データエンジニアとしてDatabricksの環境下で 社内データの加工・分析支援を担当いただきます。クライアントの要望を元に最適なデータ活用を行うと共に、 要件整理から利活用支援まで包括的に関与します。 【アピールポイント】 ・大手企業のデータ利活用をリードする役割 ・最新のデータプラットフォーム技術に触れられる ・社内外と協力し、プロジェクトを推進 ・スキルを活かしつつ新しい挑戦ができる環境 ・高単価案件でスキルを正当に評価
医療業界向けのDXサービスを展開する企業でのデータ基盤エンジニアを募集しています。 データメッシュの実現に向けて、データプラットフォームの設計・開発・運用を担当し、 要件定義から開発、運用まで携わります。DatabricksやTerraformを用いて、 医療DXの進展をサポートする業務にご参加いただきます。 【アピールポイント】 ・AIやクラウド技術を活用した最先端環境でスキルアップ ・医療業界のDX推進プロジェクトに関与 ・リモートワーク可能で柔軟な働き方 ・安定した環境で業務に集中できる ・若手からベテランまで幅広い世代が活躍中
・Python ・AWS
HR系クライアントのデータマネジメント部署で、データエンジニアとして分析用データマートの開発実装に取り組んでいただきます。また、データ要件定義や調査業務も担当していただきます。主な技術スタックはAzure Databricks、dbt、Airflowです。 ■ 業務内容 ・分析用データ基盤の開発・運用 ・データマートの構築と保守 ・各種データ調査業務の支援 【アピールポイント】 ・フルリモート可能で柔軟な働き方が実現 ・最先端のデータ技術に関わるチャンス ・データプロジェクトの要件定義から実装まで経験可能 ・初日のみ出社でその後は在宅勤務 ・クラウド技術の活用でスキルアップが可能
クラウド環境におけるデータ基盤構築および運用支援業務。ETL/ELTによるデータ取込と整形、データ品質管理、AI/分析チームとの連携・調整。MLOpsや生成AIなど新技術の検証・活用支援も担当。 【技術スタック】 ・開発言語:Python、SQL ・クラウド:Azure/AWS/GCP(いずれか) ・ETL基盤:Databricks、Spark、Data Factory(尚可) ・技術領域:MLOps、生成AI、NLP、RAG(尚可)
・Pythonを用いたデータ処理、データ加工の経験 ・SQLを用いたデータ操作経験 ・クラウド環境(Azure/AWS/GCPいずれか)での業務経験 ・データ基盤やバッチ処理、ETL等の実務経験 ・関係者と調整しながら業務を進められるコミュニケーション力
医療業界を舞台に、データ利活用とセキュリティ対策を両立する持続可能なデータプラットフォームを開発・運用するデータエンジニアを募集します。DatabricksやTerraformを駆使して、医療DXを推進する横断型データプラットフォームの設計・開発・運用を担当いただきます。様々なステークホルダーと協力し、社内外でのデータ管理・利用基盤の整備を推進できる方を求めています。 ■ 業務内容 ・データメッシュ実現に向けたプラットフォームの設計・開発・運用 ・データパイプラインの構築と運用 ・運用業務の自動化と効率化 ・社内外チームとの技術的調整と推進 【アピールポイント】 ・最新技術を活用した医療DXプロジェクト ・フル...
・AWS ・Python
HR系クライアント向けデータ分析基盤の開発を担当します。データエンジニアとして、分析用データマートの開発実装をはじめ、データ要件定義や調査業務を遂行いただきます。主要技術はAzure Databricks, dbt, Airflowを活用。 【アピールポイント】 ・フルリモートで効率的に柔軟な勤務が可能 ・最新のクラウド技術を活用したスキル向上のチャンス ・主体的にプロジェクトを推進し成長できる環境 ・HR業界の専門知識を深める機会 ・コミュニケーション力を生かし、チームと協力しながら問題解決
大手マテリアルハンドリング業界のクライアントで、Databricksを中心に社内データ加工・分析を行うプロジェクトに参画していただきます。社内データの活用支援とDatabricks環境での技術支援をお任せします。 ■ 業務内容 ・Databricksを用いたデータ分析支援 ・お客様要求のヒアリングと要件整理 ・データの加工・整形 ・データ活用の定着支援 【アピールポイント】 ・最先端のデータ分析環境でスキルを磨ける ・ハイブリット勤務で柔軟な働き方が可能 ・製造業界の最新トレンドに触れる機会 ・高単価案件でしっかりと収入を得られる ・大手企業のプロジェクトに携わるチャンス
・Python
金融機関向けのDWHシステム構築に際して、databricksおよびSASを活用したジョブ管理をHinemosで行う。ジョブの設計からHinemosの設定、Shellスクリプトの作成・改修など、ジョブ管理業務全般を担当。運用系業務の設計から実行環境構築まで幅広く関与する。 【技術スタック】 ・ジョブ管理:Hinemos ・開発言語:Shell ・OS:Linux
・Linuxのご経験(2年以上) ・Shellのご経験(2年以上) ・ジョブオーケストラツールのご経験(2年以上)
AWSやGoogle Cloudのクラウド技術を用いたデータETLアプリケーション開発、業務支援システムのアプリケーション基盤開発、非エンジニア組織からの要件・要望の収集、開発タスクへの落とし込み。生成AI×業務改革によるビジネス部門の業務効率化・自動化支援。画像AIを活用した文字認識技術のPoC案件。Databricks基盤を用いたDWH開発PJの設計~開発。顧客向けシステムのバックエンド開発。DjangoシステムのAWS移行、API開発、帳票自動化。旅AIエージェントサービス本番開発。バックエンド領域における実装・テストコード追加・検証・リリース。
・Python ・AWS ・GCP ・Azure ・Django
Databricks基盤を用いたDWH開発PJにおける設計~開発を担当。既存基盤上での開発を中心とし、Pythonを使用した基本設計以降を担うポジション。PythonおよびAzureを用いた開発を担当。
・Python ・Azure
■業務内容 インストリーム広告配信プラットフォームにおいて、データドリブンな意思決定を支える分析基盤の構築から運用保守、データ分析業務までを包括的にご担当いただきます。 ■主な仕事内容 ・広告配信ログの加工・集計パイプラインの開発・運用 ・広告運用者向けのデータマート開発・運用 ・広告運用者向けのダッシュボード開発・運用 ・案件提案用データ分析 ・大規模言語モデルなどを活用した広告運用の自動化 ※フルリモート可
SQL ・パブリッククラウドを用いた開発経験 ・DWHにおけるパイプライン構築〜監視 (データサイエンティストではなくデータエンジニアとしての経験) ・少人数チームでの活躍実績 (10~20人でのチームにおける活躍とは働き方も異なるため) ・データプロダクトのアクセスログなどのデータを使った分析経験
新規データベース構築に伴い、ETL処理の設計・開発、既存パイプラインの保守運用業務をご担当いただきます。Pythonやdatabricks、SQLを中心に活用し、安定したデータ処理基盤の維持・改善を行います。 【技術スタック】 ・開発言語:Python ・分析基盤:databricks ・DWH:Google BigQuery ・データ処理:Apache Spark(PySpark)
・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発に関する設計・開発・テストの経験(3年以上)
法人向けAI受発注支援サービスの開発・運用 TypeScriptおよびAngularを用いたフロントエンド開発 Python(Flask)を用いたバックエンド開発 LLMおよびOCRモデルを活用した機能実装・最適化 AIエンジニアとの連携による帳票解析や自動化ワークフローの構築 Google Cloud上でのKubernetes(GKE)環境を用いた運用 ワークフロー自動化のための自然言語スクリプト生成機能の開発 週1回の定例ミーティング(オンライン)による情報共有
TypeScriptおよびAngularを用いたWebアプリケーション開発の経験(3年以上) Python(Flask)を用いたバックエンド開発の経験(3年以上) LLM(OpenAI, Gemini, Claude APIsなど)を用いた開発または実装知見 Firebase(Firestore, Storage, Authentication)を用いた開発の経験 Google Cloud(Cloud Run, Cloud Functions, Compute Engineなど)またはAWSの近似サービス利用経験 Git/GitHubを用いたチーム開発の経験 英語に抵抗のない方(テキストベースのコミュニケーション対...
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 【Python/MLLead】ソーシャルECアプリのレコメンド基盤をリードするMLエンジニア ソーシャルコマースアプリにおけるレコメンデーション領域のML基盤構築・改善をリードしていただく業務です。 ・レコメンド向け機械学習基盤の設計・構築(Training/Serving/Monitoring) ・機械学習モデルを用いたプロダクト開発(レコメンド、ランキング、パーソナライズ) ・開発ロードマップ策定、技術選定、推進 ・特徴量設計、前処理、MLOps、実運用・改善 ・実験管理・運用フロー自動化 ・リアルタイム...
・レコメンド領域でのプロダクト開発実務経験(目安:直近5年で2年以上) ・MAU数十万以上のサービス、または同規模トラフィックでのML開発経験 ・特徴量エンジニアリング、前処理、モデル実装、MLOps、モニタリングまで一連の経験 ・レコメンド手法の経験(CF/MF/DNN/Transformer/Two-Tower/Wide&Deep/GNNなど) ・ビジネス指標(CTR、CVR、LTVなど)改善に必要なロードマップ策定・実行経験 ・プロジェクトまたはチームのリード経験 ・平日日中の週4〜5日稼働が可能な方
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 機械学習エンジニア募集 作業内容: ・レコメンド向け機械学習基盤の設計・構築(Training/Serving/Monitoring) ・機械学習モデルを用いたプロダクト開発(レコメンド、ランキング、パーソナライズ) ・開発ロードマップ策定、技術選定、推進 ・特徴量設計、前処理、MLOps、実運用・改善 ・実験管理・運用フロー自動化 ・リアルタイム推論の性能改善 ・関連プロダクトの品質改善、技術課題の対応 ▼条件等 出社:フルリモート(週4~相談可) 精算幅:140h~180h 面談回数:1回 【必須スキル...
・レコメンド領域でのプロダクト開発実務経験(目安:直近5年で2年以上) ・MAU数十万以上のサービス、または同規模トラフィックでのML開発経験 ・特徴量エンジニアリング、前処理、モデル実装、MLOps、モニタリングまで一連の経験 ・レコメンド手法の経験(CF/MF/DNN/Transformer/Two-Tower/Wide&Deep/GNNなど) ・ビジネス指標(CTR、CVR、LTVなど)改善に必要なロードマップ策定・実行経験 ・プロジェクトまたはチームのリード経験 ・平日日中の週4〜5日稼働が可能な方
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 機械学習エンジニア募集 作業内容: ・レコメンド向け機械学習基盤の設計・構築(Training/Serving/Monitoring) ・機械学習モデルを用いたプロダクト開発(レコメンド、ランキング、パーソナライズ) ・開発ロードマップ策定、技術選定、推進 ・特徴量設計、前処理、MLOps、実運用・改善 ・実験管理・運用フロー自動化 ・リアルタイム推論の性能改善 ・関連プロダクトの品質改善、技術課題の対応 ▼条件等 出社:フルリモート(週4~相談可) 精算幅:140h~180h 面談回数:1回 【必須スキル...
・レコメンド領域でのプロダクト開発実務経験(目安:直近5年で2年以上) ・MAU数十万以上のサービス、または同規模トラフィックでのML開発経験 ・特徴量エンジニアリング、前処理、モデル実装、MLOps、モニタリングまで一連の経験 ・レコメンド手法の経験(CF/MF/DNN/Transformer/Two-Tower/Wide&Deep/GNNなど) ・ビジネス指標(CTR、CVR、LTVなど)改善に必要なロードマップ策定・実行経験 ・プロジェクトまたはチームのリード経験 ・平日日中の週4〜5日稼働が可能な方
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日(月〜金)で稼働可能な方 *副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー Azure Databricksでデータクレンジングを実施し経営用にMicrosoft Fabricにてダッシュボードを構築します。 要件定義、設計、構築、試験をご対応いただきます。 週5日、リモート
・Pythonでの開発経験:2年以上 ・何らかのデータ分析の設計、実装経験
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日(月〜金)で稼働可能な方 *副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー ・DataBricksバージョンアップに伴う既存コード改修 ・Pyhonのバージョンアップ改修 ・Scala記述部分のApacheApark差し替え 週5日、リモート
・Pythonでの開発経験:2年以上
AI OS(Data Layer)の設計・構築、およびプロジェクトへの適用・型化 ・AI OS構想におけるData Layerの設計・技術選定(Databricks, Snowflake等) ・パブリッククラウド(Azure/AWS/GCP)を前提とした周辺アーキテクチャ設計 ・DXパートナーサービス事業案件におけるデータ基盤の実装・技術リード ・プロジェクト知見のドキュメント化・再利用可能なモジュールの整備 ・外部パートナーとの協業体制の設計・運用 【体制(人数/構成)】 研究開発チーム(所属) ※DXパートナーサービスのPMや研究開発マネージャーと連携して推進。データ領域の専任責任者としては第1号のポジション。
パブリッククラウドにおけるITアーキテクチャまたはデータ基盤の設計・構築経験 / クラウドアーキテクチャ全般(ネットワーク・セキュリティ・運用)の理解 / Terraform等を用いたIaC管理およびCI/CDの構築・運用経験 / モダンなデータスタック設計、データモデリング、DB設計の知見 / Python・SQLを用いたデータ処理スキル
・分析用データ基盤構築におけるインフラの設計、実装(AWS、GCP、Azure) ・実装のための開発環境整備(AWS CodePipeline、Azure DevOps) ・データマートの開発、保守運用 ・インフラ:AWS、GCP、Azure ・データベース:Redshift、BigQuery、Azure Databricks ・バッチソフト:Airflow、Digdag ・コミュニケーションツール: Outlook、Teams、Slack、Backlog
・2つ以上のクラウドインフラ利用経験 ・OSSのバッチソフトの導入/利用経験(Airflow、Digdag、Embulkなど) ・Webシステムに関する基本的な理解と業務開発経験
ETLおよびDWH製品を用いた各種データ処理の開発・設計・テスト業務を行います。参画者のスキルに応じて上流(要件定義・基本設計)または下流(詳細設計~製造・テスト)フェーズを担当していただきます。プロパーチームの一員として、各種ETL/DWHツールを活用したデータ統合や分析基盤構築を支援します。 【技術スタック】 ・ETLツール:AsteriaWarp、OracleData Troco、Integrator、Spectre、DBTCloud ・DWHツール:Dr.SUM、Snowflake、Databricks、MySQL HeatWave、Azure Synapse Analytics
ETL・DWH ・ETLまたはDWH製品を用いた開発経験 ・要件定義、基本設計または詳細設計以降の工程経験
【案件/業務概要】 弊社クライアント(HR系)にて、データエンジニアとしてデータモデルの設計・開発をご担当いただきます。 また、事業企画との折衝、主には実現方法の検討であったり連携項目の整理といったレポートで表現するにあたっての要件定義もご担当いただきます。 【対応工程】 BI レポート用のデータマートの設計・開発 テーブル設計、SQL実装、リレーション構築、バッチ実装 BI レポートの開発・保守運用 レポート開発にあたっての要件定義 実現方法検討、連携項目整理 ※現在PowerBIとtableauを併用しています 【開発環境】 データベース:Databricks,snowflake BIツール:Power BI,ta...
フルリモート データマート設計・開発の経験 SQLを用いたデータ抽出・加工の経験(3年以上) BIツールを用いたダッシュボード・レポートの設計、開発経験
大手損害保険会社向けのデータ分析基盤におけるPoC支援を担当します。インフラ基盤の基本設計を中心に、AWSサービス(S3/IAM/Lambda/StepFunctions/CloudWatch/CloudWatchLogs)を活用し、設計から試験、導入まで一連の工程を対応いただきます。また、顧客向け資料作成や説明も担当範囲となります。Databricks環境の設計・構築経験をお持ちの方は即戦力として活躍いただけます。Snowflake等の類似基盤経験や資格・研修で得た知識を生かして、Databricks環境構築に挑戦したい方も歓迎です。 【技術スタック】 ・クラウド:AWS ・サービス:S3、IAM、Lambda、StepF...
・インフラ基盤の基本設計経験5年以上 ・AWS(S3/IAM/Lambda/StepFunctions/CloudWatch/CloudWatchLogs)を用いた基本設計~の経験 ・作業計画作成およびQCDのセルフマネジメントができること
- 保険会社向けのSQL/データエンジニア案件で、勤務地は東京都勝どき、リモート可否不明・稼働日数不明、Azure Databricks活用で月額70万円です。
- 4種の個人情報データを基に顧客ID採番ロジックとテーブルを設計・実装し、Azure Databricksで基本設計〜開発〜テストまでご担当いただきます。
- 必須はSQL(ストアド)設計経験とIT業界4年以上です。歓迎はPythonやPySparkでの開発経験、保険業務知識のご経験です。
- 設計からテストまで一連の工程に携われ、Azure DatabricksとSQLの実践力を高められます。
- 保険会社のID管理領域に関心があり、データ基盤で価値を出したいエンジニアに最適です。
- ストアド設計の強みを生かしつつ、PythonやPySparkへのスキル拡張を図りたい方におすすめです。
- バックエンドエンジニア向けの東京都内案件で、フルリモート、PythonやAzureを活用、稼働日数の記載はなく、報酬は70万円です。
- Azure DatabricksでのデータクレンジングとMicrosoft Fabricの経営ダッシュボード構築がミッションで、要件定義から試験まで担当いただきます。
- 必須はPython実務とデータ分析案件の実務経験です。歓迎はAzureDatabricksやMicrosoft Fabricの経験、データアナリスト経験です。
- 要件定義から試験まで全工程に携われ、上流から下流まで一貫した経験を積めます。
- フルリモートで通勤負担がなく、集中して開発と分析に取り組みたい方に最適です。
- Azure DatabricksやMicrosoft Fabricを扱い、モダンなデータ基盤の知見を深められます。
SIer(エンド:大手小売グループ)でのプロジェクト案件。 □プロジェクト概要 ・データ分析基盤のデータ活用プロジェクトへ参画 ・目的:構築したデータ基盤をこれから展開していくフェーズにおける活用推進と定着化 □業務内容 ・データ分析結果に基づいた活用提案を行ない、ビジネスの意思決定をサポート ・新規サービスやデータ活用の導入検証 ・社内を含むグループ各社へのサポートや教育プログラムの設計/実施 ・分析基盤構築のためのデータ加工/整理/統合 ・CDP/BIなどのデータ基盤上でのプロダクト展開/機能追加/サポート ・各種問合せの対応/機能追加 ■求めるプロ人材、コンサルタントのスキル・経験・素養 ・小売業界(特にGMS)で...
小売業界(特にGMS)での実務経験または業務知識がある人材 データ分析によってビジネス課題を解決した経験がある人材 非エンジニアと分析結果を共有し、施策合意や改善提案を進める力がある人材 DB/SQLの知識、複雑なクエリ作成スキルがある人材
データ基盤へのデータソース・ターゲット追加、設計、AWS設定、実装、テストをご担当頂きます。 詳細は商談時にお伝えします。
AWS AWSデータ基盤構築・運用 Python実務 SQL実務
既存のデータ仮想化製品内で管理されているメタデータを新たに導入されるデータカタログツールへ移行する支援を行います。POCフェーズから参画し、定義書・用語集の整理、メタデータ登録、リネージ整備など、データガバナンス領域の支援を担当いただきます。 【技術スタック】 ・データカタログ:データカタログツール ・データベース:各種RDB(SQLベース) ・その他:AWS/Snowflake/Databricks(尚可)
・データカタログを利用した経験(複数ツール可) ・メタデータ管理・データリネージの理解 ・SQL を用いたデータ構造の確認・整合性検証の経験 ・テーブル定義書・用語集などのドキュメント整備の経験 ・関係者との調整・報連相を安定して行えるコミュニケーション力
AWSとSnowflakeで構成された既存のデータ基盤に対して、新規のデータソース・ターゲット追加作業を担当。ウォーターフォール手法の下で、設計書の更新、AWSおよびSnowflakeの設定、実装、テスト業務までを一貫して担います。 【技術スタック】 ・開発言語:Python ・インフラ:AWS(Lambda、Stepfunction) ・データベース:Snowflake ・その他:SQL、Databricks(尚可)
AWS・Snowflake ・AWS(Lambda/Stepfunction)を用いたデータ基盤構築・運用経験 ・Pythonの実務経験2年以上 ・SQLを使用した業務経験5年程
BI関連の帳票設計および実装業務をご担当いただきます。 職種としては、データアナリストまたはBIアナリストに該当します。 作業詳細は商談時にお伝えします。
Python - ビジネス要件を理解し、その要件に対応する帳票が設計できること - Power BIの経験があること
税理士・公認会計士事務所向け業務アプリを提供する企業において、データ活用基盤チームの立ち上げを支援するデータエンジニア案件。 DWH/データレイクの設計・構築・運用、ETL/ELTによるデータパイプライン整備、分析基盤運用、データマート設計、データガバナンス構築などを担当し、将来的にはAI活用基盤への発展も見据えたポジションとなります。 ERP・会計システムのデータを経営判断に活用できる基盤へ進化させるフェーズで、Snowflake/BigQuery/Synapse/Databricks/Redshift等のDWH・データレイク、SQL・Python(pandas、PySpark等)、およびData Factory/Airfl...
DWH/データレイクの設計・構築・運用経験(Snowflake、BigQuery、Synapse、Databricks、Redshift等), SQLによるデータ加工・分析経験(複雑なクエリ設計を含む), Pythonによるデータ処理・分析経験(pandas、PySpark等), ETL/ELTツールを用いたデータパイプライン構築経験(Data Factory、Airflow、dbt等)
大手総合化学メーカー向けの磁気データ基盤構築プロジェクトにおいて、データエンジニアリング及び基盤構築をご担当いただきます。 【主な業務内容】 ・運用設計、運用フローおよび手順書の作成・テスト ・インフラ基盤の構築、設計およびテスト ・データ移行設計、開発、テスト(既存基盤のViewおよびメタデータの移植業務) 募集背景 データ基盤構築および移行プロジェクト推進に伴う体制強化のため
・Databricksを用いた基盤構築、運用設計、アプリケーション開発いずれかの実務経験 ・円滑なコミュニケーション能力 ・指示待ちにならず、能動的・主体的に自走して業務を推進できる方 ・新規技術へのキャッチアップに意欲的な方
案件名 Databricksデータ基盤移行支援 ■業務概要: ・既存Teradata環境からDatabricksへのデータ基盤移行プロジェクトにおいて、 ETL移行・技術調整・試験支援を担当。 ■担当業務: ・TeradataからDatabricksへのETL移行支援(重点業務)。 ・Python/SQLによるデータ加工・検証(重点業務)。 ・データ差異分析(Reconcile、件数比較、差分解析)。 ・SQL・ジョブ・データフローの調査/解析。 ・Databricks環境(Volume、Git、ジョブ等)の技術支援。 ・FSI・Databricks社との技術調整、問い合わせ対応。 ・障害解析、原因調...
■スキル: [必須] ・上記の業務を実施できること。 ・Databricksを利用した開発経験 ・Pythonによるデータ加工・ETL開発経験 ・SQLを用いたデータ分析・調査経験 ・ETL開発またはデータ移行プロジェクト経験 ・ベンダ・顧客との技術調整経験 ・自走して課題整理・調査・推進ができること [尚可] ・Teradataの知識・移行経験 ・Informatica PowerCenterの経験 ・Gitを利用したチーム開発経験 ・Shellスクリプト作成・解析経験 ・JP1ジョブ解析経験 ・データ品質検証(Reconcile、差異分析)の経験 ・Databricks Workflows、...
PAN情報を対象としたトークン化・復号化処理およびDatabricks上での共通部品開発 【募集人数】2名
・Java / Python等を用いた開発経験 ・設計~製造~単体試験~結合試験までの一連の開発経験 ・セキュリティ・機密情報を扱うシステム開発経験
生成AIを活用したナレッジ検索・問い合わせ環境の検討、構築 ・AI Searchインデックスを利用した類似ユースケース検索 ・Knowledge Assistantの活用検討 ・必要に応じたカスタムRAGの設計・構築 ・構造化データ、非構造化データの前処理 ・構造化データにおける欠損項目への対応検討 ・AI Functionsなどを利用した非構造化データの構造化 Databricksから対向システムへのデータ連携方式の検討・実装 ・Databricksで加工したデータを対向システムへ戻すための方式検討、および必要な実装 \ここがポイント♪/ ★PoCで終わらない「本番運用のリアルな実績」が手に入る! 単なる検証にとどまらず...
生成AI活用・構築スキル: ・RAG(検索拡張生成)の概念理解およびアーキテクチャ設計・構築の実務経験 ・AI SearchやVector Search等を用いた検索インデックスの作成・チューニング経験 データエンジニアリングスキル: ・Databricks環境でのデータ加工、ETLパイプライン構築、および対向システムとのデータ連携実装経験 ・Python / PySpark / SQL等を用いた構造化・非構造化データの前処理・欠損値補正・クレンジングの実務経験
金融機関のデータ基盤(Databricks)において、テーブルに付与するビジネスメタデータ(業務名・業務説明・関連用語等)の素案を生成AIで自動作成し、人が確認・編集・承認して格納するまでの仕組みを検討・設計・検証します。 ※本フェーズは要件定義・技術検証であり、本格開発は2027年1月以降を想定しています。 関連するスキル: 要件定義, 実装, SAP, AI, 設計, PM, アナリティクス 関連する業界: 金融, IT, AI
・Databricks の実務経験(Unity Catalog を用いた設計・実装の経験があること) ・Python での開発経験(3年以上) ・LLM を組み込んだアプリケーションの実装経験(RAG または Agent のいずれか。PoC規模で可) ・技術検証を自走し、検証結果を文書化できること
急募案件! 即面談可能です! 経験の浅い若手の方の応募も歓迎致します! 案件概要 大手製造業向けのエンタープライズ生成AI/データ基盤プロジェクトにて、SAP DWH領域およびAI・データプラットフォームの設計・開発を担当いただけるエンジニアを募集します。 Databricksを中心に、生成AI、RAG、AIエージェント、ベクターデータベース、MLflow、プロンプトエンジニアリング等の技術を活用し、企業向けのAIソリューション開発を推進していただきます。 主な業務内容 Databricks AIプラットフォームを活用したデータ基盤・AIソリューションの設計/開発 Data Genie、ベクターデータベース、RAG、AI...
以下すべてを満たしている必要はありません。 Databricksおよび生成AI領域の実務経験を重視します。 Databricksを利用したデータ基盤の導入・開発経験 Databricks上でのGenAI/AIエージェント開発経験 Data Genie等のDatabricks AI関連機能の利用経験 RAGベースのアプリケーション開発経験 ベクターデータベースを利用した開発経験 AIアシスタント/ナレッジ検索ソリューションの開発経験 プロンプトエンジニアリングの実務経験 MLflow等を利用した機械学習/生成AI開発経験 エンタープライズ向けデータプラットフォームの設計・開発経験 SAP DWH/データウェアハウス領域の知識・...
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
8万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
8万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。