【Databricks/AWS/データエンジニア】リモート可 データ基盤構築
以下、概要になります ・リモート可能です ・大規模ID-POSデータを活用したデータプラットフォーム開発におけるデータマネジメント業務 ・役割:データエンジニア ・主な業務:広告配信プラットフォームおよびデータ基盤におけるデータ抽出・整形・管理、多種多様なフォーマットのID-POSデータの標準化および取り込み、フロントエンドへのデータ連携設計、購買データを活用したリーチ予測・CVRシミュレーション等のロジック実装・データ抽出、DatabricksによるETLパイプラインの運用改善、BIツールとの統合効率化、データサイエンティストと連携した分析ロジック・統計モデルのシステム統合など
・クラウドDWHの実務経験(BigQuery、Snowflake、Redshift、Databricks等いずれか) ・AWS環境での開発経験(インフラ構成を理解した上でのバッチ処理やデータ連携実装) ・高度なSQLスキル(数億件規模のデータ集計、実行計画を意識した最適化) ・ETLパイプラインの構築・運用経験 ・他部門(アナリスト・ビジネスサイド等)との円滑なコミュニケーション能力
【PMO/Databricks】大手メーカー向け営業高度化支援
大手製造メーカー向けに、営業活動の高度化を目的としたデータ活用プロジェクトに参画いただきます。 PMOとしてのプロジェクト運営支援に加え、Databricksを用いたデータ基盤の設計・構築・運用設計までをカバーします。 具体的には、プロジェクト計画策定・進捗/課題/リスク管理、関係各所との調整、要件整理、Databricksワークスペース設計、データパイプライン/ETLの実装方針策定、品質管理とリリース計画の推進をお任せします。 募集背景 営業領域でのデータ活用加速に伴い、データ基盤の再構築とプロジェクト推進力の強化が必要となったため、PMO兼データ基盤リードを増員募集します。
・PMOとしての実務経験(進捗/課題/リスク/品質/変更管理、会議体運営、ステークホルダー調整) ・Databricksの実務経験(ワークスペース設計、データパイプライン構築、ノートブック運用 等)
【SQL/Python/Azure(Databricks・Data Factory)】商用車営業システム向けデータ基盤開発/リモート併用
商用車の受注から引き渡しまでの業務を支える営業システムにおいて、データ加工・処理・連携基盤の開発を担当いただきます。 Azure SQL、SQL Server、Azure Functions を中心に、DWH 構築やETL/ELTパイプラインの設計・実装、データ品質担保、運用改善まで一連をご対応いただきます。 一部Pythonを用いたバッチ・スクリプト開発、DatabricksやAzure Data Factoryを活用したデータパイプライン構築も想定しています。 地域特性を反映した要件のため、全国の販売拠点への短期出張(2〜3か月に1回、1〜2日程度)の可能性があります。 募集背景 既存参画者の交代に伴う増員・リプレイス案...
・SQLの実務経験(Stored Procedure作成、CROSS APPLY等を用いた高度なクエリ最適化が可能な方) ・Pythonによる開発経験(バッチ/データ処理スクリプト等) ・DWH/データ基盤の設計・実装経験 ・データ加工/集計/可視化に関する実務経験 ・Azure環境での開発/運用経験(Azure SQL/SQL Server いずれか)
【Azure SQL/Databricks/DBエンジニア】商用車向け営業システム開発(出社併用)
商用車の受注から引き渡しまでの業務プロセスを管理するシステム開発案件です。 Azure SQL、SQL Server、Azure Functions を活用し、データ加工・処理やストアド実装、周辺プログラム開発をご担当いただきます。必要に応じて Databricks や Data Factory を用いたデータパイプライン構築・運用にも関与いただきます。 全国の販売拠点へ、2~3か月に1回、1~2日程度の出張が発生する可能性があります(旅費はクライアント負担)。 勤務形態は出社とリモートの併用(週2~3日出社)です。最寄り駅からのシャトルバスや徒歩での通勤が可能です。 募集背景 商用車領域の業務デジタル化・可視化ニーズの高ま...
・SQL の実務スキル(Stored Procedure の設計・実装、および CROSS APPLY を用いたクエリ作成が可能なレベル) ・Azure の知見(Azure SQL/Azure Functions/Databricks/Data Factory のいずれかの経験があると尚可) ・英文仕様やドキュメントに抵抗がない方(翻訳ツール等でキャッチアップできるレベル) ・以下いずれかの言語での実装経験があると望ましい:Python/C#/JavaScript(Azure Functions での実装経験があると尚良)
【Azure,Databricks】Azure分析基盤構築支援業務
▍環境面:リモート併用相談可! ▍インボイス未登録の方OKです! 分析基盤構築支援業務にて Azure,Databricksの経験者を募集しています! ◆想定作業◆ ・Azure分析基盤構築支援対応 ・既存案件の継続改善対応実施 ・新規案件の基盤導入支援対応 ・DWH/ETL設計構築対応 ・データ連携基盤の運用支援対応 ~~~~~~~~~~~~~~~~~~~~ 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください!
◎必要スキル・経験◎ ・データ基盤構築経験のある方 ・DWH構築経験のある方 ・ETL開発経験のある方 ・データパイプライン構築経験のある方 ◎尚可・歓迎◎ オンサイト作業が可能な方! _ _ ―――――――――――――――――――― ◎給与・報酬◎ 600,000円 ~ 700,000円(税込) あくまでも目安ですのでご相談下さい! _ ――――――――――――――――――――
【Python,Databricks】データ基盤構築解析精度向上支援
▍環境面:リモート併用相談可! ▍インボイス未登録の方OKです! 自動車製造業向けデータ基盤構築開発支援にて Python,Databricksの経験者を募集しています! ◆想定作業◆ ・不具合解析ツールの精度向上対応 ・Databricksでのデータ基盤構築 ・Pythonによるバックエンド開発 ・要件整理および顧客折衝対応 ・クラウド環境でのデータ処理設計 ~~~~~~~~~~~~~~~~~~~~ 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください!
◎必要スキル・経験◎ ・Python開発経験3年以上のご経験 ・Databricksでの基盤構築経験のご経験 ・クラウド環境での開発経験のご経験 ・アジャイル開発のご経験 ・要件整理および顧客折衝のご経験 ◎尚可・歓迎◎ オンサイト作業が可能な方! _ _ ―――――――――――――――――――― ◎給与・報酬◎ 650,000円 ~ 780,000円(税込) あくまでも目安ですのでご相談下さい! _ ――――――――――――――――――――
【リモート併用(週1出社)/Databricks/ 要件定義~ / AI /AIエージェント向けデータ基盤構築エンジニア様募集】
・AI基盤向けのデータ基盤構築に向け、アーキテクチャ/データ構成から 検討し、構築を実行していく案件です。
要件定義~ ・Databricksを利用したデータ基盤構築経験 ・データ基盤の要件定義/設計など上流工程の経験
【Azure/Databricks/オンプレDWH運用保守】石油業向けAzure Databricks運用・保守支援
石油関連企業向けに、Azure Databricksを中心としたDWHおよび周辺ETL基盤の運用・保守をご支援いただきます。 基幹システムや製油所から受領する固定長・可変長ファイルを、Databricksのメダリオンアーキテクチャ(Bronze/Silver/Gold)で段階的に加工しDWHへ格納します。蓄積データはDomo Cloud Amplifier経由で取り込み、Domo ETLで整形・配信し、ユーザー部門へ提供します。 主な業務は、障害調査、問い合わせ対応、PG改修、小規模開発、ジョブ管理(System Walker Operation Manager)の運用対応です。必要に応じて夜間・休日作業が発生する可能性があり...
・Databricksの運用・保守経験 ・Azure(クラウド)の運用・保守経験 ・DWH/ETLシステムの運用・保守経験 ・ジョブ管理ツールの運用経験(System Walker Operation Manager) ・夜間/休日対応が可能な方(代休調整あり) ・49歳までを想定 ・コミュニケーション、健康・勤怠・メンタルが良好な方
【Databricks/データエンジニア】リモート可 AI向けデータ基盤構築
以下、概要になります ・リモート可能です ・AIエージェント向けデータ基盤の新規構築プロジェクト ・役割:データ基盤構築メンバー ・フェーズ:要件定義~テスト ・主な業務:アーキテクチャ・データ構成の検討、要件定義・設計、Databricksを用いたデータ基盤構築、各種ドキュメント作成など
・Databricksを利用したデータ基盤構築経験 ・AIアプリケーションの設計・構築経験 ・データ分析経験
【Databricks/データエンジニア】リモート可 AIデータ基盤構築リーダー
以下、概要になります ・リモート可能です ・AIエージェント向けデータ基盤の新規構築プロジェクト ・役割:データ基盤構築リーダー ・フェーズ:要件定義~テスト ・主な業務:アーキテクチャ・データ構成の検討、要件定義・設計、Databricksを用いたデータ基盤構築、チームメンバーの取りまとめ、関係者との方針調整など
・Databricksを利用したデータ基盤構築経験 ・データ基盤の要件定義・設計など上流工程の経験 ・リーダー経験 ・データ分析経験 ・サービス設計経験(課金体系・利用手順・利用ルール等)
【Azure/Databricks】石油業向けDWH・ETL運用保守支援(常駐)
石油関連企業向けのAzure DatabricksベースDWHおよび周辺ETLの運用・保守支援案件です。 固定長/可変長ファイル(基幹システム・製油所由来)を、Databricksのメダリオンアーキテクチャ(Bronze/Silver/Gold)で段階的に加工しDWHへ格納します。蓄積データはDomo Cloud Amplifier経由で取り込み、Domo ETLで整形・可視化しユーザーに提供しています。 主な業務は、障害調査、問い合わせ対応、ジョブ運用、軽微なPG改修、小規模開発、設定変更、リリース対応などです。夜間・休日対応が発生する可能性があり、発生時は代休等で調整します。 勤務地は勝どき・京橋の常駐です。 募集背景 ...
・Databricksの運用/保守経験(設計・構築経験があれば尚可) ・Azureクラウドの運用/保守経験(設計・構築経験があれば尚可) ・DWH/ETLシステムの運用/保守経験(設計・構築経験があれば尚可) ・ジョブ管理ツールの運用/保守経験(System Walker Operation Manager など) ・夜間/休日対応の可能性に柔軟に対応できる方(代休調整あり) ・年齢目安:49歳まで(40代までを想定) ・コミュニケーション/健康/勤怠が良好で、安定した稼働ができる方
【Databricks/Python/Rust/フルリモート】自動車製造業向け不具合解析ツール精度向上・自動化システム支援
自動車製造業向けの不具合解析ツールについて、実解析への活用を見据えた精度向上と自動化を上位支援いただきます。 主な業務は、Databricksを用いたデータ基盤・分析環境の整備、Python/Rustによる機能改修や精度改善、ユーザーフィードバックを踏まえた要件整理、ならびに内製化を支える運用自動化です。 AWS(S3/Glue/Athena/Lambda/Fargate)を活用したデータ処理パイプライン構築や、GitHub ActionsによるCI/CD整備、ログ・トレース・負荷試験による品質向上にも携わっていただきます。 初日のみ豊洲で端末受取、以降は基本フルリモートでの稼働となります。 募集背景 不具合時刻推定システム...
・Pythonでの開発実務3年以上 ・Databricks上でのデータ基盤(ノートブック/ジョブ/ワークフロー等)構築経験6ヶ月以上 ・クラウド(AWS/GCP/Azureいずれか)の活用経験2年以上 ・アジャイル開発の実務経験 ・顧客との要件整理、折衝のご経験
【Databricks/Azure/常駐可】金融機関向けAIデータ基盤整備(Databricksエンジニア)
金融機関向けのAIデータ基盤整備プロジェクトに参画いただきます。 Databricksを用いたデータパイプライン(ETL)の設計・実装、AIエージェントやRAGの適用を見据えたAI処理の組み込み、ワークスペース間のデータ連携設計、社内データの構造化整備を担当します。 あわせて、パイプラインの汎用化・標準化やコーディングルールの策定、定例会での進捗・課題報告もお任せします。 元請け経由の案件で、丸の内エリアに原則常駐(リモートは一部相談可)となります。 募集背景 AI活用を見据えたデータ基盤整備とパイプライン標準化を短期間で推進するための増員募集です。
・Databricksを用いたデータパイプライン(ETL)の設計・実装経験 ・Azure上での開発実務経験 ・Pythonによるデータ処理/ETL実装スキル ・データモデリング/DB設計の知見 ・Gitを用いたチーム開発経験 ・関係者との円滑なコミュニケーション(要件整理/報告・連絡・相談)
【Azure/SQL/ハイブリッド】商用車向け営業工程管理システム開発
商用車販売の注文から引き渡しまでを管理する工程管理システムの開発案件です。 Azure SQL や SQL Server、Azure Functions を中心に、データ加工・処理・実装を担当いただきます。地域特性に合わせた要件対応があるため、全国の販売拠点へ2~3か月に1回、1~2日程度の出張が発生します(旅費はクライアント負担)。 出社とリモートのハイブリッド体制で、チームと連携しつつ継続的な機能拡張・運用改善も見込まれます。 募集背景 商用車販売における業務プロセス最適化・地域要件対応の継続的需要に伴い、データ処理基盤と機能拡張体制を強化するための増員募集です。
・SQLの実務スキル(Stored Procedureの作成・改修、CROSS APPLY等を用いたクエリ最適化が可能なレベル) ・Azureの知見(Azure SQL/Azure Functions/Databricks/Data Factory いずれかの経験があると尚良) ・英語ドキュメントへの抵抗がない方(読み書きベース)
【Databricks/インフラエンジニア】フルリモート可 データ基盤構築支援
以下、概要になります ・フルリモート可能です ・Databricksを活用したデータ基盤のインフラ構築プロジェクト ・役割:インフラ構築担当 ・フェーズ:基本設計~運用設計 ・主な業務:Databricks基盤の設計・構築(Workspace、クラスタ設計、権限設計等)、AWS上のインフラ設計(VPC、IAM、ネットワーク設計等)、データ基盤アーキテクチャ設計、各種ドキュメント作成など ・データ処理(ETL/PySpark等)ではなく、基盤(インフラ)設計が中心
・Databricksのインフラ設計/構築経験(Workspace設計、クラスタ設計、権限設計等) ・クラウド(AWS等)におけるインフラ設計/構築経験(ネットワーク、セキュリティ、IAM等) ・DWH/データ基盤のインフラ構築経験 ・データベースインフラ(Oracle、PostgreSQL等)の設計・構築経験
外資系製薬会社のPower BI開発支援案件(BIエンジニア/データエンジニア)
外資系製薬会社のBusiness Intelligenceチームにおいて、Azure DatabricksおよびPower BIを活用したデータマート設計・実装およびレポート開発を担当していただきます。 具体的な業務内容は以下の通りです。 DWH/データマート設計・実装 Power BIレポート設計・開発
・PowerBIの設計・開発実務経験 2年以上 ・クラウドデータベース環境でのDWH/データマート設計・開発 実務経験 2年以上 (Azure DataBricks利用経験があると尚可)
外資系製薬会社のPower BI開発支援案件(BIエンジニア/データエンジニア)
外資系製薬会社のBusiness Intelligenceチームにおいて、Azure DatabricksおよびPower BIを活用したデータマート設計・実装およびレポート開発を担当していただきます。 具体的な業務内容は以下の通りです。 DWH/データマート設計・実装 Power BIレポート設計・開発 即日〜長期
・PowerBIの設計・開発実務経験 2年以上 ・クラウドデータベース環境でのDWH/データマート設計・開発 実務経験 2年以上 (Azure DataBricks利用経験があると尚可)
【Databricks/AWS】大手自動車メーカー向けAI活用基盤開発
大手自動車メーカー向けのAI活用基盤の設計・開発・運用に参画いただきます。 Databricksを中心に、各種データの収集・加工・特徴量生成・学習パイプラインの構築、および分析業務の支援を担当します。 将来的なスケールを見据え、標準化・自動化(ジョブ管理、モニタリング、ガバナンス)も推進していただきます。 募集背景 AI活用ニーズの拡大に伴い、データ/ML基盤の内製化・高度化を進めるための体制強化。まずは少数精鋭で立ち上げ、段階的に拡大予定です。
・Databricksの実務経験6ヶ月以上 ・データ分析の実務経験(ETL/ELT、ノートブック活用、可視化など) ・課題発見から自走して推進できる方
【Databricks/AWS】大手自動車メーカー向けAI活用基盤の開発
大手自動車メーカー向けのAI活用基盤(データ分析・機械学習基盤)の設計・構築・運用をご担当いただきます。 Databricksを中心としたデータ基盤上で、データの取り込み・前処理、分析ワークロードの実行、モデル運用を一気通貫で推進します。既存のデータ資産を活かしつつ、ETL/ELTの整備やノートブック運用、ジョブスケジューリング、権限管理の最適化なども含む想定です。 現場は常駐前提で、関係部門との連携や要件すり合わせ、改善提案など、自走的なコミュニケーションが求められます。 募集背景 AI活用の全社展開に向け、データ活用基盤の拡充と運用強化を行うための増員募集です。
・Databricksの実務経験(6ヶ月以上) ・データ分析の実務経験(ETL/前処理/可視化/検証など) ・課題発見から手を動かして推進できる自走力 ・常駐でのコミュニケーションに抵抗がないこと
【Databricks/データエンジニア】DWH/ETL基盤運用保守
以下、概要になります ・Azure Databricksを中心としたDWH・ETL基盤の運用保守および小規模開発 ・役割:データ基盤保守担当 ・フェーズ:運用・保守 ・主な業務:障害調査・問い合わせ対応、プログラム改修・小規模開発、メダリアンアーキテクチャ(Bronze/Silver/Gold)によるデータ統合・加工処理の保守、ジョブ管理ツールの運用など
・Microsoft Azure(クラウド)の運用・保守・構築・設計経験 ・DWH・ETLシステムの運用・保守・構築経験 ・Databricksの設計・開発・運用・保守経験 ・Azure Data Factoryの設計・開発・運用・保守経験 ・Storage Account(Data Lake)の運用・保守経験 ・ジョブ管理ツール(Systemwalker Operation Manager)の運用・保守経験
【Databricks/常駐】Databricksによるデータ統合・分析基盤構築支援
受託案件において、Databricksを活用したデータ統合および分析業務の基盤構築を支援いただきます。 具体的には、各種データソースの取り込み・クレンジング・変換処理の設計/実装、Delta Lake を前提としたデータモデリング、ノートブック/ジョブの実装・スケジューリング、分析用データマートの整備、品質担保のためのテスト・運用設計などを担当します。 エンド企業常駐の体制下で、クライアントと連携しながら要件の擦り合わせから実装・運用引き渡しまで一貫して関わっていただきます。 募集背景 受託プロジェクトにおけるデータ統合・分析基盤の早期立ち上げ需要増に伴う体制強化のため。緊急要員として複数名を追加募集します。
・Databricks を用いたデータ統合(ETL/ELT)実務経験 ・Databricks を用いた分析基盤の構築または分析ワークロードの実務経験 ・チームでの開発/運用を想定したノートブック/ジョブ設計の経験
情報基盤構築(Tableau構築)
【案件名】 情報基盤構築(Tableau構築) 【概要】 Tableauによるデータ基盤構築・他チームとの仕様調整/不具合対応・データ連携に伴う調整業務 【環境】 Tableau・Python・Snowflake・Databricks 【最寄】 大崎駅(リモート併用) ※1,2か月はフル出社 【稼働】 5月~ 【単価】 55万~65万(スキルにより上振れの可能性あり) 【精算】 固定 【募集人数】 ~3名 【面談回数】 1回
【スキル】 ■必須 ・Tableau構築経験 ・Python開発経験 ・コミュニケーション能力/調整力 ■尚可 ・Snowflake経験 ・Databricks経験
【Databricks/常駐】Databricks構築作業支援(データ統合・分析基盤)
受託案件において、Databricksを活用したデータ統合および分析基盤の構築支援を行います。 - 各種データソースの取り込み・前処理・変換(ETL/ELT)の設計と実装 - ノートブック/ジョブ/ワークフローの構築、運用設計 - データクオリティ/スキーマ管理、パフォーマンス最適化 - 分析用データマートの設計、アナリスト/BI連携の支援 - 緊急増員枠として、短期間での立ち上がりと成果創出が求められます 常駐での稼働となり、現場メンバーやクライアントと密にコミュニケーションを取りながら推進いただきます。 募集背景 受託案件の拡大に伴い、Databricks領域での緊急増員を実施。短期間での立ち上がりと自走が可能な人材を募...
必須スキル: - Databricksを用いたデータ統合(ETL/ELT)の実務経験 - Databricksを用いた分析・データマート構築の実務経験 - ノートブック/ジョブ/ワークフロー設計・実装経験 - 日本語での円滑なコミュニケーション(要ネイティブレベル)
SmartCity案件におけるサーバー系技術者
【サーバーエンジニア】SmartCity案件におけるサーバー系技術者 ------------------------------------------------ ▼支払いサイト ------------------------------------------------ 45日 ------------------------------------------------ ▼精算時間 ------------------------------------------------ 140-180H ------------------------------------------------ ▼勤務地 ...
・Databricks(データ・インテリジェンス・プラットフォーム)の構築 またはそれに類するプラットフォームの経験 ・英語必要、日本語でのコミュニケーションできると望ましい
【データ分析基盤構築/フルリモート】飲料メーカーむけデータ分析基盤構築
Databricks、Snowflake を中心としたデータ分析基盤の調査・設計・実装・運用設計。 PowerBI/Fabric 等のBIツールを活用した分析基盤との接続・資料化。 技術調査や社内外の知見収集を通じた最適な設計・運用方法の提案。 データメッシュ構想や最新データプロダクトの活用に関する資料作成。
・データ分析基盤の構築経験(構成検討など上流工程からの参画経験) ・Databricks、Snowflake の利用経験(PowerBI/Fabric もできれば尚可) ・Python を用いた基本的なデータ処理やスクリプト作成ができること。 ・技術調査・検証を主体的に進めた経験。 ・データメッシュやモダンデータプラットフォームの設計経験。 ・新技術の導入・検証プロジェクト経験
【PowerBI,RFP/リモート併用】製薬会社向けデータ分析・要件定義
顧客の要件調整、製薬会社向けの顧客データ分析、可視化(RFP)。 想定される作業は予測モデル構築、予測のためのデータモデルの構築、これらの作業を行うためのDataBricksの運用。
<サイエンティスト> ・顧客対応、要件定義経験。 ・機械学習系の案件に参画経験。 ・Pythonエンジニア経験 <BIエンジニア> ・顧客対応、要件定義経験 ・DataBricks or PowerBIエンジニア経験
【Python,Databricks,DWH】金融機関向けDWH開発業務支援(Python/Databricks)【ミドル・シニアエンジニア(40代、50代、60代)】の案件
金融機関向け新データベース構築に伴うDWH開発支援。 DatabricksおよびPythonを用いたETL処理を担当。 既存取り込み処理を流用した新規データ取り込みジョブの追加開発・テスト、既存パイプラインの保守・運用を実施。
・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発における設計/開発/テスト経験(3年以上)
【Databricks,データ分析・可視化】データ分析・可視化支援(Databricks)【ミドル・シニアエンジニア(40代、50代、60代)】の案件
大手マテハンメーカー内でのデータ利活用支援。 ・Databricksを用いたデータ整形および加工プロセスの構築 ・顧客要望のヒアリングから要件定義・活用定着までの伴走支援 ・社内蓄積データの可視化(BIツール活用)および分析基盤の運用
・BIツールを利用したデータの可視化および分析の実務経験 ・データ利活用における要件定義および上流工程の経験
【Azure,Databricks,ADLS,ETL/リモート併用】エネルギー会社向けセキュリティ審査支援【ミドル・シニアエンジニア(40代、50代、60代)】の案件
・ADLS→Databricks取込の実装(増分・エラー処理・再実行性を含むジョブ化) ・Medallion(Bronze/Silver/Gold)実装(Deltaテーブル作成・スキーマ定義含む) ・Gold出力~Azure AI Search格納の実装(ADLS出力・インデクサ設定・実行まで) ・AI Searchのインデックス設計(フィールド・フィルタ等) ・ログ・監視整備、結合テスト(取込→検索)完了、引き渡し手順のドキュメント化 ※ジョブフロー・タスクは開発済み
・Azure上でデータレイク(ADLS)に対するETL/ELTの実装・運用経験 ・閉域・権限制約下での構築・切り分けを自走できる方 ・データフロー・運用・テスト観点の設計書作成経験
【Databricks/AWS/フルリモート】データ基盤技術募集案件
## 案件概要 ### 担当業務 ・Databricksを用いたデータ基盤開発を支援いただく案件です。 ・お客様先チームの一員として参画いただき、主にインフラ側の対応を担当いただきます。 ・基本設計~詳細設計、製造、テストまでの一連の対応を行います。 ・一部、要件定義の実施も行います。 ## 求めるスキル ### 必須スキル ・Databricksのインフラ設計/構築、運用経験 ・AWSやデータ分析関連案件に携わった経験 ### 歓迎スキル ・AWS資格を含む、AWSに関する知識 ## その他 精 算:140-180h(想定) 時 期:長期 場 所:フルリモート 面 談:1回 サイト:月末締め翌月15日支払い(15日サイト)
フルリモート
【DBエンジニア(SQL全般)】データ分析基盤のデータエンジニアリング運用支援
【業務内容】 全社横断のデータ分析基盤上でデータエンジニアリングや利用者支援を行い、既存処理の運用・保守から新規バッチ開発、マイグレーション、メタデータ管理、マニュアル作成まで幅広く対応します。 【作業内容】 ・既存バッチ処理の運用・保守 ・分析用汎用データの新規バッチ処理開発 ・既存処理から新環境へのマイグレーション ・メタデータ登録およびデータカタログ製品の比較検討 ・分析者向けマニュアル作成 ・バリューエンジニアリング検討
必要なスキルは下記ですが、製品知識関連は覚えながらでも調整可能です。 ・ETLツール/SQL/Pythonを利用したAP開発経験 ・お客様とコミュニケーションを取りながらプロジェクトを進めるスキル ・DMBOK等のデータマネジメントの基礎知識 ・Databricks、Hadoop/Hive、Informatica(DEI)の知見
【その他】食料品製造会社向け既存のSASプログラムの移行プロジェクト
【案件概要】 食料品製造会社向けに既存のSASプログラムをAzure/Databricks環境へ移行するプロジェクトです。 データ加工処理を担うSASプログラムをPySparkへマイグレーションし、クラウド基盤での再構築を行います。 対象はデータ加工機能に限定され、レポートや機械学習モデルは含まれません。 既存処理の理解を踏まえた設計および移行対応を通じて、データ基盤の最適化を推進します。 【作業内容】 ・SASプログラムの解析および仕様把握 ・PySparkへのマイグレーション設計および実装 ・Azure Databricks環境でのデータ加工処理構築 ・移行後の動作検証およびテスト対応 ・関連ドキュメン...
・SASプログラムコードを理解してデータフローを作成できる方 ・SASソースコードとデータフローを理解して、PySparkでコードを作成できる方 ・Azure Databricks設計・開発経験
【Streamlit/フルリモート】Teradata AccessNavigator 移行に伴う Databricks Apps アプリケーション開発支援
## 案件概要 ### 担当業務 ・Teradata 固有 Web アプリケーション「AccessNavigator」を、Databricks Apps(Python + Streamlit)ベースで再構築していただきます。 ・品質担保のため、機能単位でのアジャイル型開発サイクルに移行予定であり、Python/Streamlit に精通し、既存チームを技術面でリードしていただきます。 ## 求めるスキル ### 必須スキル ・Streamlit を利用したアプリケーション設計・実装経験 ・Web アプリケーションのテスト観点洗い出し、品質改善の経験 ### 歓迎スキル ・機能単位のアジャイル開発(スプリント/イテレーション)で...
Snowflake/飲料メーカー向けデータ分析基盤の運用支援業務
Snowflake/飲料メーカー向けデータ分析基盤の運用支援業務 ■担当業務 ・Databricks、Snowflake を中心としたデータ分析基盤の調査・検証・運用設計(ガイドライン整備等) ・PowerBI/Fabric 等のBIツールを活用した分析基盤との接続・資料化 ・技術調査や社内外の知見収集を通じた最適な設計・運用方法の提案 ・データメッシュ構想や最新データプロダクトの活用に関する資料作成 [関連ワード]フリーランス、案件、エンジニア、プログラマー、業務委託
・データ分析基盤の構築経験(構成検討など上流工程からの参画経験) ・Databricksの利用経験 ・Snowflakeの利用経験 ・Pythonを用いた基本的なデータ処理やスクリプト作成経験 ・データメッシュやモダンデータプラットフォームの設計経験
【SQL,Databricks】データエンジニア/ETLデータ移行開発支援業務
案件多数!フリーランス未経験の方もOK! インボイス未登録の方もご応募ください! リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・データ基盤へのデータ移行作業 ・SQLを用いたデータ加工処理 ・ETLツールによるデータ連携対応 ・移行後データの検証および確認
・SQLを用いた開発経験のある方 ・データ移行のご経験をお持ちの方 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
【Databricks/Azure/運用保守】石油会社向けDWH・ETL運用保守支援(勝どき/京橋)
石油会社向けAzure DatabricksベースのDWHおよび周辺ETLシステムにおける運用・保守支援の募集です。障害調査、問合せ対応、軽微なプログラム改修、小規模開発などをご担当いただきます。 【システム概要】 ・基幹システムや製油所から受信する固定長/可変長ファイルを、Databricksのメダリオンアーキテクチャ(Bronze/Silver/Gold)で段階的に加工しDWHへ格納 ・蓄積データはDomo Cloud Amplifier経由で取り込み、Domo ETLにて加工しユーザー提供 【作業体制・補足】 ・夜間/休日対応が発生する可能性あり ・勝どきでの原則出社。必要に応じて京橋の顧客オフィス出社の可能性あり ...
・Databricksの運用/保守経験 ・分野を問わず、運用/保守経験3年以上
【PowerBI,Python】BIエンジニア/DWH連携データ分析基盤開発業務
案件多数!フリーランス未経験の方もOK! インボイス未登録の方もご応募ください! リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・Databricksでのデータ基盤開発 ・SQL/Pythonによるデータ処理実装 ・PowerBIレポート開発および可視化 ・テスト仕様作成および検証対応 ・データモデリングおよび設計対応
・Databricksでの分散処理開発経験 ・SQL/Pythonを用いた開発経験 ・PySparkおよびDeltaLakeの理解 ・PowerBIでのレポート開発経験 ・DAXおよびPowerQueryの開発経験 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
金融機関向けDWH開発業務支援
■案件名:金融機関向けDWH開発業務支援 ■期間:4月~6月(延長可能性あり) ■場所:千代田区周辺 ■作業形態:常駐 ■内容: 新データベース構築に伴う ETL 開発(Databricks・Python) 新規データ取り込みジョブの追加開発・テスト(取り込み処理は既存流用) 既存パイプラインの保守・運用 ■単価:70~75万円程度(140-180) ■面談:1回 ■人数:1名
■必須スキル: ・Python基本設計からの経験2年以上 ・SQL業務経験 2年以上 ・コミュニケーション能力 ■尚可スキル: ・Databricks 経験 ・Apache Spark(PySpark)経験 ・Google BigQuery 経験(簡単なクエリレベル)
【AWS/Databricks/フルリモート】大手銀行向けビッグデータ基盤アーキテクト募集案件
## 案件概要 ### 担当業務 ・クラウド側(AWS)の技術者として、DataLakeポータル(統合認可管理システム)でDataBricksを利用している別システム(AIRIS)の認可を統合管理いたします。各種データソースを持つソースシステムから、Databricksに対するデータ連携(S3/ETL連携およびAWS Glue Data Catalog)を実現するためのアーキテクチャ、処理方式を検討・実現いたします。 ### 開発環境 ・DataLakeポータル(統合認可管理システム)、Databricks、S3、ETL連携、AWS Glue Data Catalog ## 求めるスキル ### 必須スキル ・AWS要件定義/...
フルリモート
自動車メーカー向け_工場IoTプラットフォーム_データ利活用・分析高度化支援
【案件概要】 工場IoTプラットフォーム「TEDI」の機能追加および高度化を推進するための支援案件 • 背景: これまで構築・運用を主導してきた会社からの出向者が帰任したため、その後任を探索目的: 製造データの全社活用によるビジネス変革(スマートファクトリー化)の実現 • 位置づけ: 自動車メーカーがIT抑制・固定費削減を進める中でも、デジタルツインやスマートファクトリーは「攻めの領域」とされている 【作業内容】 主にOT(制御技術)領域におけるプラットフォームの企画・運営および開発支援を担っていただく • TEDIの機能拡張・改善: ○ 設備データのSnowflake移行(実行中) ○ 動画撮影・閲...
・ソフトスキル:コミュニケーション能力、改善提案力、問題解決力、マネジメント力 ・システム開発・運用:PM経験、DevOps、SRE、AIOpsなどの知見 ・データベース: Snowflake、Databricks、PostgreSQL、SQL Databaseに関する知見 ・クラウドプラットフォーム:Azure: IoT関連および全般的な基礎知識 ・AWS:全般的な基礎知識 ・AI活用:生成AI(GitHub Copilot, Claude等)の利用経験
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
14万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
14万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。