- 職種: データエンジニア、勤務地: 東京都、一部リモート可、稼働日数: 週5日、月平均160時間程度
- データクレンジングやデータ収集バッチ処理の開発、Databricksを活用したデータ分析基盤の構築・運用を担当し、金融企業のデータ統合と利活用を推進します。
- 必須: データクレンジング・データ収集バッチ開発経験、Databricks構築・運用経験、RDB/DWH基礎知識。歓迎: Scala、Python、AWS、Azure、GCP経験。
- 一部リモート可で東京都内勤務、月額75万円〜85万円の報酬、週5日で月平均160時間の稼働で安定した働き方が可能です。
- データクレンジングとバッチ開発の実務経験があり、Databricksを使ったデータ分析基盤構築に携わったことがあるデータエンジニアに最適です。
- 金融業界のデータ統合・利活用プロジェクトに参画し、ビジネス課題解決に貢献したい方におすすめです。
- 職種: データエンジニア/データサイエンティスト、勤務地: 東京都、リモート可、週3日程度の出社とリモートワークで稼働します。
- 既存SparkパイプラインをDatabricksへ移行し、約1,000本規模のETLを実装・テストします。
- Python、SQL、Apache Spark/PySpark、Databricks環境での開発経験が必須です。
- 週3日程度の出社とリモートワークで柔軟に働ける環境です。
- 月間140〜180時間の稼働で、報酬は650,000円〜750,000円/月です。
- 約1,000本規模のETLパイプライン移行プロジェクトで実務経験を活かせます。
- 職種はプロジェクトマネージャー(PM)で、勤務地は半蔵門駅です。リモート勤務は明記されておらず、現地での勤務が想定されます。
- 金融業向けにGoogle Cloud(BigQuery)上で稼働するデータマネジメントシステムの構築・保守・追加開発を担当し、プロジェクト全体の進行管理と品質確保を行います。
- 必須スキルはDataBricksまたはGoogle Cloudの知見で、歓迎スキルとしてSASでの開発経験があります。
- 報酬は月単価で80万円〜95万円と高めで、金融業向けの大規模プロジェクトに携わるチャンスがあります。
- 勤務地は半蔵門駅で、通勤に便利な立地です。
- プロジェクトは2026年7月から開始し、140〜180時間の作業で、1名のPMとして責任を持って進行できます。
金融業界における重要なデータ資産の統合と利活用を推進する案件です。 具体的には、多岐にわたるデータソースからのデータクレンジングや収集を行うバッチ処理の設計・開発をお任せします。 堅牢でスケーラブルなデータ分析基盤の構築にも携わっていただきます。
・データクレンジングの実務経験 ・データ収集バッチ作成の経験 ・Databricksの利用経験または知識
以下、概要になります ・フルリモート可能です ・大手企業のデータ基盤における既存SPARKパイプラインのDatabricks移行プロジェクト ・役割:開発メンバー ・主な業務:既存SPARKパイプラインの現状調査・仕様整理、DatabricksへのETLパイプラインの移行・実装、シルバー/ゴールドレイヤーのデータ変換処理の開発・テスト、移行後の動作確認・品質担保など
・DWH/データパイプライン開発・運用経験 ・Pythonを用いたデータ処理の実務経験 ・SQLによるデータ加工・集計の実務経験 ・Apache Spark/PySparkの経験 ・Databricksの経験 ・複数名チームでのプロジェクト参画経験
某大手人材サービス企業にて、Databricksとdbtを用いたデータマートの開発に携わっていただきます。 事業成長を支えるデータ基盤の構築と、それに伴うデータ活用推進がミッションです。 モダンなデータスタックを用いた開発経験を積める魅力的な案件です。 募集背景 事業拡大に伴い、データに基づいた意思決定の重要性が高まっています。 これまでのデータ基盤をさらに強化し、より高度なデータ活用を実現するために、新たなデータエンジニアを募集しています。
・データエンジニアとしての実務経験(3年以上) ・Databricksを用いたデータ基盤構築・運用経験 ・dbtを用いたデータモデリングおよび開発経験 ・クラウド環境(AWS, GCP, Azureいずれか)での開発経験
某大手HR企業におけるデータ活用プロジェクトにて、Databricksを用いたデータ抽出・加工業務をご担当いただきます。 約0.5人月相当の短期プロジェクトであり、データ駆動型の意思決定をサポートする重要な役割です。
Databricksを活用したデータ抽出・加工の実務経験
某データプラットフォームの新規構築および既存システムの移行を推進するプロジェクトです。 主にPySparkを用いた開発を通じて、データ基盤の整備に貢献していただきます。
PySparkを用いた開発・実装経験
大手クライアントのデータパイプライン移行プロジェクトに参画いただきます。 主にPythonを用いた開発が中心となります。 募集背景 クライアントの事業拡大に伴い、既存のデータパイプラインを最新技術を用いた環境へ移行するプロジェクトです。
フルリモート Pythonでの開発経験。 Databricksを用いたデータパイプライン構築・移行経験。
- データエンジニア(Databricks構築・移行プロジェクト)フルリモート勤務、週5日、月平均140時間~180時間稼働可能です。
- Databricks環境構築と既存システムの移行作業を担当し、大規模データプラットフォームの設計・実装・運用を行います。
- 必須スキルはPySpark開発実務経験とDatabricks深い知識、大規模データ処理経験。歓迎はデータレイク・DWH知見、クラウド環境(AWS・Azure・GCP)開発経験、BIツール活用経験です。
- フルリモートで週5日、月平均140時間~180時間の稼働が可能なため、柔軟な働き方を実現できます。
- PySpark開発実務経験があるデータエンジニアにとって、Databricks構築・移行プロジェクトでスキルをさらに磨ける案件です。
- 報酬は月額650,000円〜950,000円と高めで、Databricksや大規模データ処理経験者にとって魅力的です。
- インフラエンジニア(サーバー・ネットワーク・セキュリティ)として、豊洲駅周辺でリモート勤務可、数ヶ月単位の小規模追加開発を担当します。
- AWS環境を中心にデータ分析・BI基盤の追加開発を行い、要件整理・設計・試験・導入・顧客資料作成・説明を担当します。
- 必須: AWS設計・試験経験、インフラ全般知識、対象環境2つ以上実務経験。歓迎: Databricks/Snowflake等データレイク設計・構築経験。
- 豊洲駅周辺でリモート勤務可、報酬は月単価600,000円〜700,000円で、数ヶ月単位の小規模追加開発に適しています。データ分析・BI基盤の追加開発を担当し、AWS環境を中心にサーバー・ネットワーク・セキュリティの設計・試験・導入を行います。
- AWSを中心にサーバー・ネットワーク・セキュリティの設計・試験・導入を担当し、実務経験を積めます。さらに、顧客向け資料作成・説明業務も行い、幅広いスキルを活かせます。
- データ分析・BI基盤の追加開発に携わり、顧客向け資料作成・説明も行えるため、幅広い業務に携わりたい方におすすめです。さらに、AWS環境での設計・試験・導入経験を積むことができます。
- データエンジニア(サーバーサイドエンジニア)/東京都内、フルリモート勤務、週4日〜週5日稼働可能です。報酬は月額75万円で、安定した収入が期待できます。業務はデータ抽出と分析用データ基盤の開発・保守運用を中心に行います。さらに、データマートの開発・保守運用も担当します。
- データ抽出業務を担当し、分析用データ基盤・ワークフロー(Azure Databricks / dbt / Airflow)の開発・保守運用を行い、データマートの開発・保守運用を主に担当します。
- 必須スキル:SQLを用いたデータマート開発(要件定義・設計含む)と運用経験3年以上、クラウドDWH利用経験3年以上(Azure Databricks、Amazon Redshift、BigQuery)、大量データハンドリング経験、Webシステム基本理解と業務開発経験。歓迎スキル:dbt、Airflow利用経験、データ分析/活用プロジェクトマネジメント経験、クエリチューニング経験、ビジネス要件とシステム要件のバランスを考える能力、コミュニケーション能力。
- フルリモート勤務で、東京都内に拠点があるため、通勤の負担がなく、柔軟に働けます。報酬は月額75万円で安定した収入が期待できます。
- データ抽出業務と分析用データ基盤の開発・保守運用を担当するため、データエンジニアとしての実務経験を積みたい方におすすめです。
- Azure Databricks、dbt、Airflowを使用した業務が中心で、クラウドDWHの経験がある方にとってはスキルを活かしやすい案件です。
案件多数!フリーランス未経験の方もOK! インボイス未登録の方もご応募ください! リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・データ活用案件の提案活動支援 ・顧客との要件整理および調整対応 ・プロジェクト計画および進捗管理 ・設計レビューおよび品質管理対応 ・開発チームとの連携および推進
・DWHおよびETL導入構築経験3年以上 ・DWHおよびETL開発経験3年以上 ・顧客折衝経験4年以上 ・プロジェクト管理および推進経験のある方 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
- データエンジニア(東京都)でフルリモート勤務、週5日稼働可能、報酬は月600,000円〜750,000円です。初日は出社必須です。(フルリモート)(週5日稼働)(通勤時間削減)(柔軟な働き方)(業務に集中できる)(リモート環境)(データマート開発)
- データマートの設計・開発・保守を主導し、Azure環境でのデータパイプライン構築やクエリ最適化を行います。(データマート設計・開発・保守)(Azure環境)(データパイプライン構築)(クエリ最適化)
- 必須はSQLでのデータマート設計・開発経験3年以上、クラウドDWH利用経験3年以上。歓迎はdbt・Airflow経験です。(SQLでのデータマート設計・開発経験)(クラウドDWH利用経験)(dbt・Airflow経験)
- フルリモートで週5日稼働可能なため、通勤時間を削減し柔軟に働けます。(フルリモート)(週5日稼働)(通勤時間削減)(柔軟な働き方)(業務に集中できる)(リモート環境)(業務に集中できる)
- 大手HR系企業でのデータ利活用プロジェクトに参画でき、業界経験を積めます。(大手HR系企業)(データ利活用プロジェクト)(業界経験)(参画)(経験を積む)(スキルアップ)
- 月600,000円〜750,000円の報酬で、経験に応じた高収入が期待できます。(月600,000円〜750,000円)(高収入)(経験に応じた報酬)(期待できる)(スキルアップ)(キャリア形成)(安定した報酬)
- Azure Databricks 運用・保守エンジニア(勝どき・京橋)で、原則出社で勤務します。
- 主なミッションは、Azure Databricks と DWH/ETL システムの障害調査・保守・PG改修を行い、安定運用を実現することです。
- 必須スキルは Databricks・Azure・DWH/ETL の運用・保守経験で、System Walker Operation Manager の運用経験が必要です。
- 原則出社で勤務できるため、チームと密に連携しながら業務を進められます。
- 単価90万円で、月単価での精算が可能なため、安定した報酬が期待できます。
- 夜間・休日作業の可能性がありますが、代休調整があるためワークライフバランスを保ちやすいです。
- 職種はデータエンジニアで、勤務地は半蔵門駅、常駐勤務で週5日、月140〜180時間稼働可能です。報酬は月額75万円〜115万円です。(※交通費全額支給)(※週休二日制)
- 主なミッションは、金融機関向けデータウェアハウスの設計・実装、データマート開発、テストから運用保守までを担当し、データ活用を推進することです。(※業務は全日程でオンサイト)
- 必須スキルはPython実務1年以上、Databricks開発経験、SQLクエリ作成経験です。歓迎はデータ分析基盤構築・運用経験、大規模データ処理知識、金融業界経験です。
- 勤務地は半蔵門駅で常駐勤務となり、週5日、月140〜180時間稼働可能です。報酬は月額75万円〜115万円と高めで、交通費全額支給・週休二日制が付いています。(※業務は全日程でオンサイト)
- Python実務経験1年以上、Databricks開発経験、SQLクエリ作成経験を有するエンジニアに最適です。データ分析基盤構築・運用経験や金融業界経験があるとさらに歓迎されます。(※業務は全日程でオンサイト)
- データウェアハウス設計・実装から運用保守までを担当し、金融機関の高度なデータ活用を実現する重要な役割を担います。(※業務は全日程でオンサイト)(※交通費全額支給)(※週休二日制)
石油会社向けAzure Databricks運用保守支援。 Azure Databricks DWHおよび周辺ETLシステムの障害調査、問い合わせ対応、PG改修、小規模開発等をご支援いただきます。 【募集人数】2名 【面談】1~2回
・Databricks運用保守経験 ・何かしらのクラウドの運用保守経験
- 職種: PM/PMO/ITアーキテクト、勤務地: 東京都、フルリモート勤務、週5日稼働で月間160〜180時間の作業が可能です。ご経験を活かし、プロジェクトを成功に導く役割を担います。
- 既存のデータ分析基盤をTreasure DataからDatabricksへ移行し、プロジェクトの開発方針立案・手法選定、進捗報告・品質保証を担当します。プロジェクトの成功に貢献します。
- 必須スキルはPySpark開発経験、データパイプライン設計・構築経験、開発方針立案スキル、Databricks基本機能理解、クライアント折衝能力です。歓迎スキルに認定資格、AWS知識、PMO・アーキテクト経験、大規模基盤構築経験があります。
- フルリモートで東京都内に拠点があるため、通勤の負担がなく柔軟に働けます。
- 月間160〜180時間の稼働で、安定した報酬600,000円〜700,000円/月が確保できます。
- Databricks移行プロジェクトの中心で、データ分析基盤刷新に貢献できる重要な役割です。
- データエンジニア/データサイエンティストとして、麹町駅で勤務し、一部リモート可、週5日/月160時間程度の稼働が想定されます。
- 金融業界のデータ統合と利活用を推進し、Databricksを用いたデータ分析基盤の構築と、データ収集・クレンジングのバッチ処理開発を担当します。
- 必須スキルはDatabricks実務経験とバッチ処理開発経験、データ分析基盤の深い理解です。
- 勤務地は麹町駅で、通勤が便利です。報酬は月額850,000円〜950,000円と高めで、週5日/月160時間程度の稼働が想定されています。
- データエンジニアやデータサイエンティストとして、Databricksを使った実務経験がある方におすすめです。
- 一部リモート可で、柔軟な働き方が可能です。
- システムエンジニア/データエンジニア/AIエンジニア/データサイエンティストの職種で、勤務地は中野駅、リモートは一部可、週2〜3日程度の稼働が可能です。
- 顧客・ベンダー・関連部署と連携し、Databricksを活用したAI基盤の要件定義から開発推進までを担当し、既存AWSデータ基盤との連携を推進します。
- 必須スキルは課題整理・解決策提案能力、要件定義・顧客折衝、Databricks設計・AWS開発です。Python/PowerShell経験やAI/分析基盤案件経験があると歓迎です。
- 勤務地は中野駅で、週2〜3日程度リモートワークが併用可能です。報酬は月額75万円〜115万円と高めの設定です。
- Databricksを活用したAI基盤構築に関わり、要件定義から開発推進まで幅広い業務を経験できます。
- PythonやPowerShellを用いた開発経験がある方は、Databricks設計・AWS開発の実務に直結できるため、即戦力として活躍できます。
- 職種はクラウドエンジニアで、勤務地は東京都千代田区丸の内です。ハイブリッドリモート勤務で、週5日フルタイムの稼働が基本です。
- 主なミッションは、DWH障害調査・問い合わせ対応、ETLシステム保守運用、Databricks環境改修、Azure基盤運用保守、そして小規模機能開発です。
- 必須スキルはDatabricks設計開発運用経験、Azure運用保守経験、DWH/ETL運用保守経験、AzureDataFactory設計開発運用経験、ジョブ管理ツール運用保守経験です。歓迎スキルは特に記載されていません。
- 週5日フルタイムで安定した稼働が可能で、報酬は月単価で60万円〜70万円と高めです。
- リモート勤務も可能で、オンサイト作業ができる方は大歓迎です。
- クラウドエンジニアとしてDatabricks・Azure・DWHの実務経験を活かせる案件です。
- 職種: データエンジニア、勤務地: 東京都、リモート可: 一部リモート、稼働日数: 週5日です。報酬は月額90万円で、リモート勤務も可能です。
- ミッションは社内分析基盤をDatabricksへ移行・再構築し、データ取り込み・変換・権限カタログ・CI/CD・データ利用接続を設計・実装することです。テックリードと協働し、成果物レビュー・品質管理、アジャイル環境で調査・解決策を提案します。
- 必須スキルはDatabricks設計・構築経験、データ基盤移行参画経験、Python/SQLによるデータ変換実務、アジャイル開発経験、英語テキストコミュニケーション可です。歓迎はdbt実務経験、Unity Catalogアクセス制御設計経験、ADF経験です。
- 東京都内で勤務し、一部リモート可、週5日稼働で安定した報酬(月額90万円)を得られます。
- 社内分析基盤をDatabricksへ移行・再構築するリードとして、設計・実装・品質管理を担当し、アジャイル環境で調査・解決策を提案できます。
- Databricks設計・構築経験、Python/SQLによるデータ変換実務、BIツールとDatabricks組み合わせ実装経験などの必須スキルを活かし、データ基盤移行プロジェクトに貢献できます。
- 職種: エンジニア、勤務地: 東京都千代田区大手町、リモート可: ハイブリッドリモート、稼働日数: 週5日、報酬: 250,000円〜300,000円/月単価です。
- ミッションはHRデータ抽出・集計、大量データ加工・分析、要件整理・仕様検討、分析基盤データ運用支援、レポーティングデータ作成です。
- 必須スキルはSQLでのデータ抽出経験、Databricks利用経験、Redshiftでのデータ処理経験、BigQuery利用経験、Webシステム開発経験です。歓迎スキルは特にありません。
- 週5日フルタイムで安定稼働が可能、報酬は月単価で250,000円〜300,000円、リモート可のハイブリッド勤務です。
- SQL・Databricks・Redshift・BigQuery経験があるエンジニアに最適、HRデータ分析やレポーティング業務に携わりたい方におすすめです。
- フリーランス未経験者も歓迎、インボイス未登録者も応募可能、オンサイト作業も歓迎です。
- AIエンジニア(機械学習・データエンジニア等)を東京都内で常駐勤務、週5日(140〜180時間)稼働可能です。
- 某銀行向けAI基盤構築プロジェクトで、Databricksを活用したアプリケーション開発を担当し、最新プラットフォームの構築に貢献します。
- 必須スキルはDatabricks開発経験とAI基盤構築実務経験です。歓迎スキルは記載されておりません。
- 週5日(140〜180時間)で安定した稼働が可能で、報酬は月額75万円〜115万円と高めです。
- 常駐勤務でクライアントと直接取引できるため、意思決定がスピーディーで円滑なコミュニケーションが期待できます。
- Databricksを用いたAI基盤構築の実務経験がある方にとって、最新プラットフォーム開発に携わるチャンスです。
- 職種: AIエンジニア/ITコンサルタント/システムエンジニア/データエンジニア/エンジニア/コンサルタント、勤務地: 中野駅、リモート可: 一部リモート可、稼働日数: 週5日/月間140~180時間程度です。
- 金融機関向けAI基盤プロジェクトで、Databricksを活用し、要件定義から開発推進までを担当し、AWSデータ基盤と連携しながら顧客・ベンダー・部署との調整業務を行います。
- 必須スキルは要件定義・顧客折衝・Databricks設計・AWS開発・設計経験で、歓迎スキルにDatabricks実務経験・AWS開発・設計経験・Python・PowerShell・AI基盤・分析基盤プロジェクト経験があります。
- 週5日/月間140~180時間で、報酬は月額850,000円〜1,350,000円と高額で、リモートは一部可という柔軟な働き方が可能です。
- AI基盤構築やDatabricks設計に関わりたい方、AWS環境での開発・設計経験がある方におすすめです。
- 金融機関向けプロジェクトで顧客・ベンダー調整を行い、要件定義から開発推進までをリードできる方に最適です。
以下、概要になります ・リモート可能です ・データ分析サービスにおける新基盤への移行プロジェクトのインフラ業務 ・役割:インフラ担当 ・主な業務:Azure環境でのインフラ設計・構築(ネットワーク、セキュリティ、権限管理)、クラウド基盤の監視設定・運用、グローバルのセキュリティ・ガバナンス方針のローカル環境への落とし込み、グローバル側との確認・調整、開発チームへのインフラ観点でのサポートなど
<必須要件> ・Azure環境でのインフラ設計/構築経験5年以上(ネットワーク、セキュリティ、権限管理) ・Azure Entra IDによるアクセス制御の設計経験 ・クラウド基盤の監視設定/運用経験 ・Databricks環境のインフラ構築/運用経験 ・文字ベースでの英語コミュニケーション力(AI生成ツール利用前提)
金融機関における新データベース構築プロジェクトにおいて、 データ統合(ETL)処理にDatabricksを活用します。 PythonとDatabricksを用いた以下の業務をご担当いただきます。 ・新規データを取り込むジョブの追加開発およびテスト(既存処理を流用予定) ・既存データパイプラインの保守・運用
・Pythonを用いた業務開発経験2年以上 ・SQLを用いた業務開発経験2年以上 ・システム開発における設計、開発、テストの実務経験3年以上
全社を横断するデータ分析基盤の 設計、構築、運用プロジェクトをご担当いただきます。 具体的には以下の業務を想定しています。 ・データパイプラインの開発およびデータモデリング ・データウェアハウスやデータマートの設計、構築、最適化 ・Azure環境を活用したデータパイプラインの開発と運用 ・ビジネス部門との連携による要件整理とデータモデリング ・既存データ基盤の保守およびパフォーマンス改善
Databricks ・データウェアハウスおよびデータマートの設計・構築経験(3年以上) ・SQLを用いたデータモデリングのご経験 ・クラウド環境でのデータ基盤の設計・運用経験 ・Azure環境での開発経験
データマネジメント部署にてデータマートの開発業務を担当いただきます。 データ分析/活用プロジェクトへ参画いただき、データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義や必要に応じて各種調査も一部ご担当いただきます。 【業務内容】 ・分析用データ基盤/ワークフローの開発・保守運用(Azure Databricks / dbt / Airflow) ・データマートの開発・保守運用 ・データに関わる各種調査
・SQL を用いた分析用データマートの開発(要件定義、設計含む)・運用経験3年以上 ・クラウドDWH利用経験3年以上(Azure Databricks、Amazon Redshift、BigQuery) ・大量データのハンドリング経験 ・Web システムに関する基本的な理解と業務開発経験
SnowflakeまたはDatabricksの技術選定やアーキテクト設計を担当いただきます。 Snowflake基盤構築の要件定義から参画し、 dbtを用いたデータ基盤の構成案やETLツールの組み合わせを提案するなど リードを行いながらプロジェクトを牽引していただきます。
・データ基盤の技術選定およびアーキテクト設計の実務経験 ・非機能要件(セキュリティ要件等)の定義から設計まで完遂できるスキル ・SnowflakeまたはDatabricksの深い技術的知見 ・パイプラインやETLツールの構成・組み合わせに関する提案リード経験
【案件名】某社向けAzure Databricks運用保守支援 【内容】Azure Databricks DWHおよび周辺ETLシステムの 障害調査、問い合わせ対応、PG改修、小規模開発 等を ご支援いただきます。 ・DWHシステム概要 基幹システムや製油所から受信した固定長・可変長ファイルを、 Databricksのメダリオンアーキテクチャ(Bronze/Silver/Gold) で段階的に加工しDWHへ格納する。 蓄積データはDomo Cloud Amplifier経由で取り込み、Domo ETLで 加工しユーザーへ提供する。 【場所】原則出社(勝どき、京橋) 【...
【スキル】 [必須] ★Databricksの運用・保守経験(設計・構築まで経験あれば尚良し) ★クラウド(Azure)の運用・保守経験(設計・構築まで経験あれば尚良し) ★DWH・ETLシステムの運用・保守経験(設計・構築まで経験あれば尚良し) ・ジョブ管理ツールの運用・保守の経験(System Wallker Operayion Manager) [尚可] ・Azure Data Factoryの設計・開発・運用・保守の経験 ・Sorage Account(Data Lake)の運用・保守の経験(ログやIFファイルの確認等) ・OS(Windows)運用・保守・構築・設計の経験 ・Uni...
データ分析プラットフォームを活用した、大規模データの統合および分析環境の構築支援をご担当いただきます。 主な業務内容 統合データプラットフォームを用いたデータパイプラインの設計・構築 さまざまなデータソースからのデータ統合および分析用データマートの作成 クラウド環境と連携したデータ分析基盤の運用・最適化支援
– 統合データプラットフォーム(Databricks等)を用いたデータ統合およびデータ分析の実務経験 – 主要クラウドサービス(AWS/GCP/Azure等)のデータ分析ソリューションを用いた開発・運用実務経験
某大手クライアント向けに、Databricks環境の構築を支援する案件です。 データパイプラインの構築は今回のスコープ外となります。 具体的には、基盤設計(アーキテクチャ、セキュリティ、ワークスペース構成)の方針策定から、ワークスペース設計、権限設定、クラスタ設定などを担当します。 設計書の作成や実際の構築作業、さらには試験工程の対応支援まで、幅広いフェーズに携わっていただきます。 募集背景 新規データ基盤構築プロジェクトを推進するため、チーム体制強化に向けリーダー1名と担当2名の募集をしています。
【リーダーの方に求めるスキル】 ・データ基盤構築プロジェクトにおける設計またはリード経験 ・Databricksまたは同等のデータ基盤(Snowflakeなど)に関する設計経験 ・顧客の要件を踏まえ、最適なアーキテクチャを検討し説明できる能力 【担当の方に求めるスキル】 ・Databricksまたは類似基盤での開発・構築経験 ・ノートブック、ジョブ、クラスタといったDatabricksの基本要素に対する理解 ・Unity Catalogまたは権限制御に関する知識
某石油会社様向けに、Azure Databricksを用いたDWHおよび周辺ETLシステムの運用保守をご支援いただく案件です。 具体的には、障害調査、技術的な問い合わせ対応、プログラム改修、小規模な機能開発などをお任せします。 基幹システムや製油所から受信したファイルを、Databricksのメダリオンアーキテクチャ(Bronze/Silver/Gold)に沿って段階的に加工し、DWHへ格納する一連のプロセスを担当していただきます。
以下のご経験をお持ちの方を必須スキルといたします。 * Databricksの運用・保守経験 * クラウドプラットフォーム(Azure)の運用・保守経験 * DWH・ETLシステムの運用・保守経験 * ジョブ管理ツール(Systemwalker Operation Manager)の運用・保守経験 * 夜間・休日作業にも対応可能な方 * 年齢は49歳までの方を想定しています
設計・試験・導入・顧客向け資料作成および説明を実施。
・サーバ・NW・セキュリティ領域いずれかでのインフラ設計・構築経験4年以上 ・セキュリティ要件およびAWS主要機能の設計・構築経験
現行ETL基盤(IBM Datastage)からDatabricks(Lakehouse基盤)への移行パイロット検証に参画。 移行可否・移行方式・ツールの有効性を検証。 ・Datastage既存ジョブの構造・処理内容の確認 ・マイグレーションツールを用いたDatabricksへの変換 ・変換結果の動作検証(PySpark/SQL/Workflow等) ・DatastageとDatabricksの処理結果比較(データ品質・性能等) ・ツールで変換できない部分の手動移行検証 ・検証結果の整理(課題・改善点・移行可否判断材料の作成) ・パイロット結果を踏まえた移行方式の提案・フィードバック
・ETL開発の経験(Datastage等) ・Databricks(ノートブック・Workflow・Delta Lake)の利用経験 ・Spark/PySpark/SQLを用いたデータ処理経験 ・データパイプラインの設計・実装経験 ・新技術の検証やPoCに対応できる方
Databricks on AWSのインフラ領域における構築・管理業務。 TerraformによるIaC管理を基本とし、以下を担当。 ・アーキテクチャ設計(Network・Object Access・SCC・Ingress/Egress・CMK) ・Identity設計(SCIM・Groups・IAM roles) ・AWS前提条件整備(IAM・S3・KMS・STS等) ・AWS基盤・Databricksアカウント・Workspaceの構築 ・ポリシー・権限・予算設定の反映
・AWSインフラ構築スキル ・IaCに対する知見(特にTerraform)
某大手銀行におけるAI基盤構築プロジェクトにご参画いただく、アプリケーションサイドのエンジニアを募集しています。 最先端の技術を活用し、セキュアで高性能なAIプラットフォームの実現に貢献していただきます。
Databricksの利用経験、およびAI基盤の設計・構築に関する実務経験が必須です。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
7万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
7万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。