データエンジニアとして、様々なデータ関連の業務に関わっていただきます。 データ基盤の構築、データ分析、SaaSの開発、生成AI関連開発など、 ご志向やご経験に合わせて幅広い業務に挑戦することができます。 <具体的な業務内容> ・Snowflake + Terraform + dbt を用いたデータ基盤構築 ・Terraform によるリソース・権限管理 ・ETLパイプラインの設計・実装・運用 <技術環境> AWS ※掲載金額は週5日稼働です※ ※※こちらの案件は現在募集を終了しております※※
・DWHの利用経験(Snowflake, BigQuery, Redshift, Databricks等) ・SQLを用いたデータ加工・変換処理の実務経験 ・ETL/ELTパイプライン構築経験(ツール不問) ・データ基盤の基本構造に対する理解(3層構造:Source / Lake / DWH / Mart) ・IaCツール(Terraform, CloudFormation等)の利用経験 ・Git等を利用したチーム開発経験
大手製造業データ統合基盤開発 詳細設計~実装~テスト~リリースを対応していただきます。 - 基本設計書から詳細設計の作成(バッチ・ETL設計) - ETLツールを用いた実装 - テスト計画書作成とテスト実施 (単体テスト、結合テスト、システムテスト)
・SQL、Pythonの等でデータ分析基盤案件での参画実績 ・詳細設計書の作成経験 ・Shellでの経験 ・Linuxコマンドの知見及び経験 ・Gitでの経験 ・AWS(Amazon Redshift、S3)の知見及び設計開発経験
顧客のデータウェアハウス事業部において、DWHの運用・保守を中心にご担当いただきます。慣れてきた段階で開発タスクにも参画いただく想定です。 - 週次・月次のデータ集計(増減の検知、報告、原因調査) - ドキュメント整備(マニュアルの更新など) - アクセス申請対応(AWS環境の申請・承認業務) - 将来的にETL/ELTやジョブフローの改善、効率化施策にも関与 稼働は週2日出社、残りはリモート(最大週3日)でのハイブリッド体制です。
リモート 以下のご経験を必須とします。 - SQL開発経験5年以上 - 複雑なSQL(サブクエリ、相関サブクエリ、ウィンドウ関数など)の作成・読解 - DML/DDLの適切な活用、およびSQLチューニングの実務経験 - 大規模データの取り扱いとテーブル設計の経験 - AWSでの開発・運用経験1年以上(Redshift、S3、Lambda、Step Functions) - IAMを用いた権限管理の知識・実務経験
大手音楽出版社の情報システム部門にて、分析基盤の運用支援およびデータ活用業務を\nご担当いただきます。\nAWS(Redshift)やGCP環境下でのBI基盤整備を中心にグローバルチーム\nとの英語による要件調整や、各種ツールの運用支援も含まれます。\n英語でのメール対応など、海外拠点との連携も発生します。\n\n最寄り駅:渋谷駅・原宿駅
・SQL(CTE, WINDOW関数など)を用いたデータ処理経験 ・RedshiftやBigQueryなどクラウドDWHの利用経験 ・AWS GlueやStep Functionsを用いたETL処理経験 ・Tableau、Looker等のBIツールに関する知識・利用経験
データエンジニアとして、様々なデータ関連の業務に関わっていただきます。 データ基盤の構築、データ分析、SaaSの開発、生成AI関連開発など、ご志向やご経験に合わせて幅広い業務に挑戦することができます。 【具体的な業務内容】 Snowflake + Terraform + dbt を用いたデータ基盤構築 Terraform によるリソース・権限管理 ETLパイプラインの設計・実装・運用 ★期間:随時~ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。(但し、企業都合退場は対象外) ※20代〜30代が中心で活気ある雰囲気で...
・DWHの利用経験(Snowflake, BigQuery, Redshift, Databricks等) ・SQLを用いたデータ加工・変換処理の実務経験 ・ETL/ELTパイプライン構築経験(ツール不問) ・データ基盤の基本構造に対する理解(3層構造:Source / Lake / DWH / Mart) ・IaCツール(Terraform, CloudFormation等)の利用経験 ・Git等を利用したチーム開発経験 ・自走力(与えられた要件を自ら整理し、実装まで行える)
大手保険会社のデータ基盤構築プロジェクトのプロジェクトマネージャーをご担当して\nいただきます。\nAWS Redshift環境のプラットフォーム構築を完了し、ユーザー部門と協議\nしながら段階的に必要なデータの収集・反映を進めるフェーズに入ります。\n\n主な業務は以下の通りです。\n・AWS Redshift(ProvisionedまたはServerless)に\nよるデータ基盤の構築推進ならびに他部門と連携しながらの要件調整\n・ユーザー部門(ファイナンス/数理)と連携したデータ追加計画の推進、月次SO報告\n資料作成・説明対応\n・技術パートナー(SRE、AWSエンジニア)との連携・進捗管理 プロジェクト全体\nのスケ...
・大規模データ基盤またはDWH(特にAWS Redshift)の導入プロジェクト におけるPM経験 ・エンタープライズ向けプロジェクトでの関係者調整・進捗管理スキル ・クラウド環境(AWSなど)を前提としたプロジェクト経験 ・業務部門との折衝能力(特にファイナンス/数理領域) ・日本語(ネイティブレベル)ができる方
顧客システムにおけるSnowflake導入可否の検証支援です。 次期構成でRedshiftを想定していた処理方式・設計、並びに現行の処理性能やコスト水準が、Snowflakeでも再現可能かを検証します。 現在はSnowflakeの仮環境を立てて初期検証を着手した段階で、今後Snowflake採用となった場合は、バックアップ等を含む基盤側の追加検証を実施いただきます。 AWS上の既存資産(EC2/RDS/EFS等)や現行運用を踏まえた評価・検証、設計見直し、パフォーマンスチューニング、コスト試算等を担当いただきます。
基本リモート ・AWS環境での開発/運用経験 ・Snowflakeの導入またはPoC/検証経験 ・Amazon Redshiftに関する知見 ・データレイク/データウェアハウス(DWH)の基礎知識と設計理解
▍通勤面:リモート併用環境! ▍インボイス未登録の方OKです! 文具メーカーグループ向けデータ活用支援にて、 SQLの経験者を募集しています! 作業内容は以下の通りです。 ◆想定作業◆ ・既存データモデリングの再構築 ・データ分析基盤構築 ・要件定義(データ構造や全体モデリング設計) ・基盤リリースまでの一連作業 ・顧客との調整・コミュニケーション ・その他付随する作業 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください! 相談のみのご応募も歓迎です!
・週5日の実務可能な方 ・SQLによる設計・データモデリング経験 ・DWH開発のご経験 (Snowflake、Redshift、BigQueryなど) ◎勤務地出社可能な方優遇!◎ ※出社頻度はご相談ください!
大手製造業データ統合基盤開発業務にご参画していただきます。\n詳細設計~実装~テスト~リリースをご対応いただきます。\n\n主に下記作業をご担当いただきます。 \n・基本設計書から詳細設計の作成(バッチ・ETL設計)\n・ETLツールを用いた実装\n・テスト計画書作成とテスト実施(単体テスト、結合テスト、システムテスト)\n\n作業場所:東京都千代田区霞ヶ関
・データ分析基盤案件での参画実績 ・AWS(Amazon Redshift、S3)の知見及び設計開発経験 ・ETLツールを用いた設計開発経験 ・Shellでの経験 ・詳細設計書の作成経験
基盤の運用改善および次世代データ基盤の\n要件定義、設計、構築をご担当いただきます。\n\n・現行基盤の課題整理および改善方針の策定\n・次世代データ基盤の要望・要件整理・設計\n・技術・ツール選定、比較検討\n・パフォーマンスチューニング\n・キャパシティプランニング\n・CI/CDパイプラインの改善\n・新規パイプラインの構築、旧パイプラインの閉鎖\n※社内のデータ基盤ユーザーとのコミュニケーションが発生。\n※リーダー、メンバーおよび関係各所に対する実装方針・技術選定結果などの説明が発生。\n※会議におけるファシリテーションなどが発生。
・クラウド環境(AWS/Google Cloud)を用いた データ基盤構築運用経験(5年以上) ・Lambda、Cloud Run Functions、 BigQuery、Redshiftなどを使用する開発経験 ・TableauやLooker StudioなどのBIツールの利用経験 ・IaC(terraform)を利用したインフラリソースの管理経験
現在JavaによりHadoop環境で構築されているデータ変換処理を、Redshiftへ移行するプロジェクトです。SQLベースでの同等処理を再設計・実装し、パフォーマンスの検証を行います。また、生成AIを活用したコード変換・改善も検討対象です。Redshiftへの移行により、データ処理基盤の効率化とパフォーマンス向上を図ります。 【技術スタック】 ・開発言語:Java ・データベース:Redshift、PostgreSQL、Oracle ・クラウド:AWS ・OS:Linux
・Linux環境での開発経験 ・RedshiftまたはPostgreSQL、Oracleの経験 ・AWS環境での作業経験 ・Java開発経験 ・生成AI活用経験(利用経験要)
顧客内製システムにおける自動化開発プロジェクトです。 人手で行っている障害発生時の切り分け作業を、業務フローを統合して自動化する仕組みを開発します。DEVチームに所属し、進捗に応じてQA支援を行う場合があります。 ・対象:データパイプライン(ETL)、サーバレス/マイクロサービス基盤、ワークフロー自動化 ・役割:設計〜実装〜テスト〜運用の推進、フレームワーク/ツール/プロセスの選定、チームリード ・出社:基本フルリモートだが、月1回程度 品川出社の可能性あり
リモート <超必須> ・Pythonによる開発経験10年以上 ・約5名規模の開発チームリーダー経験 ・開発フレームワーク/ツール/プロセスの選定・標準化の実務経験 ・ETL開発およびデータパイプライン構築経験 ・マイクロサービス/サーバレスアーキテクチャの理解 ・DWH/ビッグデータ実装(ETL等)の理解 ・Pytest等を用いたテストコード実装経験(または相応の知見) ・AWS上でのシステム開発実務経験 ・サーバレス型ワークフロー開発経験 ・AirflowおよびDAGの開発経験、もしくは概念理解 <必須> ・Pandasを用いた開発経験 ・Kinesisを用いた開発経験 ・Sparkを用いた開発経験 ・Redshiftを用...
▼案件名 受発注管理システム更改(RPA⇒Javaバッチ処理) ▼案件概要 需要予測システムから出力されたデータを抽出・変換し、 DWH(Redshift)からデータマートへ登録するETL処理の設計~開発を担当いただきます。 既存のPython ShellによるETLが性能要件を満たさなかったため、 AWS GlueのVisualETLおよびPySparkを用いて再構築を行います。 ▼条件 ・単価: 70万~85万円程度 ※スキル見合い ・精算:140h~180h ・時期:7月途中~ ▼勤務地 フルリモート ※出社の場合は23区内 ※地方在住者不可 ▼募集人数 1名
▼必須スキル ・AWS Glue(VisualETL) or PySparkの経験がある方 ※上記、どちらか一方でも可 ・RDBMSの経験 ▼尚可スキル ・Python ・SQL ・Amazon Redshift ・Amazon S3 ・Power BI
電子決済領域のデータプラットフォーム活用プロジェクトです。 SQLおよびBIツールを用いてデータの抽出・集計・分析を行い、意思決定に資するレポートやダッシュボードを提供します。 データコンサルやマーケティングコンサルと連携しながら、分析要件の整理からアウトプット作成、運用改善までを推進いただきます。 開発環境: ・言語: SQL ・DWH/DB: Amazon Redshift (SQL) ・BI: Power BI
Redshift ・デジタルマーケティング領域でのデータ作成/分析の実務経験 ・SQLを用いた大量データの抽出・集計の豊富な経験(重要) ・Power BIの実務利用経験(レポート/ダッシュボード作成) ・関係者と円滑に連携できる高いコミュニケーション力(重要)
製薬会社向けの新基幹システムにおいて、BI機能の設計を中心とした上流工程をご担当いただきます。 Amazon QuickSight と Amazon Redshift を活用した可視化・レポーティング基盤の設計、要件定義、ダッシュボード設計、データモデル設計、パフォーマンス最適化、および顧客折衝(要件調整・合意形成)をお任せします。 基本はフルリモートですが、2カ月に1回程度、北海道の顧客先へ出張いただく想定です。開発は約1年継続予定です。
フルリモート ・Amazon QuickSight の実務経験(ダッシュボード設計・可視化要件定義) ・Amazon Redshift を用いたデータモデリング/集計設計の実務経験 ・顧客折衝のご経験(要件ヒアリング、レビュー、合意形成)
メガバンク向けTableauとRedShiftを組み合わせた業務分析システムの\n運用保守フェーズにおける機能改善業務にご参画していただきます。\n\n最寄り駅:虎ノ門駅・内幸町駅・新橋駅・中野駅
・Redshiftアーキの深い知識 ┗sys_query_history、sys_connection_logに関する知識 ・Redshiftクエリの深い知識 ┗redshiftクエリレスポンス向上の経験 ┗統計情報の更新・Vaccumジョブの自動実行の知識 ・CloudWatchの深い知識 →CloudWatchログ運用に関する仕組みの構築経験
内容:エンドの求人サイト自社サービスにおけるサイエンス部門にて レコメンド機能の内製化及び開発を行っています。 今回はインフラ面にお強い機械学習エンジニア様を募集しています。 開発前に機械学習モデルの構築は済んでいるため、それを実用化していきます。 作業例)AWSのアーキ設計 機械学習モデルの社会実装
必須:AWSの設計構築 (EC2,ECS,Cloudformation,ECR,S3,Amazon RedShift,などを利用した) 機械学習への興味関心・知見 Pythonでの開発経験 Dockerなどコンテナ周りの知識・ご経験 自発的にコミュニケーションをとれる方
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
7万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
7万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。