お客さまが作成した要件定義にしたがって設計開発～運用保守までを対応。 ・Workflowの設計・開発・単体テスト・結合テスト・運用・保守 ・試験用のダミーデータ作成 ・Workflow・ETLのチューニング・最適化 ・監査処理の設計・開発・テスト ・マニュアル作業の自動化 ・クエリテンプレートの保守（クエリエンジンアップデートや機能改善に基づくクエリ書き換えなど） • イテレーション対応の受入・動作検証
・Python、分散SQLクエリエンジンTrino ・データエンジニアとしての業務経験 ・Hadoopなどの大規模データの分散処理技術を用いた業務経験
Python・MATLABで記述されたアルゴリズムを逐次処理化する業務(ブロック処理⇒逐次処理への変換等)。 複数アルゴリズムの結合処理や、Kafka・RedisStreams・ROS2を用いた分散処理評価環境の構築支援を担当。 ・アルゴリズムの逐次処理化対応 ・複数アルゴリズムの統合 ・分散処理ライブラリを用いた評価環境構築(Kafka,RedisStreams,ROS2) ・Git等のツールによる開発管理 ・将来的なC++による再構築（想定）
・ソフトウェアのアーキテクチャ設計経験 ・分散処理の知見(Kafka,RedisStreams,ROS2いずれかの経験) ・Python,MATLAB経験(中級クラスから可) ・Git等バージョン管理ツール使用経験
Python・MATLABで作られたアルゴリズムを、ブロック処理から逐次処理へ変換する作業。 あわせて複数アルゴリズムの結合や、Kafka・Redis Streams・ROS2を使った分散処理環境の構築支援も行う。
・ソフトウェアアーキテクチャ設計経験 ・Python（中級以上） ・MATLAB（読解レベル） ・分散処理の知識（Kafka、Redis Streams、ROS2いずれかの経験） ・Gitなどバージョン管理ツールの使用経験
案件多数！フリーランス未経験の方もOK！ インボイス未登録の方もご応募ください！ リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・Databricksでのデータ基盤開発 ・SQL/Pythonによるデータ処理実装 ・PowerBIレポート開発および可視化 ・テスト仕様作成および検証対応 ・データモデリングおよび設計対応
・Databricksでの分散処理開発経験 ・SQL/Pythonを用いた開発経験 ・PySparkおよびDeltaLakeの理解 ・PowerBIでのレポート開発経験 ・DAXおよびPowerQueryの開発経験 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
インターネット事業を主軸に展開している東証プライム上場企業にて、データエンジニアとして参画。全社データ分析基盤のアーキテクチャ設計・構築。データレイク / DWH基盤の設計・運用。ETL / ELTパイプラインの設計・開発。クロスクラウドデータ連携の設計・実装。データモデリングの設計。Terraformを用いたIaCによるインフラ管理。データ基盤に関わるネットワーク・セキュリティ設計。AIデータアクセス基盤の構築。
・大規模データ基盤（DWH）設計・構築経験 ・高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 ・最新技術（IaC/RAG基盤/分散処理）を用いた運用経験
広告配信企業向けのデータ処理・分析基盤や自社DSPの開発、保守運用を担当していただきます。 新規機能追加や既存機能の改修が主な作業です。
Scala, MySQL, Apache Spark - Scalaを使用した開発経験 - 分散処理フレームワーク（Hadoop, Spark等）を用いたデータ処理の実務経験 - MySQL, OracleなどのRDBMSに対する設計- 構築- 運用経験
マーケティングデータ分析基盤の開発を担当していただきます。 ビッグデータ分析技術や機械学習技術を駆使し、最適な解析環境の構築を目指します。
Scala, MySQL, Apache Spark - Scalaを使用した開発経験 - 分散処理フレームワークの使用経験（Apache Sparkなど） - RDBMSの使用経験
案件多数！フリーランス未経験の方もOK！ インボイス未登録の方もご応募ください！ リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・KubernetesによるML基盤設計構築 ・クラウド環境での機械学習基盤構築 ・Rayによる分散処理基盤の構築対応 ・クラウドインフラ設計運用の推進 ・AI開発向け環境整備および改善
・AzureまたはAWSでのクラウド設計運用のご経験 ・Kubernetes（AKS／EKS）運用のご経験 ・Rayを用いた分散並列処理のご経験 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
以下、概要になります ・フルリモート可能です ・Databricksを用いたデータ解析システムの構築支援 ・役割：データ基盤開発担当 ・フェーズ：設計～テスト ・主な業務：データパイプライン設計・構築、データ処理実装、テストコード作成、ドキュメント整備など
データエンジニア ・SQL、Python、Spark（その他Hadoop、Apache Kafka、Mesos等の分散処理基盤構築）によるデータ処理経験 ・データパイプライン構築・運用経験 ・Git等のバージョン管理システムの使用経験 ・テスティングフレームワークを用いたユニットテストの経験（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力
基盤の運用改善および次世代データ基盤の要件定義、設計、構築をお任せいたします。 ※社内のデータ基盤ユーザーとのコミュニケーションが発生します 現行基盤の課題整理および改善方針の策定 次世代データ基盤の要望・要件整理・設計 技術・ツール選定、比較検討 パフォーマンスチューニング キャパシティプランニング CI/CDパイプラインの改善 新規パイプラインの構築、旧パイプラインの閉鎖 リーダー、メンバーおよび関係各所に対する実装方針・技術選定結果などの説明 会議におけるファシリテーション ★期間：随時～ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が...
・クラウド環境(AWS/Google Cloud)を用いたデータ基盤構築/運用経験5年以上 （Lambda、Cloud Run Functions、Cloud Storage、 S3、Compute Engine、Cloud SQL, BigQuery、EMR、RDS、Redshift、 Athena、Airflow、Dataformなどを使用する開発経験） ・データベースの管理経験 ・データモデリングの経験 ・データベースの最適化、キャパシティプランニングの経験 ・TableauやLooker StudioなどのBIツールの利用経験 ・並列分散処理に関する基本的な知識 ・Linux、Docker、ネットワー...
自社サービスのデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。 今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、 その推進をお願いできればと考えております。 ＜具体的な業務例＞ ・Databricks 上に構築された社内向けの新データ基盤の開発・運用 ・AWS 上に構築された旧データ基盤の運用 ・社内各所の要求に応じた dbt によるデータモデリング ・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計 ・実装、運⽤フロー⾃動化の提案、実装 ・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定 ・各所ニーズ(マーケター、サイエンティスト、機械...
・pull request ベースでの Python 等のプログラム開発経験（5年以上） ・データ基盤の設計/構築、または運用経験（3年以上） ・SQL によるデータ分析やデータモデリングの経験（3年以上） ・AWS もしくは GCPを利用したサービスの構築経験（3年以上） ・dbtを用いたデータモデルやデータパイプラインの開発経験（1年以上） 【あると望ましいスキル・経験】 ・データ基盤チームのチームリードの経験 ・Databricks, Snowflake などのプラットフォーム上に構築されたデータ基盤の開発・運用経験 ・Terraform による IaC の経験 ・Apache Spark 等の分散処理フレームワークを...
Python・MATLAB で記述されたアルゴリズムを逐次処理化する業務（ブロック処理→逐次処理への変換）をご対応いただきます。 複数アルゴリズムの結合処理や、Kafka・Redis Streams・ROS2 を用いた分散処理評価環境の構築支援をご担当いただきます。 将来的に一部C++への変換の可能性がございます。 ＜想定業務内容＞ ・アルゴリズムの逐次処理化対応 ・複数アルゴリズムの統合 ・分散処理ライブラリを用いた評価環境構築（Kafka、Redis Streams、ROS2） ・Git等のツールによる開発管理 ・C++による再構築（想定） ＜就業時間＞ 9:00〜18:00 ※※こちらの案件は現在募...
・ソフトウェアアーキテクチャ設計経験 ・Python経験（中級以上） ・MATLAB経験（読解レベル） ・分散処理の知識（Kafka、Redis Streams、ROS2いずれかの経験） ・Gitなどバージョン管理ツールの使用経験
基盤の運用改善および次世代データ基盤の要件定義、設計、構築をお任せいたします。 ※社内のデータ基盤ユーザーとのコミュニケーションが発生します ・ 現行基盤の課題整理および改善方針の策定 ・次世代データ基盤の要望・要件整理・設計 ・技術・ツール選定、比較検討 ・パフォーマンスチューニング ・ キャパシティプランニング ・ CI/CDパイプラインの改善 ・ 新規パイプラインの構築、旧パイプラインの閉鎖 ・リーダー、メンバーおよび関係各所に対する実装方針・技術選定結果などの説明 ・会議におけるファシリテーション ※※こちらの案件は現在募集を終了しております※※
・クラウド環境(AWS/Google Cloud)を用いたデータ基盤構築/運用経験5年以上 （Lambda、Cloud Run Functions、Cloud Storage、 S3、Compute Engine、Cloud SQL, BigQuery、EMR、RDS、Redshift、 Athena、Airflow、Dataformなどを使用する開発経験） ・データベースの管理経験 ・データモデリングの経験 ・データベースの最適化、キャパシティプランニングの経験 ・TableauやLooker StudioなどのBIツールの利用経験 ・並列分散処理に関する基本的な知識 ・Linux、Docker、ネットワー...
AWSの検証環境における基盤構築案件 昨年度11月～2月まで弊社支援で開発環境を構築していた背景あり その後続フェーズとして検証環境を構築する案件です。 今年度の検証環境の構築では、外部システム（物理管理システム）との連携部分の設計・構築・試験が要件（役務）が加わります。 接続先の外部システムの仕様に合わせた接続方式の提案・方式設計が必要・NW周り（VPN周り）の知識が求められます。
AWS 中規模及びそれ以上の規模感でAwsで新規構築、コンテナ開発・移行経験、負荷分散処理の経験が必須。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
8万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
8万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。