・基本設計~結合テスト、保守をご担当 ・フロント:Javascript、Angular、HTML ・サーバー:Java8、SpringBoot、Elasticsearch、ApacheSpark ・DB:AWSAurora、AWSDynamoDB、ApacheCassandra ・インフラ:AWSEC2、S3、EBS、ElastiCache 週5日、リモート
・Java、JavaScript経験:3年以上
Databricksを活用したデータ基盤構築プロジェクトに参画いただきます。基本設計から詳細設計、開発、テストまでを一貫して担当し、スキルに応じて要件定義などの上流工程にも携わっていただきます。AWS環境上でのデータ分析基盤構築を中心に、ビッグデータ処理やデータパイプライン整備など、データ活用を支える重要なポジションです。 【技術スタック】 ・クラウド:AWS ・開発言語:Java、Python
・Databricksでの開発経験 ・AWSやデータ分析関連案件に携わったご経験
大手自動車関連プロジェクトにて、ADAS(先進運転支援システム)および自動運転、コネクテッド領域の開発を担当します。 ご経験に応じて、プロジェクトマネジメント、モデルベース開発、車載組込みソフト開発、データ基盤構築、品質評価・検証などのポジションをご提案します。 自動車業界における大規模開発プロジェクトで、機能安全や品質基準に準拠した開発を推進していただきます。英語を用いたドキュメント対応や海外拠点との連携が発生する可能性もあります。 【技術スタック】 ・開発言語:C言語、C++、Python、Java ・クラウド:AWS、Azure ・データ処理:Spark ・その他:AUTOSAR
・車載システム(自動車業界)での開発・実務経験がある方
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 SaaSサービス データ分析・AI活用プロジェクトデータサイエンティストポジション 【業務内容】 本サービスは、ChatGPT、GPT-4 など生成AIを活用した法人向けプラットフォームおける、データ分析・AI活用プロジェクトデータサイエンティストポジションの募集になります。 ・生成AIプラットフォームの利用ログや業務データを活用したデータ分析・可視化 ・ユーザー行動分析、離脱率分析、機能利用状況の可視化 ・AIモデル出力データを用いた品質評価(精度・誤答率・業務貢献度など) ・Pythonを用いたデータ前処...
・Pythonによるデータ分析実務経験3年以上(pandas, NumPy, scikit-learn, matplotlib 等) ・SQLを用いたデータ抽出・集計・分析経験(MySQL / PostgreSQL / Redshift 等) ・データ可視化・レポーティングの実務経験(BIツールまたはJupyter等) ・統計分析、回帰・分類などの基本的な機械学習手法の実装経験 ・ビジネス課題を整理し、分析テーマに落とし込んだ経験
クラウド環境におけるデータ基盤構築および運用支援業務。ETL/ELTによるデータ取込と整形、データ品質管理、AI/分析チームとの連携・調整。MLOpsや生成AIなど新技術の検証・活用支援も担当。 【技術スタック】 ・開発言語:Python、SQL ・クラウド:Azure/AWS/GCP(いずれか) ・ETL基盤:Databricks、Spark、Data Factory(尚可) ・技術領域:MLOps、生成AI、NLP、RAG(尚可)
・Pythonを用いたデータ処理、データ加工の経験 ・SQLを用いたデータ操作経験 ・クラウド環境(Azure/AWS/GCPいずれか)での業務経験 ・データ基盤やバッチ処理、ETL等の実務経験 ・関係者と調整しながら業務を進められるコミュニケーション力
「走行データ」という巨大な資産を価値に変える。エンジニアとしての知的好奇心を刺激するプロジェクトです。本プロジェクトでは、車両から収集される膨大なデータを可視化するシステムの機能追加・維持保守を担当します。 ・監視レポート作成および分析報告 ・設計、製造、単体〜システムテスト、リリース作業までの一貫したデリバリー 市場価値・キャリアメリット: 「Connected Car × Cloud」の専門性を磨き、市場価値の高いエンジニアへ。 現在、自動車業界で最も注目される車載データの活用に携わることで、IoT分野の深い知見が得られます。また、AWSを用いたビッグデータ処理の経験は、今後のクラウドネイティブなキャリアにおいて強力...
Java ・Javaを用いたWebアプリケーション開発経験(5年以上) ・AWS環境下での開発経験(2年以上) ・基本設計からテスト、リリースまでの一連の工程を自走できる方 ・各種レポート、報告書の作成スキル
AWSとGCPを併用したハイブリッドクラウド基盤におけるデータパイプライン設計・開発を担当します。GlueによるETL処理、S3やLake Formationを活用したデータ管理、BigQueryを用いたDWH環境整備、Terraformによる環境構築の自動化、Airflowによるジョブ管理といった幅広い工程をお任せします。 【技術スタック】 ・開発言語:Python、Go、Java ・データ処理:AWS Glue(PySpark)、BigQuery ・インフラ:AWS、GCP ・IaC:Terraform ・ワークフロー管理:Airflow、MWAA ・データ管理:S3、Lake Formation ・BI:Looker ...
AWS・GCP ・AWS環境でのインフラ構築・運用経験(S3 / IAM / VPC など) ・GCP構築経験(BigQuery、IAM/ネットワーク設定) ・BigQueryでの分析SQL経験(パーティショニング/クラスタリング) ・AWS Glue(PySpark)でのETL開発 ・Terraformを用いたIaC実践
新規データベース構築に伴い、ETL処理の設計・開発、既存パイプラインの保守運用業務をご担当いただきます。Pythonやdatabricks、SQLを中心に活用し、安定したデータ処理基盤の維持・改善を行います。 【技術スタック】 ・開発言語:Python ・分析基盤:databricks ・DWH:Google BigQuery ・データ処理:Apache Spark(PySpark)
・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発に関する設計・開発・テストの経験(3年以上)
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日(月〜金)で稼働可能な方 *副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー ・データ分析基盤構築およびアプリケーション開発(Java、Scala、Spark) ・AWS上でのJavaバックエンド開発 週5日、リモート
・Javaを使ったバッチ処理の設計、開発の経験 ・AWS使っての開発経験
設備事業を展開するクライアントのDX推進プロジェクトとして、 社内外の膨大なデータを一元的かつ効率的に管理するための統合データ基盤構築に参画いただきます。 現在稼働中のTableau環境に加え、新たに高速かつ柔軟なデータ処理が可能な「Databricks」を導入し、 データレイクとDWH(データウェアハウス)の統合を目指します。 エンジニアの方には、主に以下の業務をお任せします。 ・Databricksを用いたデータ基盤環境の追加構築 ・Python/Sparkを活用した高効率なデータパイプラインの設計および実装 ・周辺データの準備処理(ETL/ELT)およびワークフローの整備 モダンなデータエンジニアリング技...
Python ・大規模データ基盤構築プロジェクトにおける構築実務経験(データ設計/データパイプライン処理実装等) ・Pythonを使用したデータ分析などのご経験:3年以上
AWS環境上に構築されたDWHシステムの機能追加・改修・保守対応を行います。 ETLツール(AWS Glue)やPySparkを用いたバッチ開発、EventBridgeやStep Functionsでのジョブ管理、CloudWatchやDatadogによる監視運用設計を実施します。 またTerraformでのインフラ構築・管理、Gitによるバージョン管理も担当範囲です。 【作業期間】 2025年12月~(長期予定) 【作業時間】 9:30~18:00(昼休憩 12:00~13:00)
AWS ・クラウドインフラの開発・保守経験 ・Terraformの利用経験 ・Gitの利用経験
既存プロダクトと連携し、患者向けコンテンツ配信基盤の役割を担うPEHubと呼ばれるプロダクトの開発を担当頂きます。 ・プロダクトマネージャとの仕様策定 ・各種AWSサービスをフル活用したアーキテクチャ設計 ・社内プロダクトや社内サービスとのシステム連携 ・他プロダクトチームとシステム仕様・アーキテクチャのすり合わせ ・設計したシステムの実装と運用 ・各種インフラ運用の自動化、CI/CDの強化
・設計に関するプラクティスを理解し、状況に合わせて選択し適用した経験 ・既存の仕組みに対して主体的に問題の提起や改善策の提案を行い、設計を継続的に改善した経験 ・CI/CD、監視、テスト自動化などの DevOps の経験 ・プロダクトマネージャーなどエンジニア以外のメンバーと協議しながら要件を決定した経験 ・他チームまたは外部パートナーとのシステム連携の経験
ポイント事業者向けDWHシステムの保守・開発業務を担当。 AWS環境上でのETL開発、運用監視、ジョブ管理、CICD構築など幅広い対応が求められます。 PythonやSQLでのデータ処理、運用業務、Gitによるバージョン管理の経験を活かし、効率的なシステム運用を実現していただきます。 Terraformによるパイプライン構築や小規模チームのリード経験があればより高いパフォーマンスが期待されます。 【技術スタック】 ・データベース:Apache Iceberg ・ETLツール:Glue(pyspark) ・ジョブ管理:EventBridge、StepFunctions ・運用監視:CloudWatch、DataDog ・開発言...
・クラウド環境の開発・保守経験 ・SQLの読み書きが可能 ・Pythonでの開発経験 ・Gitの使用経験
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ■概要: 官公庁のデータ連携基盤構築に伴う設計・開発業務になります。 データ連携基盤を活用する業務は、現時点では監査業務になります。 【詳細】 当該省庁が保有している各システムのデータをETLにて連携し、データマート又はデータウェアハウスを構築します。 また、ユーザーが検索する画面(Webアプリ)の構築も行います。 ■必須スキル: ・Azureの構築経験1年以上(ネットワーク等のインフラ構築周り) ・ETLツール等を用いたデータ連携基盤の構築経験 ・サブリーダー経験 ■尚可スキル: ・ガバメントクラウド(行政システム専...
・Azureの構築経験1年以上(ネットワーク等のインフラ構築周り) ・ETLツール等を用いたデータ連携基盤の構築経験 ・サブリーダー経験
薬局経営を支援する薬局ダッシュボードの画面・機能開発する責務を担っていただきます。 ■開発環境 ・React、Next ・TypeScript ・AWS(Cognito、Amplify、API Gateway、Lambda、RDS、S3) ・Python ・その他(GitHub、Datadog、Google Analytics、GTM、KARTE)
・Pythonを利用した開発経験(目安:2年以上) ・AWSを利用した開発・運用経験(目安:2年以上) ・Webアプリケーションの開発経験(目安:5年以上) ・複数人でチームを組みサービス開発をした経験 ・RDBMS / NoSQLの知識・設計の経験
- 大手メーカー向けの東京都内案件で、データエンジニア向け、リモート併用(初日〜2週間は常駐)、週5日稼働、月額54万〜64万円の条件の案件です。
- メーカーのDXでデータ利活用と可視化を推進することがミッションです。AWS GlueのSpark(Python)で収集・加工の開発、DB設計や複雑SQL対応をご担当いただきます。
- データ加工・編集、データマート/ダッシュボード具体化、DB設計と複雑SQL、顧客折衝、PythonとETL開発が必須で、RedshiftやQuickSight等の経験は歓迎です。
- 大手メーカーのDXに参画でき、AWS GlueやSpark(Python)を用いた実務経験を積みながらデータ利活用のスキルを高められます。
- ETL設計・開発やDB設計、ダッシュボード具体化まで一連の工程をリードしたいデータエンジニアの方におすすめです。
- 初日〜2週間程度の常駐後はリモート併用での稼働が可能で、週5日で安定した働き方ができます。
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ■内容: データ加工や編集プログラム開発、PowerBIダッシュボード開発など大手メーカーのDX案件(SCPチーム)における、データ利活用・可視化対応業務を実施していただきます。 ■必須: ・PowerBIでのダッシュボード構築設計/開発経験(9月参画) ・顧客の要求事項に対するデータ活用・可視化に向けてのデータ加工・編集、データマート、ダッシュボードの具体化検討 ・DB設計および複雑なSQLの経験 ・Pythonを使用したデータ解析・AWS・DB関連の業務参加経験 ・50代前半まで(スキル見合いで+1~2歳は検討しま...
・PowerBIでのダッシュボード構築設計/開発経験(9月参画) ・顧客の要求事項に対するデータ活用・可視化に向けてのデータ加工・編集、データマート、ダッシュボードの具体化検討 ・DB設計および複雑なSQLの経験 ・Pythonを使用したデータ解析・AWS・DB関連の業務参加経験 ・50代前半まで(スキル見合いで+1~2歳は検討します)
某大手メーカーのDX推進におけるデータ利活用支援を担当します。2025年9月より、性能要件を踏まえたデータ整備やデータマートの概要設計を行い、10月以降は以下の2つの業務に本格的に着手します。1つ目は、AWS Glue上でのSparkジョブ(Python)を用いたデータ収集・加工プログラムの開発、2つ目は、整備されたデータマートを基にしたPowerBIでのダッシュボード開発です。開発後は結合テストや他チームとの連携も含めた活動に参加いただきます
【共通】 ・データ利活用・可視化のための加工・編集、データマート設計、ダッシュボード検討の経験 ・DB設計および複雑なSQLの理解・経験 【①データ収集・加工プログラム開発】 ・Pythonでの設計・開発経験 ・アウトプットを意識したDB・テーブル設計経験 【②ダッシュボード開発】 ・PowerBIを用いたダッシュボード設計・開発経験
- BIエンジニア向けの東京都内、常駐勤務、週5日稼働で、単価は月54万〜64万円、某メーカーのDX案件です。
- データ利活用と可視化推進がミッションです。9月からデータ整備・データマート概要設計とAWS GlueのSpark(Python)開発を担っていただきます。
- データ加工・編集、DB設計・複雑なSQL、Python、ETL開発、顧客折衝が必須で、RedshiftやQuickSightなどの経験があると尚良いです。
- メーカーのDXでデータ整備から可視化まで一気通貫で携われる点が魅力です。
- AWS GlueやSpark、Pythonを活かしてETL・データ基盤開発に取り組みたい方に最適です。
- ダッシュボード具体化やデータマート設計経験を深めたいBIエンジニアにおすすめです。
- データ利活用・可視化対応の東京都内、常駐(リモート不可)、週5日で、月54万〜64万円の案件です。AWS GlueのSpark(Python)とPowerBIを活用します。
- メーカーDXでのデータ利活用を推進することがミッションです。9月はデータ整備・マート概要設計と性能検討、10月以降はGlueとPowerBIの開発を行います。
- 必須はデータ加工・マート具体化、DB設計・複雑SQL、顧客折衝、ETL(Glue尚可)、PowerBI設計開発です。AWSデータ活用や他BI経験は歓迎です。
- 9月の設計から10月以降の開発まで一気通貫で関与でき、上流から実装まで経験を広げられます。
- AWS Glue(Spark/Python)とPowerBIを実務で扱い、ETLとBIの双方のスキルを磨けます。
- メーカーのDX案件で性能要件を踏まえた検討に携われ、堅実なデータ基盤づくりを経験できます。
大手エンターテインメント関連企業が展開しているインターネット広告代理店業における、 インターネット広告の掲載情報や実績情報を出力、レポーティングするための 分析用プロダクトのサーバーサイド開発、運用、保守をお願いいたします。 【案件のポイント】 ・新規開発のプロダクトとなるため、0→1の開発に携わることができます。 ・データソースとなるのが同チームが運用しているデータレイクのため、 大規模な広告データと向き合った開発にチャレンジすることができます。 ・複数のプロダクトを管理しているチームのため、様々な技術を習得することができます。 【開発チーム/参画先について】 今回お願いしたいポジションは、サーバサイドエン...
Python ・PythonのWebフレームワークを用いた開発経験:1年以上 ・Web系サービスの開発経験:2年以上 ・AWSを利用した開発経験 ・Dockerなど、コンテナ技術を利用した開発経験 ・GitHubでのPRを活用した開発経験
リーダー候補として、クライアントのビッグデータを処理する基盤のアーキテクチャの策定から、 DWHやデータ加工処理の開発、機械学習モデルのML&Opsへの組み込み等、 開発案件を技術的にリードし、後進の育成もお任せいたします。 当社の根幹事業である受託開発サービスの更なる成長に向けた施策の企画実行や、 新規プライム案件のリードにチャレンジいただけるポジションです。 プレイングマネージャーとしてのロールを期待しています。 具体的には下記の業務をお任せします。 【具体的な作業内容】 ・技術上の調査及び提案のための研究 ・顧客との要件定義、打ち合わせへの同席 ・メンバーのレビューや指導や支援などの開発チームの技術力...
Python ・AWSを利用したDWH、ETLの開発実務経験:1年以上 ・GitHub、Docker、CircleCIなどのCI/CDツールの使用経験 ・要件定義、基本設計、詳細設計の経験 ・GlueとRedshiftの利用経験
- 位置情報ビッグデータ分析基盤の設計・構築を担当し、移動体データの評価・比較やデータ調達支援を行い、位置情報データ処理ソリューションの活用を推進します。
- スケーラブルなデータパイプラインやETL基盤の構築、AWS環境での位置情報データ分析やCI/CDシステム構築、機械学習モデルを活用した予測分析を行います。
- 高単価で5年以上の経験を活かし、AWS・Sparkを駆使したスキルをさらに磨き、千代田区神田でハイブリッド勤務が可能です。
- 千代田区神田でハイブリッド勤務が可能で、通勤の負担を軽減しつつ、オフィスでの協働も実現でき、柔軟な働き方を実感できます。
- 高単価(800,000円〜850,000円/月)で、5年以上の経験を活かし、AWS・Sparkを駆使したスキルをさらに磨き、業界トップレベルのデータエンジニアとしての価値を高められます。
- 位置情報ビッグデータを扱うプロジェクトで、地理空間データの評価・比較やデータ調達支援を行い、実務経験をさらに深められます。
- 職種: エフェクトアーティスト(3Dデザイナー)/勤務地: 東京都渋谷区/フルリモート勤務/稼働日数: 平日フル(100%)
- モバイル・コンシューマーゲームにおけるエフェクト制作、検証、ツール支援、クオリティ管理・監修を担当し、ゲーム開発のビジュアル表現を高めます。
- 必須スキル: Unity、Unreal Engine、Houdini、Maya、SPARK GEAR等でのエフェクト制作実務経験。歓迎スキル: 1タイトル以上の完成経験、ハードウェア制限下での表現追求、ワークフロー整備、シェーダー知識、監修・リーダー経験。
- フルリモートで東京都渋谷区に拠点を持つ大手ゲーム会社のプロジェクトに参加でき、月額750,000円の安定した報酬が得られます。
- モバイル・コンシューマーゲームのエフェクト制作に携わり、UnityやMayaなど主要ツールを活用した実務経験をさらに深められます。
- エフェクト表現の検証やツール支援、クオリティ管理・監修業務を通じて、ゲーム開発全体のビジュアル品質向上に貢献できます。
- システムエンジニアの常駐案件です。勤務地は池袋(関東)で、報酬は月単価750,000円〜950,000円です。
- 在庫最適化システムを支えるデータ基盤構築がミッションです。数億レコードの大量データをSQLやPythonで加工し、集計後にデータストアへ投入する仕組みを構築します。
- 必須スキルはWebシステム設計~開発経験5年以上、Python2年以上、Spark等分散処理経験2年以上、SQL実装経験、データ基盤構築経験、AWS開発経験、Docker等コンテナ技術経験です。歓迎は大規模バッチシステム開発経験とSQLチューニング経験です。
- 常駐で池袋(関東)勤務のため、オフィスでのコミュニケーションが取りやすく、チームと密に連携しながら開発できます。
- 月単価750,000円〜950,000円と高報酬で、経験に応じた報酬が期待できます。
- 在庫最適化システムを支えるデータ基盤構築という実務的なミッションに携わることで、データエンジニアリングのスキルをさらに磨けます。
データ調達支援や位置情報データ処理ソリューションの設計、開発等を担当いただきます。
・データエンジニアとしての経験(5年以上) ・要件定義以降の経験 ・大規模なデータ処理経験 ・データパイプライン/データ処理基盤構築経験 ・AWS環境での開発経験 ・Apache Spark等のビッグデータフレームワーク利用経験 ・Python/Java/SQLでの開発経験 ・Linux/Bashの利用経験 ・DB/サーバーサイド設計実装経験
案件多数!フリーランス未経験の方もOK! インボイス未登録の方もご応募ください! リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・Databricks導入に向けた設計構築・検証対応 ・AWS環境でのデータパイプライン開発 ・SQL/Python/Sparkによるデータ処理開発 ・現行システム調査および顧客連携対応 ・AI活用による業務効率化支援
・パイプライン開発およびSQL/Python/Sparkのご経験 ・AWSプラットフォームを利用した開発経験のある方 ・データ基盤構築またはクラウド開発のご経験 ・顧客課題に対する提案・改善経験のある方 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
セキュリティ機能の開発
・Java開発経験、Linux運用経験 ・Spring,Kubernetes,Docker,Apache spark,envoy,スクラム開発
- 某エンド企業の既存SparkデータパイプラインをDatabricksへ移行し、データ品質を維持しつつ業務効率化を図るプロジェクトに参画いただき、データパイプラインの設計・実装・テストを担当し、データエンジニアリングのスキルを磨く機会です。
- 既存Sparkパイプラインを調査・仕様整理し、DatabricksでETLを実装、シルバー・ゴールド層のデータ変換を開発・テストします。
- フルリモートで週5日稼働、月650〜750万円の報酬が得られます。
- フルリモートで働けるため、勤務地に縛られずに業務に集中できます。
- Databricksを活用したETL実装経験を積みたいデータエンジニアに最適です。
- 週5日、140〜180時間/月の稼働で安定した報酬(650〜750万円)を得られます。
- 某大手企業向けにDatabricksとPythonを活用したデータパイプライン移行プロジェクトを担当します。
- 既存パイプラインの調査・仕様整理から、シルバー/ゴールドレイヤーのETL実装、テスト、品質担保までを一貫して行います。
- フルリモートで週5日、月平均140〜180時間の稼働で、月額650,000円〜750,000円の報酬が得られます。
- フルリモート勤務で品川駅にオフィスがあるため、通勤の負担が少なく働きやすい環境です。
- PythonとApache Sparkを用いたETL開発経験があるデータエンジニアに最適な案件です。
- 大手企業のデータ移行プロジェクトに携わり、実務経験をさらに深めたい方におすすめです。
- 位置情報ビッグデータを活用した分析基盤の設計・開発を行う案件です。
- 主な業務は、スケーラブルなデータパイプライン構築、AWSでのETL・機械学習モデル実装、CI/CD設計です。
- 週2日出社のハイブリッド勤務で、月給80万〜85万円の報酬とリーダー経験が得られます。
- 週2日出社のハイブリッド勤務で、通勤の負担を軽減しつつチームと連携できます。
- 月給80万〜85万円とリーダー枠での経験が積めるため、キャリアアップを目指すデータエンジニアに最適です。
- AWSやSparkを活用した大規模位置情報データ処理に携わり、最新技術を実務で学べます。
- 大手企業のデータ基盤モダン化を目的とした、DatabricksへのSPARKパイプライン移行プロジェクトです。
- SPARKパイプラインの調査・仕様整理、DatabricksへのETL移行・実装、シルバーレイヤー・ゴールドレイヤーのデータ変換処理開発・テスト、品質保証を担当します。
- フルリモートで週5日稼働、月額650〜750万円の報酬と、最新技術を活用したデータ基盤構築経験を積める点が魅力です。
- フルリモートで週5日稼働、月額650〜750万円の報酬が明記されており、在宅で安定した収入を得たいデータエンジニアにおすすめです。
- Databricks・PySpark・Pythonを使用したETLパイプライン移行経験がある方に最適で、既存SPARKパイプラインの調査・移行業務を通じて実務スキルをさらに磨けます。
- 大手企業のデータ基盤モダン化プロジェクトに参画でき、シルバーレイヤー・ゴールドレイヤー設計・開発経験を活かせるため、キャリアアップを目指す方におすすめです。
既存のSPARKパイプラインについて、現状の調査と仕様の整理を行います。 その後、DatabricksへのETLパイプラインの移行と実装を進めます。 シルバーおよびゴールドレイヤーにおけるデータ変換処理の開発とテストを担当し、 移行後の動作確認および品質保証を行います。
DWHまたはデータパイプラインの開発・運用経験がある方。 Pythonを用いたデータ処理の実務経験がある方。 SQLによるデータ加工・集計の実務経験がある方。 Apache Spark / PySparkの使用経験がある方。 Databricksの使用経験がある方。 複数名チームでのプロジェクト参画経験がある方。
既存のSparkデータパイプラインの現状を詳細に調査し、仕様を整理するフェーズから参画いただきます。 DatabricksへのETLパイプラインの移行と実装を進め、シルバー/ゴールドレイヤーのデータ変換処理の開発およびテストを担当。 移行後のシステムが安定稼働するよう、徹底した動作確認と品質保証を行います。 募集背景 事業拡大に伴うデータ基盤の近代化・効率化を目的とした、データパイプラインの刷新プロジェクトです。
データウェアハウス(DWH)やデータパイプラインの開発および運用経験は必須です。 Pythonを活用したデータ処理の実務経験、SQLを用いたデータ加工・集計スキルも求められます。 具体的には、Apache SparkやPySpark、そしてDatabricksの実務経験が重要となります。 さらに、複数名のチームでプロジェクトに参画し、貢献した経験をお持ちの方を歓迎します。
<<スマホゲームを中心に、「ゲームで世界に感動を創り出す」企業!!>> ゲーム開発におけるバトル演出デザイナー業務をお任せします。 ■□具体的には…□■ ・専用ツールを使用したキャラクター/モンスターの必殺技/魔法演出の作成 <こんな方におすすめです!> ・デザインスキルを活かしたい方 ・新しい技術や表現に挑戦したい方
・カットシーン演出、動画制作の実務経験 ・ゲーム開発の実務経験 ・Unityを使用した実務経験 ・Photoshop/After Effects/SPARK GEARのいずれか2つ以上を使用した実務経験 ・勤務地まで通勤可能な方
- 職種: データエンジニア/データサイエンティスト、勤務地: 東京都、リモート可、週3日程度の出社とリモートワークで稼働します。
- 既存SparkパイプラインをDatabricksへ移行し、約1,000本規模のETLを実装・テストします。
- Python、SQL、Apache Spark/PySpark、Databricks環境での開発経験が必須です。
- 週3日程度の出社とリモートワークで柔軟に働ける環境です。
- 月間140〜180時間の稼働で、報酬は650,000円〜750,000円/月です。
- 約1,000本規模のETLパイプライン移行プロジェクトで実務経験を活かせます。
・移動体の地理空間データ評価/比較/データ調達支援 ・位置情報データ処理ソリューションの設計/開発 ・スケーラブルなデータパイプライン/ETL基盤構築 ・機械学習モデルを活用した予測分析 ・AWS環境での位置情報データ分析 ・CI/CDシステム構築 ・大規模位置情報データ処理環境の設計/改善 ・関連ドキュメント作成 ★期間:随時~ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。(但し、企業都合退場は対象外) ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将...
・データエンジニアとしての経験5年以上 ・要件定義~の経験 ・大規模なデータ処理経験 ・データパイプライン/データ処理基盤構築経験 ・AWS環境での開発経験 ・Apache Spark等のビッグデータフレームワーク利用経験 ・Python/Java/SQLでの開発経験 ・Linux/Bashの利用経験 ・DB/サーバーサイド設計実装経験
以下、概要になります ・フルリモート可能です ・大手企業のデータ基盤における既存SPARKパイプラインのDatabricks移行プロジェクト ・役割:開発メンバー ・主な業務:既存SPARKパイプラインの現状調査・仕様整理、DatabricksへのETLパイプラインの移行・実装、シルバー/ゴールドレイヤーのデータ変換処理の開発・テスト、移行後の動作確認・品質担保など
・DWH/データパイプライン開発・運用経験 ・Pythonを用いたデータ処理の実務経験 ・SQLによるデータ加工・集計の実務経験 ・Apache Spark/PySparkの経験 ・Databricksの経験 ・複数名チームでのプロジェクト参画経験
- エンジニアとして東京都品川・港区で勤務し、原則リモート可、週5日稼働、報酬は600,000円〜700,000円/月単価です。
- ETLチームでPythonを用いたETLコーディングやワークフローシナリオ実装、UT作成・実施を担当します。
- 必須スキルはPython開発10年以上、Spark・Kinesis使用経験、DWH/ETL理解です。歓迎はリーダー経験、マイクロサービス・サーバレス実装理解、Pandas、AWS、RDB、OSS活用等です。
- 東京都品川・港区で原則リモート勤務、週5日稼働、月単価600,000円〜700,000円で安定した報酬が得られます。
- Python開発経験10年以上でSpark・Kinesisを使ったETL実装経験がある方、またリーダー経験やマイクロサービス・サーバレス実装理解がある方に最適です。
- ETLチームで詳細設計からコーディング、UT作成・実施まで幅広い工程を担当し、ビッグデータ環境で実務経験を積めます。
- 職種: データエンジニア、勤務地: 未定、リモート可、稼働日数: 週5日、報酬: 650,000円〜850,000円/月です。
- 移動体の地理空間データの評価・比較・調達支援を担当し、Python、AWS、Sparkを活用して大規模位置情報データの処理を進めます。
- 必須スキル: Python開発経験、AWS利用経験、Sparkによる大規模データ処理実務経験、ビッグデータ処理知識。歓迎スキル: データ分析経験。
- 一部リモート可で週5日稼働可能なため、柔軟な働き方が実現できます。
- 報酬は月額650,000円〜850,000円と高めで、経験に応じた給与が期待できます。
- Python、AWS、Sparkを駆使した大規模位置情報データ処理に携わることで、データエンジニアとしてのスキルをさらに磨けます。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
8万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
8万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。