・AWSデータ基盤(S3/Glue/Redshift/Lambda)の運用保守 ・障害時のログ調査・原因特定・対応 ・Lambda関数(Python)の改修、集計SQLの作成・調査 ・調査結果や対応方針の顧客向け資料作成、進捗報告 ・前任者との並走による引き継ぎ
AWS上でのデータ基盤またはバッチ処理の構築・運用経験(目安1年以上) / S3、Lambda、Glue、Redshiftのうち複数の実務経験 / PythonによるLambda関数の実装・改修経験 / SQL(RedshiftまたはPostgreSQL系)での集計クエリの作成・調査経験 / CloudWatch Logs等のログを読み、障害原因を自分で特定した経験 / 少ない稼働時間の中で、タスクの優先順位付け・進捗報告・ドキュメント作成を自律的に行えること
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 自動車販売企業の社内業務システムにて、マーケティングチームのフルスタックエンジニア(データ+インフラ領域)として各種開発を担当していただきます。あわせて、チームが自律的に課題を発見・解決できる体制づくりや開発・運用プロセスの改善にも関わっていただきます。 【業務内容】 ・AWS Glue/Amazon Athena等を用いたETLパイプラインの設計・構築 ・ログやイベントデータの収集・集約基盤の構築 ・DWH/データレイクの設計・運用 ・PrivateLink、VPC Peering等を用いたネットワーク・イン...
・AWS Glue/Amazon Athena 等を用いた ETLパイプラインの設計および構築経験 ・Amazon CloudWatch/AWS Kinesis/Fluentbit 等を活用した、ログやイベントデータの収集・集約基盤の構築経験 ・データウェアハウス(DWH)やデータレイクにおける、大量データの構造化およびクエリ最適化の経験
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 自動車販売企業の社内業務システムにて、マーケティングチームのフルスタックエンジニア(データ+フロントエンド領域)として各種開発を担当していただきます。あわせて、チームが自律的に課題を発見・解決できる体制づくりや開発・運用プロセスの改善にも関わっていただきます。 【業務内容】 ・React/Next.js/Tailwind CSSを用いたフロントエンド開発 ・AWS Glue/Amazon Athena等を用いたETLパイプラインの設計・構築 ・ログやイベントデータの収集・集約基盤の構築 ・開発手法・運用プロセス...
・AWS Glue/Amazon Athena 等を用いた ETLパイプラインの設計および構築経験 ・Amazon CloudWatch/AWS Kinesis/Fluentbit 等を活用した、ログやイベントデータの収集・集約基盤の構築経験 ・データウェアハウス(DWH)やデータレイクにおける、大量データの構造化およびクエリ最適化の経験
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 自動車販売企業の社内業務システムにて、マーケティングチームのフルスタックエンジニア(データ+バックエンド領域)として各種開発を担当していただきます。あわせて、チームが自律的に課題を発見・解決できる体制づくりや開発・運用プロセスの改善にも関わっていただきます。 【業務内容】 ・Lambda/AppSync/API Gatewayを用いたバックエンド開発 ・AWS Glue/Amazon Athena等を用いたETLパイプラインの設計・構築 ・ログやイベントデータの収集・集約基盤の構築 ・開発手法・運用プロセスの改...
・AWS Glue/Amazon Athena 等を用いた ETLパイプラインの設計および構築経験 ・Amazon CloudWatch/AWS Kinesis/Fluentbit 等を活用した、ログやイベントデータの収集・集約基盤の構築経験 ・データウェアハウス(DWH)やデータレイクにおける、大量データの構造化およびクエリ最適化の経験
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 マーケティングチームにて、データ・バックエンド・フロントエンド・インフラの各領域の開発を担当いただきます。あわせて、チームが自律的に課題発見・解決できる体制づくりや、開発手法・運用プロセスの改善にも関わっていただきます。 【業務内容】 ・データエンジニアリング:AWS Glue/Athena等を用いたETLパイプラインの設計・構築、ログ・イベントデータの収集基盤構築、DWH/データレイクのデータ構造化とクエリ最適化 ・バックエンド:AWS Lambda/AppSync/API Gatewayを用いたサーバーレス...
・GitHubの公開アカウント等、ご自身で作成したコードを提出可能な方 ・以下いずれか1つ以上の業務経験(複数領域をカバーいただく想定) ・フロントエンド:デザイン/HTML/CSS/JavaScript/クラウドサービスの利用経験3年以上、サーバーレスアーキテクチャの設計経験、Tailwindでの開発経験 ・バックエンド:AWS Lambda/AppSync/API Gatewayを用いたサーバーレス開発・運用経験、RDB・NoSQLでのデータモデル設計経験、単体テスト・統合テストのコード作成経験 ・データエンジニアリング:AWS Glue/Athena等を用いたETLパイプラインの設計・構築経験、CloudWatch/Ki...
ETLの改修案件の要件定義、設計、製造、試験 構築済みシステムへのIF追加・変更に伴う改修を行います。 参画直後はソースの修正、試験から着手いただく可能性があります。 ★期間:随時~ ★本案件の最新の状況は、担当者までお問合せ下さい。 ※当案件におきましては、直近参画期間が半年以内の案件が続いている方はお見送りとなります。(但し、企業都合退場は対象外) ※20代〜30代が中心で活気ある雰囲気です。 ※成長意欲が高く、スキルを急速に伸ばしたい方に最適 ※将来リーダーを目指す方歓迎 ★面談回数:1回(2回の可能性あり)
ETLの経験(AWS Glue尚可) ETL処理をGlueにて実現する。GlueをGUIでジョブ作成ができる SQL
・顧客の提供する各プロダクトからのデータ収集、加工・集計・可視化 ・分析結果からの将来予測
・データベースを活用したシステムの設計・開発経験(2年以上) ・AWSのサービス(AWS Glue、Quicksight など)を活用したシステム構築経験
・ETL処理の開発(設計・設計書作成・実装・単体テスト) ・ETL処理の結合テスト作業以降(結合テスト、システムテスト)
・Python3での開発経験2〜3年 ・SQLでの開発経験 ・AWS Lambda(Python3)、AWS Glue(Python Shell) ・Amazon Aurora、Amazon Redshift、S3
・エネルギー業界向け業務システムの開発 ・スクラムチーム内でのAWSを利用したETL処理、業務担当者向けWebアプリケーションの開発
・Pythonを利用したETL, Webアプリケーションの開発のご経験 ・AWS(Lambda, ECS, Glue, StepFunctions, S3, RDS, Aurora 等)を利用したETL開発のご経験
・AWSデータ基盤の構築PJにおけるリードポジション ・小規模開発チーム(5名以下)のリードとしてPJ推進 ・AWS Glueを用いたETL処理の実装 ・Terraformを用いたIaCによるインフラ構築 ・次フェーズの課題整理としてDMSによるCDC/増分取り込みの検討を想定
・小規模開発チーム(5名以下)のリード経験 ・AWSデータ基盤の実装経験(目安3年以上) ・AWS Glue ETLでの構築経験 ・Terraformを用いたIaC経験 ・Python/SQLでの開発経験
グローバル大手製造業でのプロジェクト案件。 □プロジェクト概要 ・工場/基幹システムデータのグローバル統合に向けた全社データ基盤/ガバナンス構築プロジェクトへ参画 ・目的:DX推進/AI活用を支える全社共通データ連携プラットフォームの全体像策定~ガバナンス構築まで実現 ・期待:セキュリティと利便性を両立した全社データ基盤構築の主導/伴走支援 ・役割:リードアーキテクト □業務内容 ・データ基盤全体アーキテクチャの標準化/基本設計 -現行ERP/IoTデータ等のアセスメントから、クラウド活用の全社データレイク/DWHターゲットアーキテクチャーを策定 ・データガバナンス/セキュリティルールの策定 -データオーナーシップ/品...
大手製造業/グローバル企業でのデータ基盤(Data Lake / DWH / Data Platform)の構想策定/アーキテクチャー設計経験 -Data Lake/DWHの構想~設計フェーズまでの一貫した推進経験 AWS / Azure / GCP上のデータ基盤技術に関する深い知識と設計ノウハウ -Snowflake/Databricks/BigQuery/Redshift/Glue等の具体的な導入/設計経験 製造現場IoTデータ(時系列/センサーデータ)と基幹業務データ(ERP/SCM等)のデータモデリング/統合経験 データガバナンス、セキュリティ、データ品質管理ルールの全社ガイドライン策定/定着支援経験 大阪府内への...
大手自動車流通企業のマーケティングチームにて、 各種システムの開発および運用プロセスの改善をご担当いただきます。 PoC(概念検証)を通じた新規アイデアの迅速な具現化やデータ利活用環境の構築をはじめ、 フロントエンドからデータエンジニアリング、インフラ領域まで幅広く対応し、 チームの自律的な課題解決体制づくりをご推進いただきます。 【仕事内容】 下記の業務を担っていただく想定です。 ・マーケティング基盤および各種システムの開発・運用プロセス改善 ・PoC(概念検証)を通じた新規アイデアの具現化およびデータ利活用環境の構築 ・ETLパイプラインの設計・構築およびログ・イベントデータの収集・集約基盤の構築 ・定例ミーティングやディ...
・AWS(Glue/Athena等)を用いたETLパイプラインの設計・構築経験 ・CloudWatch/Kinesis/Fluentbit等を活用したログやイベントデータの収集・集約基盤の構築経験 ・DWHやデータレイクにおける大量データの構造化・クエリ最適化の経験
■案件概要 レセコンと分包機を連携する業務支援システムのデータ分析基盤を構築します。 AWS環境下でデータパイプラインの設計からダッシュボード構築までを担当します。 ■業務内容 ・AWS Glueを用いたデータパイプラインの構築 ・PythonまたはScalaによるETL処理の開発 ・Amazon QuickSightによるダッシュボードの設計と構築 ■開発環境 AWS Glue, Python, Scala, Amazon QuickSight, Amazon Redshift, Amazon Athena
AWS Glue経験1年以上 PythonまたはScalaでのETL開発
マーケティングチームの各種開発を担当していただくだけでなく、チームメンバー同士の連携を強化、チームの自律的に課題発見・解決できる体制づくりにも関わっていただきます。 また定例ミーティングやディスカッションを通じて、担当システムの開発手法や運用プロセスの改善をともに進め、チーム全体が継続的に成長できる仕組みづくりにも寄与していただきます。
【GitHubの公開アカウントに準じたポートフォリオ、またはご自身で作成したコードが確認できるものを、応募時に添付してください。】 ・下記①~④のいずれか1つ以上の業務経験がある方 ※複数の領域をカバーしていただくことを想定しています ①フロントエンドエンジニアリング ・デザイン/HTML/CSS/javascript/クラウドサービスの利用経験3年以上 ・サーバーレスアーキテクチャの設計経験 ・tailwindでの開発経験 ②バックエンドエンジニアリング ・AWS Lambda / AWS AppSync / API Gateway を用いたサーバーレスでの開発・運用実務経験 ・Webアプリケーションにおける効率...
・マーケティングチームの各種開発を担当していただきます。 ・チームメンバー同士の連携を強化、チームの自律的に課題発見・解決できる体制づくりにも関わっていただきます。 ・定例ミーティングやディスカッションを通じて、担当システムの開発手法や運用プロセスの改善をともに進め、 チーム全体が継続的に成長できる仕組みづくりにも寄与していただきます。
・AWS Glue/Amazon Athena 等を用いた ETLパイプラインの設計および構築経験 ・Amazon CloudWatch/AWS Kinesis/Fluentbit 等を活用した、ログやイベントデータの収集・集約基盤の構築経験 ・データウェアハウス(DWH)やデータレイクにおける、大量データの構造化およびクエリ最適化の経験
・小売業向け基幹システム刷新に伴う管理会計DB基盤の再構築 ・現行稼働している情報系DB基盤をデータモデルから整理しなおし、AWS基盤(S3、Redshift、Glue)に新規構築
・AWS(S3、Redshift、Glue)
・Linuxサーバの設計、構築および操作経験(LinuC2レベル相当) ・仮想化基盤(VMware、OpenStack、Hyper-V等)のいずれかの実務経験 ・AWS環境でのシステム設計、構築経験 ・RDBMS(PostgreSQL、MySQL等)の設計、運用経験 【案件概要】 通信事業者向けネットワーク設備の運用監視システムおよびデータ分析基盤の構築案件です。 アクセスNW、伝送系NW、コアNW、IPコアNWを対象に、AWS上でネットワーク構成管理やアラーム相関分析基盤を構築します。 Amazon Neptune、RDS、Snowflake、OpenSearchなどを活用し、データ統合や障害分析、監視情報の可視化を担当しま...
ネットワークエンジニア ・Linuxサーバの設計、構築および操作経験(LinuC2レベル相当) ・仮想化基盤(VMware、OpenStack、Hyper-V等)のいずれかの実務経験 ・AWS環境でのシステム設計、構築経験 ・RDBMS(PostgreSQL、MySQL等)の設計、運用経験
・Pythonを用いた開発経験 ・PySparkを用いたデータ加工・処理の実装経験 ・AWS環境でのシステム開発経験 ・詳細設計から製造、テストまで一貫して対応した経験 【案件概要】 金融機関およびグループ企業に分散している信用リスクシステムを統合し、AWS上へ再構築・移行する案件です。 既存のSAS資産をAWS GlueやPython、PySparkを用いて再構築します。 詳細設計から実装、テスト設計・実施まで幅広く担当していただきます。 データ分析システムの最適化を推進し、Shellスクリプトによる補助作業にも携わります。 【作業内容】 ・信用リスクシステムの詳細設計 ・AWS Glueを利用したシステムの製造・再構築 ...
Python(Web開発系) ・Pythonを用いた開発経験 ・PySparkを用いたデータ加工・処理の実装経験 ・AWS環境でのシステム開発経験 ・詳細設計から製造、テストまで一貫して対応した経験
・データ連携基盤案件におけるETLやDWHなどのバッチ側システム開発経験 ・Pythonでの開発経験 ・ジョブ設計やジョブネット設計などの開発経験 ・マテリアライズドビュー(Materialized View)を利用したSQL作成経験 【案件概要】 カード会社向けのデータ連携基盤システム更改プロジェクトに参画していただきます。 設計工程から携わり、SnowflakeやAWS Glueを活用したデータ連携処理の設計・開発を担当します。 PythonやSQLなどを用いたプログラミングや各種テストを通じて、システムの品質向上を推進します。 上位チームと連携しながら、データ連携基盤の安定稼働に向けた開発業務を進めていただきます。 【...
データ分析系(Python/SQL/R/BI) ・データ連携基盤案件におけるETLやDWHなどのバッチ側システム開発経験 ・Pythonでの開発経験 ・ジョブ設計やジョブネット設計などの開発経験 ・マテリアライズドビュー(Materialized View)を利用したSQL作成経験
■ データ基盤の設計・構築・運用 ・Snowflakeを中核とした全社データ基盤の設計・開発・運用 ・プロダクトDBや各種SaaSからのデータ取り込みパイプラインの設計・構築 ・dbtなどを用いた変換レイヤーの設計と、データモデリング ・ロール・権限設計や、個人情報カラムのマスキングなど、データガバナンスの設計・実装 ・データ品質のテスト・監視・アラートの仕組みづくりと、障害対応の運用設計 ・Snowflakeのコスト監視と最適化(ウェアハウス設計、リソースモニターなど) ・TerraformなどによるSnowflakeリソースのコード管理 ・経営・営業・マーケティング向けのBI・ダッシュボード提供基盤の整備 ■ 技術リード ...
マッチした場合、1年以内に正社員転換いただける方 / SQL、Python(またはそれに準ずる言語)を用いたデータパイプライン(ETL/ELT)の設計・構築経験(3年以上目安) / データモデリングの実務経験(自ら主導して設計できること) / 本番環境でのデータパイプライン・データ基盤の運用経験(監視、障害対応、パフォーマンス改善など) / 複雑なビジネス要件をデータアーキテクチャに落とし込み、プロジェクトを推進した経験
【20代、30代が活躍中!】 ※週5日〜OKの案件です! ※実務経験1年以上お持ちの方が対象の案件です! ▼概要 複数のAWSアカウントに散在するEC2の脆弱性管理を1つに集約するセキュリティ基盤について、設計から構築・引き渡しまでを担当する案件です。 ・AWS Organizations連携(Systems Manager、Inspector、Security Hubの信頼されたアクセス有効化、委任管理者アカウント登録) ・Host Managementの展開(SSM Quick SetupのOrg展開、SSM Agent自動更新、インベントリ収集、Resource Data Sync配布) ・集約基盤の構築(中央S3バケ...
・AWS Organizationsを使ったマルチアカウント構成の設計・構築経験(委任管理者、信頼されたアクセス、SCPの理解) ・AWS Systems Managerの実務経験(Inventory、Patch Manager、Run Command、Automationのいずれかを本番運用した経験) ・TerraformでAWSリソースを構築・運用した経験2年以上(モジュール分割、複数アカウントへの適用、state管理) ・IAMとS3バケットポリシー、KMSキーポリシーをクロスアカウントで正確に書ける方 ・Linuxサーバーのパッケージ管理・脆弱性対応の経験(yum/apt、CVEとパッチの関係、Agentのトラブルシュ...
デジタルコンテンツやライブ配信事業をグローバルに展開する企業にて、セキュリティ基盤の設計・構築業務をお任せいたします。 主に以下の業務をご担当いただきます。 ・複数アカウントに分散したサーバーの脆弱性管理を集約するセキュリティ基盤の設計・構築・引き渡し ・管理サービス群の連携(信頼されたアクセス有効化と委任管理者登録) ・ホスト管理の展開(自動更新、インベントリ収集、データ同期配布等) ・集約基盤の構築(中央ストレージ、データ連携・分析サービスのDBと定型クエリ作成) ・セキュリティ監視・評価ツールの設定(新規アカウント自動有効化、スキャン設定、イベント通知のチャットツール連携) ・パッチ適用のポリシー配布、緊急...
AWS ・AWS Organizationsを使ったマルチアカウント構成の設計・構築経験(委任管理者、信頼されたアクセス、SCPの理解) ・AWS Systems Managerの実務経験(Inventory、Patch Manager、Run Command、Automationのいずれか本番運用経験) ・TerraformでAWSリソースを構築・運用した経験2年以上(モジュール分割、複数アカウント適用、state管理) ・IAMとS3バケットポリシー、KMSキーポリシーをクロスアカウントで正確に記述できること ・Linuxサーバーのパッケージ管理・脆弱性対応経験(yum/apt、CVEとパッチの関係、Agentの...
薬局向けサービスのデータ分析基盤において、分析用データの各開発チーム・事業部への提供、 基盤改修、およびチームリード業務をご担当いただきます。 優先度整理や事業部調整、タスクの見積り・スケジュール化、レビューを通じた品質担保に加え、 Athena(Iceberg)やGlue等を活用したデータ基盤構築・性能改善を牽引していただく想定です。 【仕事内容】 下記の業務を担っていただく想定です。 ・事業部および関連チームとの優先度整理/仕様・時期の調整業務 ・タスクの見積り/スケジュール化および進捗管理 ・チームメンバーへの作業分解/タスク割り振り/レビュー対応 ・既存Lambda処理の解析および分析用Lambdaの作成/改修業務 ・...
・データ分析基盤またはDWHの実務経験(Athena/BigQuery/Redshift/Snowflake等、目安1年以上) ・Amazon Athenaの実務経験 ・SQLを用いた集計基盤の設計/移行実務経験(SQL開発経験目安3年以上) ・複雑なJOINを含む集計SQLの読解/集計ロジック妥当性判断/性能改善経験 ・3名前後規模のチームに対する作業分解/見積り/スケジュール管理/レビュー等のリード経験 ・事業部等の利用部門との仕様/優先度/スケジュールの調整経験 ・遅延/割り込み発生時のタスク再配分およびスコープ調整によるリカバリー経験 ・Gitを用いたチーム開発経験(Pull Requestベースでのレビュー経験)
大手エンターテインメント企業のマルチアカウント環境において、 EC2脆弱性管理を集約するセキュリティ基盤の設計から構築・引き渡しまでを担当していただきます。 【仕事内容】 下記の業務を担っていただく想定です。 ・AWS Organizations連携(委任管理者登録、信頼されたアクセス有効化等)業務 ・Host Managementの展開(SSM Quick Setup等のOrg展開、インベントリ収集等)業務 ・集約基盤の構築(S3、Glueクローラ、Athenaデータベースおよび定型クエリ作成)業務 ・InspectorおよびSecurity Hubの設定・Slack通知連携業務 ・Patch Manager等のパッチ適用方...
・AWS Organizationsを用いたマルチアカウント構成の設計・構築経験(委任管理者、信頼されたアクセス、SCPの理解) ・AWS Systems Managerの本番運用経験(Inventory、Patch Manager、Run Command、Automationのいずれか) ・Terraformを用いたAWSリソースの構築・運用経験(2年以上) ・クロスアカウントにおけるIAM、S3バケットポリシー、KMSキーポリシーの作成スキル ・Linuxサーバーのパッケージ管理および脆弱性対応経験(yum/apt、CVEとパッチの関係、Agentトラブルシューティング) ・Pull Request説明や手順書等のドキュメ...
当社が開発・運用している、マッチングサービス運営企業向けのレコメンドシステム(会員へのおすすめ相手の表示)を中心に担当していただきます。 * マッチングサービス向けレコメンドエンジン:既存モデルの精度改善と、おすすめを表示する画面の拡大(新レコメンドモデル開発を含む)。A/B テストで効果を確かめながら、改善を繰り返していく段階です。 * レコメンド以外の機械学習・データ分析案件:予測、スコアリング、マーケティング分析など(各業界のクライアント/社内プロダクト) 当面はレコメンド案件が中心(目安7割)で、残りの稼働でその他の案件に参画していただく想定です。参画初期は前任者と並走して引き継ぎ、その後は担当者として機械学習モ...
Python ・機械学習の実務経験(目安3年以上) ・論文に基づいて実装を行った経験がある、業務で求められていることに対してサーベイを行った経験がある方は3年以下でも可 ・統計の基礎知識(仮説検定・サンプリング等を A/B テストの評価に自分で使うことができる) ・モデルを比較検討し、選定理由と改善案を自分で説明できること ・Python でのアプリケーション/API 開発経験 ・クラウド(AWS 推奨)・インフラを含め、システムを一通り自分で扱える経験 ・Claude Code 等を利用した AI 駆動開発の経験 ・Git を用いたチーム開発、コードレビューの経験
■案件概要 公的データベースと連携する医療情報二次利用向けデータ連携基盤の設計・構築をご支援いただきます。 AWS環境にて大量データを扱うデータレイクやETL/ELTパイプラインの構築を担当します。 ■業務内容 ・AWS環境におけるデータレイクの設計・構築・運用を行う。 ・ETL/ELTパイプラインの設計および実装を行う。 ・各種データベースからのデータ収集・加工・提供を行う。 ・データモデリングおよびパフォーマンス最適化を行う。 ■開発環境 AWS, Amazon Redshift, AWS Glue, ETL/ELT, Delta Lake, Apache Iceberg, Apache Hudi
データレイクの設計・構築・運用経験 AWSの利用経験
・SnowflakeやAWS(S3, Glue, Athena等)を活用したデータパイプラインおよびDWHの構築・運用 ・dbt等を用いたデータモデリング・データテスト自動化およびCI/CD環境の構築 ・日次バッチ処理設計、エラー検知・リカバリ手順策定、データ品質監視などのDataOps体制の確立 ・Python/SQLを用いたデータ加工・クレンジングおよび運用効率化プログラムの開発 【体制(人数/構成)】 1人目のシニアデータエンジニアおよび先方担当者と連携して進める想定。分析フェーズに入れば役員も参加予定。
SnowflakeまたはAWSを用いたデータパイプライン構築・DWH構築の実務経験 / SQLおよびPythonを用いた高度なデータ抽出・加工・バッチ処理の実装経験 / データ品質テスト、CI/CD環境構築、エラー監視などDataOps/運用自動化を自走して推進した経験
AWSを活用したデータ分析基盤の構築プロジェクト。データレイク設計からデータ統合、クレンジング、名寄せ、ETL/ELT開発までを幅広く担当。AWS Glue等を用いたETL/ELTパイプラインの開発および運用設計。Amazon SageMaker Unified Studio等を活用した分析環境・データ利活用基盤の整備。
・データレイク設計の実務実績 ・データ統合、およびデータ品質改善(データクレンジング)の実務経験 ・名寄せ(MDM)に関する設計・開発実績 ・ETL/ELTパイプラインの開発実績
製薬業向けデータプラットフォームの構築・運用プロジェクトにて、シニアデータエンジニアとしてAWS・Snowflakeを活用したデータパイプラインの設計・開発・最適化を担当。SQLを用いた大規模データ処理、データパイプラインの構築・運用、システム間データ連携の実現。従来型データウェアハウスとモダンデータスタック双方の知見を活かしながらデータ活用基盤の高度化を推進。関係者と連携しながらデータ統合及びデータ活用基盤の構築を推進。
・データエンジニアリング分野で6~10年の実務経験 ・Snowflake、DBT、Apache Airflow/MWAAの実践経験3年以上 ・本番環境向けデータパイプラインの設計・開発・導入・運用実績 ・英語ビジネスレベル以上 ・Snowflakeの各種機能活用、パフォーマンス・コスト最適化、セキュリティ管理実務経験 ・DBTのプロジェクト開発・保守経験 ・SQL/Oracleの高度な実務スキル ・Pythonの高レベルスキル ・MWAA/Apache AirflowのDAG開発、依存関係管理、トラブルシューティング実務経験 ・AWSデータ領域サービスの実務知識
■案件概要 調剤薬局向けシステムのETLツール運用保守および改修開発を担当します。 AWS環境を活用し、多岐にわたる言語を用いた開発を行います。 ■業務内容 ・ExcelマクロやPowerShellを用いた業務自動化。 ・JavaやPythonによるシステム改修および保守。 ・Node.jsを用いた機能追加および改修。 ・AWS各サービスを用いたETLツールの運用。 ■開発環境 Java, Python, Node.js, AWS(EC2, S3, RDS, Lambda, Glue), Excelマクロ, PowerShell
AWS設計・構築経験 Java開発経験
製薬業向けデータプラットフォームの構築・運用プロジェクトにおいて、シニアデータエンジニアとしてAWS・Snowflakeを活用したデータパイプラインの設計・開発・最適化を担当。SQLを用いた大規模データ処理、データパイプラインの構築・運用、システム間データ連携の実現。従来型データウェアハウスとモダンデータスタック双方の知見を活かしながらデータ活用基盤の高度化を推進。関係者と連携しながらデータ統合およびデータ活用基盤の構築を推進。
・データエンジニアリング分野で6~10年の実務経験 ・Snowflake、DBT、Apache Airflow/MWAAの実践経験3年以上 ・本番環境向けデータパイプラインの設計・開発・導入・運用実績 ・英語:ビジネスレベル以上(会話・読み書き) ・Snowflakeの各種機能活用、パフォーマンス・コスト最適化、セキュリティ管理の実務経験 ・DBTのプロジェクト開発・保守経験 ・SQL / Oracleの高度な実務スキル ・Pythonの高レベルなスキル ・MWAA / Apache Airflowの実務経験 ・AWSのデータ領域サービスの実務知識
【企業/サービス/プロダクトの概要】 ・スタートアップで、ビッグデータや生成AIを活用した事業を展開し、大手企業を中心にデータ利活用やDXを支援 ・クレジットカードデータ、POSデータ、位置情報データなど多様なオルタナティブデータを活用し、意思決定支援やデータ基盤構築、生成AI開発を行う 【任せたい作業内容】 ・法人属性・活動データのETLパイプライン構築・運用・改善 ・LLM等を活用した非構造化データ(PDF・HTML)の抽出・構造化 ・新しいデータソースの品質・構造の把握(データ探索・EDA) ・クレンジング・名寄せロジックの設計・実装・精度改善 【案件のアピールポイント】 ・最新の生成AIやクラウド技術...
Python ・Pythonを用いた開発・運用経験 ・AWSでのクラウドインフラ開発・運用経験 ・GitHub、Terraformの経験
・既存サービスの新規開発及び機能拡充、性能改善 ・健康経営SaaSのプロダクト開発 ・マイクロサービス間連携を実現するAPIの新規開発、機能拡充、性能改善 ・AWSを活用したマイクロサービス化の推進、Glueなどを活用した大規模データ処理 ・業務委託(フリーランス)、フルリモート、精算幅140〜180時間
・サーバーサイド開発の実務でのご経験(言語問わず3年程度) ・設計からプロジェクトに深く携わったご経験 ・GitHubを用いた開発のご経験 ・テーブルの設計のご経験 ・SQLレベルのパフォーマンスチューニングのご経験 ・コンテナ設計のご経験または知見
検索求人アプリのバックエンド開発に携わって頂きます。 ・ScalaからGoへのリプレイス ・プロダクトオーナーやデザイナー、フロントエンドエンジニアと密に連携しながら、 要件定義、設計、開発、運用まで、一気通貫で実施します。 ・機能開発だけでなく、リファクタリングや依存ライブラリの更新、パ フォーマンス改善等の様々な保守運用開発も実施します。 <環境> フロントエンド:TypeScript, Vue.js, Nuxt.js, Jest, Cypress, Storybook サーバーサイド:Scala, Play Framework, ZIO, Flink, Akka 開発ツール:Github, Slack, Visual S...
・Scala/Java/Kotlin何らかでのアプリケーション開発の実務経験(1年以上) ・スクラム開発の実務経験(1年以上)
勘定系参照元帳のオフロード基盤をAWS上で構築いただきます。 更新ログ(CDC)の抽出・転送・加工・反映の仕組み化、ログ取得〜参照APIまでの設計・提供、AWSを活用したアーキテクチャ設計・実装が中心です。 Kafkaなどを用いたストリーム処理、参照APIの方式設計(スキーマ設計/性能設計/冗長化)、セキュリティおよび非機能設計を踏まえた実装を担当します。 将来的には統合DBや周辺系、外部チャネルへの段階的拡張(準リアル連携)も想定しています。
・AWSサービスに関する深い知見(設計/アーキテクチャレベル) ・CDC/ログ抽出やデータ連携基盤の方式策定経験 ・Kafka等のストリーム処理の実務経験 ・参照APIの方式設計(スキーマ設計/性能設計/冗長化)の実務経験 ・セキュリティ設計、非機能設計の知見と実装経験
・各種サービスのマーケティングオートメーション実現に向けたプロダクト統合基盤開発 ・内製アドサーバー/メルマガ基盤/お知らせ通知の開発運用保守、訴求を促すコンテンツ配信の新規機能追加 ・ユーザーデータを利用したセグメント配信を実現するための開発運用 ・内製アドサーバー、メルマガ基盤、お知らせ通知等を統合するマーケティングオートメーションの仕組み化、配信基盤・管理画面・トラッキング基盤の新規開発 ・一部、R18系コンテンツに業務上触れる機会あり
・Goによる中規模以上のWebアプリケーション開発運用経験 3年程度 ・AWS or GCPを使用した開発経験 3年程度 (サービス特性に理解があり機能追加におけるアーキテクチャ選定から開発・運用/保守が可能なこと) ・エンジニア以外の職種との折衝経験
大手金融系企業にて、AWS を活用したデータ分析基盤構築プロジェクトに参画いただきます。 S3 ベースのストレージ設計から Glue によるETL処理の構築、Athena や Redshift でのクエリ最適化まで一貫してご担当いただきます。 セキュリティ要件が高いため、IAM設計や監査ログ設計などにも関与いただくポジションです。 業務部門や他ベンダーとの調整も発生するため、自走力やドキュメント力も重視されます。
AWS - AWS を用いた分析基盤構築経験 - Python または PySpark でのETL処理経験 - IAMやデータセキュリティに関する理解
・AWS環境でのデータ分析基盤の設計、構築または運用経験 ・ETL処理やデータ連携(I/F)の設計、開発経験 ・データ分析基盤における要件整理から開発、リリースまでの推進経験 ・関係者との調整や開発チームのリード経験 【案件概要】 大手食品メーカーが展開するECサイト等のBtoCサービスから得られるデータを集約する、データ分析基盤システムに関わる案件です。 AWS上に構築されたデータ分析基盤に対し、I/FおよびETL周辺のアプリケーション開発および運用を担当します。 チーム体制は5名規模で、ETL周辺の開発とデータ基盤の構築・運用を主に担っています。 新たな分析対象となるサービス追加に向け、要件整理から開発・リリースまでを主導...
クラウドエンジニア(AWS) ・AWS環境でのデータ分析基盤の設計、構築または運用経験 ・ETL処理やデータ連携(I/F)の設計、開発経験 ・データ分析基盤における要件整理から開発、リリースまでの推進経験 ・関係者との調整や開発チームのリード経験
・SQL実装経験(サブクエリ、外部結合を用いたクエリ構築) ・Pythonデータフレームを用いた開発経験 ・BIツールの開発または運用経験 ・AWS基本知識(S3,IAM等) 【案件概要】 メーカーのデータ利活用基盤を対象とした運用保守支援案件です。 既存のデータ利活用基盤の安定稼働に向けた運用保守や改善対応を担当していただきます。 業務要件に応じたダッシュボードの改修を行い、データの可視化や活用を支援します。 また、データ加工・編集プログラムの開発にも携わっていただきます。 【作業内容】 ・データ利活用基盤の運用・保守対応 ・既存システムの安定稼働に向けた改善対応 ・BIツール等を用いたダッシュボードの改修 ・データ加工・...
データ分析系(Python/SQL/R/BI) ・SQL実装経験(サブクエリ、外部結合を用いたクエリ構築) ・Pythonデータフレームを用いた開発経験 ・BIツールの開発または運用経験 ・AWS基本知識(S3,IAM等)
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
43件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
インディバースフリーランスであなたにピッタリの
フリーランス案件が見つかる
3万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。