フルリモート × Apache Sparkの業務委託案件・フリーランス求人一覧｜ページ4

薬局業界向けの各プロダクトのバックエンド開発案件/Python/フルリモート

各プロダクトのバックエンド開発を行って頂きます。 AWSのマネージドサービスをフル活用しながら将来の事業の変化に合わせた技術の選定、設計、実装を進めます。 サーバーレス化、一部機能のマイクロサービス化、開発効率やスケーラビリティなども考慮しつつ、 いかに早く効率的にデリバリーしてユーザに使って...

・汎用的な高いプログラミング能力 ・AWS / GCP / Azureなどのクラウドサービスでの開発経験 ・RDBMS / NoSQLの知識・設計の経験 ・Webアプリケーションでのセキュリティ知識・運用・経験 ・CI/CD、ログ収集、監視などのDevOpsの経験 ・Infrastructur...

【AWS/フルリモート(新浦安)】ライブ配信サービスのインフラエンジニア募集

【仕事内容】 Q&Aに特化したライブ配信アプリを開発しております。 インフラエンジニアとしてアプリの開発に加わっていただけるメンバーを募集しております。具体的にはライブ配信アプリのインフラ環境の設計、構築、運用をお任せします。 ■チーム体制 ・PdM：1名 ・バックエンドエンジニア：2名 ・...

・AWSやGCPなどのクラウド環境を使ったアーキテクチャ設計、インフラ設計、アプリケーション設計、運用（実務経験2年以上） ・工程一連の実務経験をお持ちであること ・L2/L3の基本的なネットワーク理解 ・HTTPS, DNSなどの基本的なプロトコル理解 ・Gitによるコード管理の経験

【Python/フルリモート可能】【業務委託（準委任）】Saasプロダクトデータ基盤構築の案件・求人

在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。 【開発環境】 ・開発言語：Python、SQL ・DB:Aurora(...

・Webシステム設計～開発経験5年以上ある方 ・Python開発経験2年以上ある方 ・Sparkなどの分散処理システムの経験2年以上ある方 ・SQLの実装経験（基本的なDDL、DMLに加え、結合、集計、集合、case文、Window関数などを理解している方） ・データ基盤の構築経験ある...

調剤薬局向けSaasサービスのデータエンジニア

・調剤薬局向けSaasサービスのデータエンジニアとしてETL/ELT処理開発、DWH構築などのデータ基盤開発を行って頂きます。 ・具体的にはDatabricks、Airflow、AWS Glueを利用したデータパイプラインの開発・運用や Apache Sparkを利用したETL処理の開発を...

・サーバーサイドのアプリケーション開発のご経験 ・クラウドサービスを利用したご経験 ・データレイク、データウェアハウスの設計・構築・運用のご経験 ・ETL/ELTなどのデータワークフロー管理ツールの開発・運用のご経験

データ分析基盤開発

■案件名 データ分析基盤開発 社内データ分析基盤全般の開発・保守・運用 →Python/Shell/Rubyで開発されているバッチ系システムが主 ・データレイクへの取り込み ・中間テーブル生成 →追加機能開発 / 不具合調査・修正 / 社内ユーザーからの問合せ対応 ・社内ユーザ...

■必須スキル ・Pythonでのプログラミング経験3年以上 ・Shell Script を使ったバッチ処理作成経験 ・SQLでクエリが書ける ・git/GitHubの利用や、チケット管理 (JIRA, backlog等) での開発経験 ・クラウド環境のDWH利用経験 (Redshif...

【Python/AWS/フルリモート可能】【業務委託（準委任）】調剤薬局向けサービス管理ツールの案件・求人

◆業務概要 ・RDBのデータベース設計 ・GlueJobでPythonを利用したETL処理の設計・開発 ・APIGateway、Lambdaを利用したAPI開発 調剤薬局向けサービスを複数提供している企業にてサービスを総括的に管理する管理コンソールの開発業務をご担当頂きます。 管理コ...

フルリモート可能 ・Pythonの利用経験(基本設計～テスト) ・AWSの各サービスの運用経験 ・DWH(データウェアハウス)及び、データマート向けのETLジョブ開発

フルリモート【Python/AWS/GCP】自社データインフラのデータ移行作業

・某ITメガベンチャーにて自社データインフラグループのデータ移行作業を担当頂きます。 1. AWSのデータレイク(S3+Glue data catalog) → BigQueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) (2については応募者の意向、能力...

・AWS上で動作するアプリケーションの開発/保守経験2～3年程 →AWSコンソール等を利用しシステムログ/アプリケーションログから課題発見/解決した経験があれば年数不問

【AWS/フルリモート可能】【業務委託（準委任）】エンドユーザー向けAWS ETL環境の設計レビュー・改善・実装・メンテナンスの案件・求人

既存のAWS　ETL環境の調査改善 ・メンテ作業の手順化、運用作業（テーブル追加、カラム変更程度） ※対象環境は、ミッションクリティカルではないデータ処理基盤となる上位にて他PJへのスライド案件も御紹介可能で御座います。 【日本語ネイティブの方、活躍中！】 【20代・30代・40代、活...

(1) AWSの設計・開発経験(以下利用想定サービス) RDS(MySQL) DMS Glue（Apache Spark） DynamoDB Redshift

フルリモート/Python/Hive/Bigqeryデータ基盤整備

業務内容」 1. AWSのデータレイク(S3+Glue data catalog)からBigqueryへのデータ移行作業 2. GCPデータ基盤の整備(ワークフローエンジン導入等) (2については本人の意向、能力等を鑑みて判断とさせてください) 開発環境 [言語] Python, Hive,...

求める能力／スキル 【必須スキル】 AWS上で動作するアプリケーションの開発/保守経験：2～3年 ┗AWSコンソール等を利用しシステムログ/アプリケーションログから課題発見・解決をした経験