【募集背景】 ライブ配信事業におけるYoutubeデータ取得基盤のリファクタリングおよびdbt移行を推進するための増員となります。 【作業内容】 ・StepFunctionsベースの既存バッチをk8sコンテナベース構成へ移行いたします。 ・バッチシステムからdbt部分を分離いたします。 ・既存バッチの処理フローを整理し、運用負荷軽減と可読性向上を図ります。 ・Youtubeの既存バッチの保守作業を行います。 ・新バッチの設計および開発を行います。 【求める人物像】 ・既存システムの構造を理解しながら主体的に改善提案ができる方を求めております。 ・バッチ処理やデータ基盤に関する知見を活かし、周囲と連携...
フルリモート ・Pythonでのバッチ開発経験 ・スクレイピング系の開発経験 ・dbtの開発経験 ・ETLの開発経験 ・AWSでの開発経験 ・GitHubを利用した開発経験
ライブ配信関連事業において、YouTubeデータ取得バッチ基盤のリファクタリングとdbtへの移行を担当いただきます。 主な目的: - 既存のStep FunctionsベースのバッチをKubernetesコンテナ基盤へ移行 - バッチシステムからdbtを切り離し、疎結合化を実現 - 運用負荷の軽減とコード可読性の向上 業務内容: - YouTube関連の既存バッチ保守・改善 - Step Functions配下で管理されているdbtの分離・再設計 - 既存バッチの処理フロー整理、ジョブ定義の見直し - 新バッチ（コンテナベース）開発および移行に伴うテスト・運用設定 フルリモートでの参画が可能です。
・Pythonによるバッチ開発経験 ・スクレイピングや外部API/データ取得処理の開発経験 ・dbtおよびETLパイプラインの設計・実装経験 ・AWS上での開発運用経験（例: Step Functions, ECS/EKS, Lambda, S3 などのいずれか） ・GitHubを用いたチーム開発経験（PR/コードレビュー/CIのいずれか）
下記スキルセットをお持ちの方を幅広く募集します。スキルに応じて最適な案件をご提案いたします。詳細は商談時にご説明します。 【案件例】 ・Webスクレイピングの精度改善 ・スクレイピング/AI抽出/データソース結合を含むワークフロー開発 ・LLMの評価および精度向上（複数ページ対応や未検知事象への対処など） 役割：SE 作業場所：基本フルリモート（初日のみ東京・目黒 または 大阪・北浜に出社）※地方在住も可 契約形態：準委任 商流：元請直 その他：貴社所属まで（営業支援費可）
・SQLの実務スキル ・Pythonの中上級レベルの開発スキル
大学の学費情報に関するデータ自動収集機能の開発支援案件です。 12月にPoCを実施し、1～2月に本開発を進めます。Webスクレイピングで学校の学費データを自動取得し、HTML・PDF・画像など多様なフォーマットに対してAIを用いた解析を行い、所定形式へ加工・統合します。 主な作業内容は以下の通りです。 ・Webスクレイピングの精度改善 ・スクレイピング、AI抽出、データソース結合を含むワークフローの設計・実装 ・LLMの評価および精度向上（複数ページ構成や未検知パターンへの対応強化） 役割は開発メンバーとしての参画となります。
・Pythonでの開発経験 ・RAG（Retrieval Augmented Generation）を用いた開発経験 ・OpenAIもしくは同等のLLMサービスを活用した実装経験 ・Webスクレイピングの設計・実装およびチューニング経験 ・PDF/画像からの情報抽出に関する知見（例：OCRやレイアウト解析）
【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 スクレイピングシステム開発 ・越境ECサイト運営企業にてヘッドレスブラウザを使ったスクレイピングシステムや外部決済への疎通を仲介するシステムの保守運用開発を行なっていただきます。 使用する言語はPythonとRailsで、PythonはLamda(AWS)上で使用しています。 ▼条件等 出社：月1回出社、それ以外リモート 場所：五反田駅 精算幅：140h~180h 面談回数：1回 勤務時間：10:00~19:00 【必須スキル】 ・Railsでの開発経験の合計が3年以上の方 ・40代までの方 ・Macでの開...
・Railsでの開発経験の合計が3年以上の方 ・40代までの方 ・Macでの開発に抵抗のない方
プロダクト志向を持ち、和気あいあいと開発に取り組んでくださる方を募集します。
大学院卒（情報科学・統計・機械学習領域）または同等の研究・実務経験 PythonによるAI/MLモデル開発経験（3年以上） / 教師あり学習・特徴量設計・モデル評価指標に関する深い理解 / SQLおよびDWH操作の経験（Snowflake, BigQuery等） / LangChainやRAG構成を用いたAIアプリケーションの開発経験 / Kaggle Expert以上、または同等のモデリング能力を有する方 / モデル精度向上・特徴量設計・再現実験において安定した成果を出せる方 / Kaggle Master以上または同等の実績 / AWSまたはGCPを用いたデータパイプライン・ワークフロー構築／運用の経験 / API連携／ス...
プロダクト志向を持ち、和気あいあいと開発に取り組んでくださる方を募集します。
データ基盤エンジニアリング領域での3年以上の実務経験 Snowflakeを利用したDWHの構築経験 / AWSまたはGCPを用いたデータパイプライン・ワークフロー構築／運用の経験 / スタートアップ企業でのプロダクト開発経験 / LLMアプリケーション／MLOpsの実務経験 / データガバナンス・セキュリティ領域の戦略設計・実行経験 / スクレイピング技術／外部データ連携(API等)の実務経験 / API連携／スクレイピング／オープンデータ活用によるデータ収集・統合の実務経験
伸びしろのあるセールステック業界で、データサイエンティストとして活躍することができます。
データサイエンティスト領域での3年以上の実務経験と技術的リーダーシップの経験 データの傾向分析、可視化、レポーティングの実務経験 / データ品質保証プロセスの実務経験（クレンジングやデータ結合、データ更新やリリース作業） / AWSまたはGCPを用いたデータパイプライン・ワークフロー構築／運用の経験 / API連携／スクレイピング／オープンデータ活用によるデータ収集・統合の実務経験 / 正規化などデータベースの構造変更や新規テーブル構築の経験 / スタートアップ企業でのプロダクト開発経験 / データガバナンス・セキュリティ領域の戦略設計・実行経験
【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ 【業務内容】 市場リサーチ・企業リスト作成・決裁者アプローチを一気通貫で実現するサービスを提供する企業にて、 データアーキテクトとして、スケーラブルなデータ基盤の設計・構築から運用・改善までをリードし、 事業の成長を直接的に推進していただきます。 〈必須スキル〉 ・データ基盤構築経験(3年以上) ・データ基盤エンジニアリングの経験(3年以上) ・AWSまたはGCPを用いたデータパイプライン・ワークフロー構築・運用の経験 ・API連携、スクレイピング、オープンデータ活用によるデータ収集・統合の経験 【場所】神田駅（基本...
・データ基盤構築経験(3年以上) ・データ基盤エンジニアリングの経験(3年以上) ・AWSまたはGCPを用いたデータパイプライン・ワークフロー構築・運用の経験 ・API連携、スクレイピング、オープンデータ活用によるデータ収集・統合の経験
【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 モビリティプラットフォームにおける業務効率化のためのツール構築(サクセスエンジニア) 【内容】 自社プロダクトの開発と顧客側での現場運用の「隙間」を埋めるため、エンジニアリングスキルを駆使して事業KPIを最速で向上させることがミッションとなります。具体的には、開発優先度等の制約により手動運用が発生している箇所への暫定ツールの提供、新規施策の高速プロトタイピング、さらにはワークフローの構築を通じたオペレーションの自動化・仕組み化などを担っていただく想定です。プロダクトを作るか否かの二択に縛られず、エンジニアの枠を...
・静的型付け言語を用いた開発経験3年以上 ・顧客と直接やりとりをして要件を定義したり課題を抽出したご経験 ・高いコミュニケーション能力と主体的なスタンス
某大手クラウドプラットフォーム上での開発業務（主にLambdaを活用したPython開発）をお任せします。 国内外のオープンサイトからデータを収集するクローリングやスクレイピング、データベンダーAPIからのデータ取得が主な業務です。 取得したデータのファイル編集を行い、某社内システムへの提供まで担当していただきます。 既存処理の改善やトラブルシューティングも含まれます。新しいサービスや技術を積極的に導入する環境です。
一部リモート Pythonを用いた開発経験をお持ちの方。 某大手クラウドプラットフォームでの実務経験があり、環境設計や構築に関する深い知見がある方を求めます。 特に、Lambda, StepFunctions, DynamoDBなどを用いたサーバーレス開発の経験は必須となります。
RPAのBizRoboで動いているジョブを、AWSのLambdaとPythonを用いてマイグレーションする案件です。具体的には、Seleniumを用いたスクレイピングやデータの取得・処理を行い、それをExcelに出力しGoogle Driveに格納します。また、スプレッドシートからのデータ取得と処理、書き込みも担当していただきます。 【アピールポイント】 ・PythonとAWSを使ったクラウド上での最新技術が使用可能 ・スキル見合いの報酬での長期安定案件 ・チームでのプロジェクトによりコミュニケーションスキルも向上
・Python ・AWS
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・関東の顧客先に出社可能な方 ・週5日（月〜金）で稼働可能な方 ＊副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー データの収集と収集したデータの編集が主な業務になります。 設計、製造・テスト、稼働後の改修まで一通りの経験が出来ます。 ・国内外のオープンサイトから目的データのクローリング、スクレイピング ・データベンダーのAPIからデータ取得 ・取得したデータをQUICKインフラシステムへファイル編集した上でデータ提供 ・稼働済みの処理の改修とトラブルシューティング 週5日、リモート
・Pythonでの開発経験がある（1年以上） ・それ以外のプログラム経験がある（2〜3年以上）
RPA（BizRobo）で動作中のジョブを、AWS Lambda上でPythonを使用してマイグレーションします。データのスクレイピングからExcelへの出力、Google Driveへの格納などの処理を行います。 ■ 業務内容 ・RPAのジョブをAWS Lambdaにマイグレーション ・seleniumによるデータスクレイピング ・Excelファイルへのデータ出力 ・Google Driveへのデータ格納 ・中間処理によるデータ加工と管理 【アピールポイント】 ・Python、AWS Lambdaを駆使したモダンな開発環境 ・高報酬で安定した稼働が可能 ・最新技術を用いたスキルアップのチャンス ・重要な...
・Python ・AWS
・官公庁・自治体向けシステムの要件定義、開発計画の策定、およびプロジェクト管理 ・大規模クローリングシステムの設計、分散処理、アンチスクレイピング対策の立案 ・Elasticsearch/OpenSearchやベクトルDBを用いた検索エンジンの精度改善 ・LangChainやbrowser-use等を用いた自律型AIエージェントの構築およびRAGの評価 ・ビジネスサイドやステークホルダーとの技術的折衝および仕様整理 【体制(人数/構成)】 ・エンジニア4名
官公庁または自治体向けシステムの開発・運用経験（セキュリティ制約の理解） / AI AgentまたはLLM実装（LangChain, RAG等）の実務経験
飲食店向けのWEBサービス開発および運用を担当するエンジニアを募集します。主な業務内容には、API開発、バッチ処理、機能改修、スクレイピング作業などがあります。長期にわたるプロジェクトとなるため、安定して働きたい方におすすめです。 ■ 業務内容 ・飲食店向けサービスの機能改修と新規開発 ・API開発やバッチ処理の効率化 ・データ取得のためのスクレイピングシステム開発 ・PHPフレームワークを用いたシステム運用 【アピールポイント】 ・飲食業界向けのWEBサービスに直接携われるチャンス ・最新技術を用いた開発環境 ・チームでの協力と柔軟な問題解決力を養える ・長期安定プロジェクトのため安心 ・技術者としてス...
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日（月〜金）で稼働可能な方 ＊副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー ・求人情報のクローリング、スクレイピング、解析、抽出をし提供するサーバ側サービス。 ・複数あるサービスの中でそれぞれロジックが違い、使用するフレームワークもサービスにより様々。 週5日、リモート
・Java開発での基本設計以降を一人称でご対応できる方 ・SpringBoot
AWSサービスを用いたデータ収集システムの開発にPythonエンジニアとして参画していただきます。システムの設計から稼働後のメンテナンスまでを総合的に担当します。主な業務内容には、データクローリング、スクレイピング、外部APIからのデータ取得、取得したデータの編集処理があります。 【アピールポイント】 ・基本的にリモートワークだから柔軟な働き方が可能 ・AWSを活用した最新技術に携われる ・長期プロジェクトで安定して働けるチャンス
・Python ・AWS ・Java ・Node.js ・Linux
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日（月〜金）で稼働可能な方 ＊副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー データの収集と収集したデータの編集が主な業務になります。 設計、製造・テスト、稼働後の改修まで一通りの経験が出来ます。 ・国内外のオープンサイトから目的データのクローリング、スクレイピング ・データベンダーのAPIからデータ取得 ・取得したデータをQUICKインフラシステムへファイル編集した上でデータ提供 ・稼働済みの処理の改修とトラブルシューティング 週5日、リモート
・Pythonでの開発経験がある（1年以上） ・それ以外のプログラム経験がある（2〜3年以上）
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日（月〜金）で稼働可能な方 ＊副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー 採用業務を効率化するAIプロダクトを開発中でして、 その機能の一環として求人媒体からのデータのスクレイピングを行う必要があります。 スクレイピングしたデータをcsvデータでエクスポートするかつ、定期的にスクレイピングを実行するようなプログラムを組みたいです。ログイン認証が必要なWebサービスを対象に、検索条件から抽出される候補者情報を定期的に取得、整形、保存するシステムの開発を担当いただ...
・PythonでのWebスクレイピング経験（Selenium/Playwright） ・DOM構造の理解とクローリング実務経験 ・Cookie/セッション管理、ログイン処理の自動化経験 ・データの整形・CSV出力などのETL処理
大学・大学院の学費情報をWebスクレイピングにより自動収集し、取得データ（HTML、PDF、画像など）をAIを用いて解析、フォーマット化する機能の開発。精度改善やLLMを使った分析処理、スクレイピング〜解析〜データ統合までのワークフロー構築も担当。 【技術スタック】 ・開発言語：Python ・AI技術：RAG、OpenAI（他LLMも可）
・Pythonでの開発経験 ・RAGを用いた開発経験 ・OpenAIまたは類似LLMを用いた開発経験
AWSのサーバーレス構成でPythonを用いた開発が中心となります。 主な利用サービスは、Lambda、SQS、Step Functions、Fargate、DynamoDB、RDS、S3 などです。 - 国内外のオープンサイトからの目的データのクローリングおよびスクレイピング - データベンダーのAPIからのデータ取得 - 取得データをQUICKインフラシステムへ提供するためのファイル編集・整形 - 稼働中処理の改修対応およびトラブルシューティング テレワークありの体制で、基本勤務は9:00～18:00（休憩1時間）となります。
リモート 必須スキル: - Pythonでの開発経験（1年以上） 人物・条件: - チーム内で主体的にコミュニケーションが取れる方 - 在宅での作業に適した通信環境をお持ちの方
最先端の大規模言語モデル（LLM）と人間がシームレスに協働する次世代インタラクションの研究開発を行います。人間の創造性・判断力を最大限に引き出すエージェント設計や実験設計を推進します。 主業務: ・エージェント開発におけるコーディング ・プロンプトエンジニアリング（設計・最適化） ・技術検証および検証実験の設計・実装 副業務（RAG運用支援）: ・AWS上のRAG（S3/Lambda/Glue 等）へのデータ投入 ・スクレイピング～クレンジング～整形までの投入用データ準備 面談は2回、基本はフルリモートですが、必要に応じて都内出社が発生します。期間は2025年11月から2026年3月まで（延長の可能性あり）です。
フルリモート ・LLM/NLP領域への強い関心と最新技術のキャッチアップ意欲 ・Pythonでの開発経験 ・チーム開発経験および円滑なコミュニケーション能力 ※全要素の完全一致は不要。参画後に学習しながらキャッチアップできる方を歓迎します。
最先端の大規模言語モデル（LLM）と人間がシームレスに協調する次世代システムの研究開発を行います。人の創造性・判断力を引き出す新しいインタラクションの形を探求し、エージェント開発向けのコーディング、プロンプトエンジニアリング、技術検証や実験のための実装を担当いただきます。 副業務として、自治体向けに構築済みのRAGシステムへデータ投入や投入データの準備（スクレイピング、整形含む）も一部ご対応いただきます。AWS環境上のRAG（S3/Lambda/Glueなど）に対するデータ投入や運用補助も発生します。
フルリモート ・LLMや自然言語処理領域への強い関心と、最新トレンドを自走的にキャッチアップする姿勢 ・Pythonでの開発経験 ・チーム開発の経験と円滑なコミュニケーション力 ・複雑なシステム設計や実験設計・検証に挑戦したいマインド ※全要件を満たしていなくても、キャッチアップ意欲を重視します。
【案件概要】 既存システムのエンハンス 【作業内容】 データの収集と収集したデータの編集が主な業務になります。 AWSのサーバレス構成で主にLambdaを使ったPythonでの開発が主な業務です。 利用している主なAWSサービスは、Lambda、SQS、StepFunctions、Fargate、DynamoDB、RDS、S3等 他にも新しくでた便利なサービスは積極的に活用していきます。 設計、製造・テスト、稼働後の改修まで一通りの経験が出来ます。 ・国内外のオープンサイトから目的データのクローリング、スクレイピング ・データベンダーのAPIからデータ取得 ・取得したデータをインフラシステムへファイル編集した上でデータ提供 ...
Pythonでの開発経験がある（2年以上）
不動産領域の自動送信サービス開発案件です。 受信メールの内容を解析して必要情報を抽出し、Webスクレイピングや自社API連携で追加情報を取得します。取得データを基にHTMLメールを整形・送信する機能を実装・運用いただきます。 開発者枠（アプリ/サーバーサイド）とインフラ枠（AWS）でそれぞれ募集します。長期を見据えた継続案件です。
フルリモート 〈開発者枠〉 ・Javaを用いた設計〜実装経験5年前後 ・Spring（Spring Boot 含む）の実務経験 〈インフラ枠〉 ・AWSの設計・構築経験3年以上
【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ 作業: 証券向け新規取引についての開発を担当 ・既存ツールをベースとして流用率を高めた設計および開発:7本 ・既存ツールと対象データレイアウトおよび出力帳票仕様は同一の新規開発:8本 ・機能:CCESSで画面系のデータ入力、更新、承認フロー ・設計、開発、内部テスト、内部結合テスト、UAT対応、外部結合、総合テスト、本番リリース ・下記2種類のツール開発 (1)手動運用ツール 注文伝票インポートおよび約定修正、CA約定修正/承認機能と自動運用ツールの不具合時のBCP対応処理を実現 (2)自動運用ツール 決済業務統括部の日...
・AccessVBA、ExcelVBA経験 ※要件確認~開発(設計、実装、検証)、リリースが可能なこと ・お客様とのコミュニケーション ※要件をヒアリングして整理することができること ・アジャイル的に開発を進められること ※要件や仕様が曖昧でトライ&エラーでの実装 ・お客様が勤怠を重視している事から問題ないこと
広告媒体の運用レポートを収集する自社ツール開発をお任せします。 自社の広告運用の自動化のために活用しております。 【具体的な作業内容】 ・媒体ごとに収集プログラムを実装しているが、まだ対応媒体が少ないので、対応媒体を追加する ・収集方法は、APIのある媒体はAPIを利用し、APIがない場合はスクレイピング等で行う 【媒体ごとの対応項目】 ・仕様確認 ・媒体APIの動作確認 ・Configクラスの作成 ・Fetcherクラスの作成 ・レポートの取得処理の実装 ・取得したレポートの集計処理の実装 ・レポートの送信処理の実装 ・当日分のレポートの一致の検証 ・前日分のレポートの一致の検証 ・コードレビュ...
TypeScript ・Node.jsやTypeScriptでの開発経験：2年以上
動画配信事業のデータ取得バッチ基盤をリファクタリングし、ETLツールへの移行を担当。既存のバッチシステムをコンテナ基盤へ移行し、運用負荷軽減や可読性向上を目指します。保守や処理フロー整理、新規開発も行います。
・Pythonでのバッチ開発経験 ・スクレイピング開発経験 ・ETLツールの開発経験 ・クラウド環境での開発経験 ・GitHubを利用した開発経験
ライブ配信事業における、Youtubeのデータ取得バッチ基盤リファクタリングおよびdbt移行に携わって頂きます。 目的 StepFunctionsベースの既存バッチをk8sコンテナベース構成へ移行 バッチシステムからdbt部分の分離 既存運用負荷軽減・可読性向上 業務内容 Youtubeの既存バッチの保守 StepFunction管理dbtの分離 既存バッチの処理フローの整理 新バッチ開発
・Pythonバッチ開発経験 (スクレイピング系の開発経験があれば確度が高いです) ・dbt, ETLの開発経験 ・AWSでの開発経験 ・GitHubを利用した開発経験
ライブ配信事業における、Youtubeのデータ取得バッチ基盤リファクタリングおよびdbt移行に携わって頂きます。 目的 - StepFunctionsベースの既存バッチをk8sコンテナベース構成へ移行 - バッチシステムからdbt部分の分離 - 既存運用負荷軽減・可読性向上 業務内容 - Youtubeの既存バッチの保守 - StepFunction管理dbtの分離 - 既存バッチの処理フローの整理 - 新バッチ開発
・Pythonバッチ開発経験 (スクレイピング系の開発経験があれば確度が高いです) ・dbt, ETLの開発経験 ・AWSでの開発経験 ・GitHubを利用した開発経験
案件多数！フリーランス未経験の方もOK！ インボイス未登録の方もご応募ください！ リモート案件も多数ありますが、 オンサイト作業可能な方は大歓迎です。 ■■想定作業 ・飲食店向けWebサービスの開発・運用 ・APIの設計・開発・改修対応 ・バッチ処理やスクレイピング作業 ・機能追加や既存改修の実装作業
・飲食店向けWebサービスの開発・運用 ・APIの設計・開発・改修対応 ・バッチ処理やスクレイピング作業 ・機能追加や既存改修の実装作業 - 基本週5日フルタイム作業が多いです。 - 副業希望の方はミスマッチです。
自社プロダクトにおいて、営業活動をAIで最適化するための各種モデル開発やアルゴリズム設計をご担当いただきます。 チャネル推薦や成功パターン学習、商談文書の要約・特徴抽出など、生成AI・LLM/RAGの技術を活用した複合AIモデルの構築を推進します。 ビジネスサイド・PdMと連携し、モデル設計から仮説検証、再学習の仕組み設計まで一気通貫で担っていただくポジションです。 LangChainやTransformers、Snowflake＋dbt等のモダンな技術を活用し、構造化データと生成AIを融合したプロダクト開発に関われます。 ・主な業務 - 企業・人物・ニュース・技術などのマスタ／Publicデータ基盤構築（スクレイピング、...
1. 抽象度の高い課題を構造化し、自走して推進できるPM/TechLeadレベルの能力 2. スタートアップ特有の高速環境で動けること 3. ビジネス要件からデータ構造を設計できるアーキテクト力 4. LLM（OpenAI/Gemini/Claude/Llama）と LangChain/LangGraph の活用スキル 5. Transformers・PyTorch・sklearn を用いたモデル実装力 6. RAG（Retriever設計・Embedding・Ranking・評価）の実務スキル 7. 類似企業分析や行動最適化などのレコメンド開発経験 8. MLOps（自動再学習・監視・評価）の構築経験 9. スクレイピング、...
■担当プロジェクト ・越境ECサイト運営企業にてヘッドレスブラウザを使った スクレイピングシステムや外部決済への疎通を仲介する システムの保守運用開発を行なっていただきます。 使用する言語はPythonとRailsで、PythonはLamda(AWS)上 で使用しています。
■必須スキル ・Railsでの開発経験の合計が3年以上の方 ・40代までの方 ・Macでの開発に抵抗のない方
▍通勤面：フルリモート！ ▍インボイス未登録の方OKです！ 自動化スクリプト検証作業にて、 WinActorの経験者を募集しています！ 作業内容は以下の通りです。 ◆想定作業◆ ・WinActorシナリオ設計／作成 ・スクレイピング処理の自動化ロジック検討 ・Pythonによる補助スクリプト開発 ・運用手順書・説明書の作成 ・テストおよび本番移行サポート ・その他付随する作業 他お任せしたいPJは複数ありますので、 ご希望のご条件、内容をお聞かせください！ 相談のみのご応募も歓迎です！
・週5日の実務可能な方 ・WinActorでの開発・運用経験 ・シナリオ作成および ドキュメント整備の実務経験 ・Pythonやスクレイピングの基礎知識 ◎勤務地出社可能な方優遇！◎ ※出社頻度はご相談ください！
15万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。
単価相場
スクレイピング案件を、単価相場・働き方・担当工程の観点で整理しました。求人一覧を見る前に、募集傾向と単価帯の目安を確認できます。
スクレイピング案件は、単価だけでなく担当工程、働き方、求められる周辺スキルによって条件が大きく変わります。求人一覧では、報酬レンジとあわせて開発フェーズ、リモート可否、稼働日数を確認すると、自分に合う案件を見つけやすくなります。
スクレイピング案件では、Webサイトやオープンデータ、データベンダーAPIなどから目的データを収集し、業務で使える形に整えるところまでを担う仕事が中心です。求人サイトやECサイトの情報収集、証券・不動産・飲食など各ドメインのデータ取得といった用途が見られます。
実装は「取得して終わり」ではなく、CSVやExcelへの出力、所定フォーマットへの整形、既存システムへの取り込みまで含むことが多いです。ログインが必要なサイトへの対応、定期実行の仕組み化、運用中ジョブの改修やトラブルシューティングまで求められる案件もあります。
近年は、取得対象がHTMLだけでなくPDFや画像に広がり、LLM/RAGを使って抽出・解析する流れも増えています。スクレイピング、AI抽出、データソース結合を一連のワークフローとして設計し、精度評価と改善を回していく役割が提示されることもあります。
必須として最も多く見られるのは、Pythonを用いた開発経験と、スクレイピングを含むデータ収集処理の実装力です。特に、SeleniumやPlaywrightなどのブラウザ自動化を前提に、DOM構造を理解して安定的に要素を特定できることが重視されやすい傾向があります。
また、取得したデータを扱うために、SQLやデータベースを用いた開発経験が求められる案件が見られます。単純な取得だけでなく、整形・加工して保存するETL的な処理、CSV出力やExcel出力まで含めて一人称で進められることが応募の判断材料になります。
スクレイピング対象がログイン必須のWebサービスである場合、Cookie/セッション管理やログイン処理の自動化が必須要件として明示されることがあります。加えて、チーム開発の前提として、GitHub等を用いた開発経験や、報連相を含むコミュニケーションも要件に入りやすいです。
歓迎スキルとしては、クラウド上での実行・運用を見据えたAWSの知識が挙がりやすいです。Lambdaなどのサーバーレスでの実装、Step Functions等を使った処理フローの構成、インフラ寄りではTerraformなどIaCの経験があると、対応範囲を広げやすくなります。
スクレイピング手段の幅を広げるスキルも評価されやすい傾向があります。BeautifulSoupやScrapyに加え、Playwright/Puppeteer/seleniumの使い分け、SPAへの対応に関するTypeScript/JavaScriptの知見があると、対象サイトの仕様に左右されにくくなります。
さらに、LLMやRAGを絡めたデータ抽出・評価の経験が歓迎に入る案件も見られます。OpenAI APIなどの活用、LangChain/LlamaIndex、ベクターストア、OCR等と組み合わせて「非構造データを構造化する」取り組みができると、AI活用型の案件に応募しやすくなります。
評価されやすいのは、スクレイピングをバッチ処理やデータ基盤の一部として設計し、運用まで回した経験です。定期実行の仕組み化、失敗時のリトライやエラーハンドリング、サイト構造変更に追随する保守など、継続運用を前提にした実装経験が強みになります。
また、取得データを業務システムに載せるまでの一連の工程経験があると、案件適性を示しやすいです。たとえば、API連携とスクレイピングを組み合わせた収集、データの名寄せや整形、DB格納やファイル提供、検索性を意識した加工など、後工程を見据えた設計ができるかが見られます。
上流寄りでは、要件定義や顧客との直接折衝、仕様整理の経験が評価されるポジションもあります。特に、業務効率化ツールの構築や、既存アーキテクチャを理解して改善設計を進める案件では、技術だけでなく課題抽出と合意形成を進めた実績が効いてきます。
開発言語はPythonが中心で、スクレイピングの実装ではSelenium、Playwright、BeautifulSoup、Scrapyなどが登場します。案件によってはTypeScript/JavaScriptを併用し、Electron/React/AngularやNext.jsなどフロント技術と接続して社内向けツールを作る形も見られます。
クラウドはAWSが頻出で、Lambdaを軸にSQS、Step Functions、Fargate、DynamoDB、RDS、S3、CloudWatchなどを組み合わせて運用する構成が提示されています。データ処理・基盤領域ではdbtやETL、DWH（BigQueryやSnowflakeなど）と接続する前提の案件もあります。
実務で動きやすくするには、単にツール名を知っているだけでなく、ジョブの実行単位（バッチ/ワークフロー）、データの受け渡し（DB/ファイル/API）、監視とログの置き方、CI/CD（GitHub Actions等）の位置づけを理解しておくことが有効です。
まず確認したいのは、対象サイトの種類と難易度です。ログインが必要か、SPAか、取得対象がHTML中心かPDF/画像も含むかで、必要な実装や検証の手間が大きく変わります。精度改善が主題の案件では、未検知パターンへの対応や評価・改善サイクルの有無も重要です。
次に、成果物のゴールを具体化しておくとミスマッチを避けられます。スクレイピング単体なのか、CSV/Excel出力や所定フォーマットへの加工まで含むのか、DB格納や検索基盤まで担当するのかで求められるスキルが変わります。運用中処理の改修やトラブル対応が含まれるかも確認点です。
最後に、実行環境と運用体制を見ておくと安心です。AWS Lambdaなどサーバーレス前提か、コンテナ移行（k8s/EKS等）を進めているか、CI/CDや監視の整備状況、レビュー文化やチーム人数などで立ち上がりの難易度が変わります。
求人票からは、スクレイピングが「データ収集」だけでなく、業務プロセスの自動化やプロダクト価値の源泉として扱われていることが読み取れます。求人サイトやECなどのデータ収集に加え、証券・不動産といったデータ品質が重要な領域でも継続的に需要が見られます。
また、サーバーレスやワークフロー基盤上での運用、dbt/ETLと組み合わせたデータ基盤化など、スクレイピングがシステムの一部として組み込まれる傾向があります。そのため、保守性や可読性、運用負荷軽減を目的にリファクタリングや移行を行う案件も出ています。
加えて、LLM/RAGを用いて非構造データを抽出・正規化する案件が見られ、スクレイピングとAI解析の組み合わせが広がっています。今後は、取得精度の改善や評価設計、ワークフロー全体の設計力が、スクレイピング技術と並んで価値になりやすいでしょう。
案件全体ではPython中心の募集が多い一方、Java（Spring Boot）やPHP（Laravel/CakePHP）、JavaScriptなどでスクレイピングを扱う募集も見られます。言語よりも、対象サイトに合わせた取得方式の選定や、取得後の加工・保存まで実装できるかが見られやすいです。
ログインが必要なサイトや動的ページを対象にする案件では、Selenium/Playwrightの経験が必須として書かれることがあります。DOM理解、Cookie/セッション管理、ログイン処理の自動化まで経験があると、担当できる案件の幅が広がります。
スクレイピング単体より、ETL/ELT、dbt、SQL、DWH連携など「収集したデータを使える形にして届ける」役割が求められる案件が見られます。応募時は、出力形式（CSV/Excel/DB）や加工処理、運用までの担当範囲を整理して伝えると選考が進めやすいです。
LLM活用が必須要件として提示される案件もありますが、スクレイピングやデータ加工の土台がある人を歓迎スキル側で拾う募集もあります。OpenAI APIなどの利用経験、評価と改善の進め方、PDF/画像（OCR等）を含むデータ抽出の理解があると、キャッチアップの説得材料になります。
15万件以上のフリーランス案件から一括検索
エンジニア・クリエイター・コンサルタント向けのたくさんの案件を一括検索可能です。
あなたの専門性と希望条件に最適な案件を厳選してお届け
プロフィール登録で、あなただけのカスタマイズされた案件情報を受け取れます。時間をかけずに理想の案件を見つけましょう。