Hadoopの業務委託案件・フリーランス求人一覧｜ページ7

PythonやPHPを用いた大手テレビ局のデータ収集/分析システムの開発案件

大手テレビ局の大規模データを処理するためのクラウドインフラ・アプリケーションソフトの構築から、 視聴者データとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属して頂きます。 今回は、ビッグデータ基盤システムの構築、開発、保守や、 収集データを基にした、社内外(双方)に向けた分析ツールの開発、 その他、社外製品である機会学習システムを内製化し再構築を行ったりと幅広く開発チームを展開している中で、 適正に合わせたチームに参画予定となっております。 アドテクやクラウド、データ収集／分析関連の最新技術を学び、経験することができ、 かつテレビ局特有の高アクセス環境で技術的なチャレンジができる現場です。

・Python、PHPのいずれかの開発経験2年程度 ・SQLを使ったDBプログラミングの開発経験 ・AWS等のパブリッククラウドを利用したサービス開発・運用経験 ・Gitなどのソースコード管理ツールの使用経験

データエンジニア｜データプラットフォーム開発

社内/社外のデータを利用したプロジェクトにてプロジェクト内での課題の把握と必要な作業の洗い出し、 実作業としてデータ加工、データパイプライン/ワークフローの作成、ETL処理、 また定期実行される処理の監視や適切な復旧業務を行っていただきます。 ※実際の作業としては以下の内容を想定しております。 ・社内に蓄積されているデータとそれを利用する環境の状況整理 ・データを用いたプロジェクトにおける課題の把握 ・アドホックなデータ抽出作業/データ加工処理 ・データパイプラインの構築や行われる処理の自動化 ・ETL処理のワークフロー化、およびその作業のシステム的な監視の構築

・SQLに関する基本的な知識 ・複数のRDBMSを扱った開発経験 ・webサービスやプロダクトのデータを用いた抽出業務やデータ加工処理の経験 ・プログラミング言語を利用したアプリケーション開発経験 ・パブリッククラウドを利用した開発経験

大手通信事業者データ集積基盤方式検討案件

■案件：大手通信事業者データ集積基盤方式検討案件 ■概要： 大手通信業が地域創生を目的とした地方自治体向けにDataLake基盤を構築し、 集積した情報を分析するシステムの方式検討を行っております。 現在、医療系/映像系のサービスに対するPoCとして基盤を構築する想定です。 ■キーワード： ・Azure(AzureStack),Hadoop,MySQL,Docker/K8S,AWS,Spark ・Cisco,Catalyst,YAMAHA,Fortigate ■期間：8月～長期 ■場所：初台(当面は在宅) ■人数：1名 ■単価：65万前後 ■面談：1回 ■精算：あり

■スキル： <必須> ・Hadoopの設計/構築経験 ・方式検討の上流工程スキル ＜尚可＞ ・Azureの設計/構築経験 ・Docker/K8Sの知見

BIツール開発、既存DWH基盤の保守業務

tableauを使用して、セルフサービスBIツールの開発～保守業務までを行っていただ きます。 また、既存DWH基盤での保守業務もございますので、スキルに合わせて業務をお任せ いたします。 (DWHで使用しているアーキテクチャはhadoop) DB周りの運用保守経験があると確度高めになります。

・tableauのご経験 ・hadoopのご経験 ・コミュニケーションに長けている方 ・最先端技術への調査力・キャッチアップ力がある方 ・データサイエンティストに興味を持っている方 ・新しい技術を学ぶ意欲のある方 ※上記全てのスキルに当てはまらなくても問題御座いません。

分析基盤クラウド構築案件

オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。 データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。 クラウド環境：AWS

SQL/データベースに精通していること ETLの開発経験 Linuxサーバ構築経験 SparkやHadoopのような分散処理システムの経験

システム開発エンジニア（ビッグデータ基盤システム担当）

【業務内容】 主に大規模データを処理するためのクラウドインフラ・アプリケーションソフトの構築から、 オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。 【身につく経験】 ・アドテクやクラウド、データ収集／分析関連の最新技術を学び、経験することができる。 ・テレビ局特有の高アクセス環境で技術的なチャレンジができる。 【求める人物像】 ・エンタメ企業で働きたい、テレビが好きな方 ・新...

【必須スキル】 ・アプリケーション開発経験（＊実務3年以上としてますが、相当するスキルがあれば検討可なのでその旨ご記載ください。） ・SQLを使ったDBプログラミングの開発経験 ・Python、PHP、JAVA、Golangのいずれかの開発経験（＊実務問わず1年以上） ・AWS等のパブリッククラウドを利用したサービス開発・運用経験 ・Gitなどのソースコード管理ツールの使用経験

ビッグデータ基盤システムの構築、開発、保守

・主に大規模データを処理するためのクラウドインフラ ・アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ・インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。

・アプリケーション開発経験3年以上 ・SQLを使ったDBプログラミングの開発経験 ・Python、PHP、JAVA、Golangのいずれかの開発経験1年以上 ・AWS等のパブリッククラウドを利用したサービス開発・運用経験 ・Gitなどのソースコード管理ツールの使用経験

メディアデータを収集したDMP活用、様々なアルゴリズムの開発

概要 国内メディアのデータを収集したDMPをを活用して、様々な貢献価値につながるアルゴリズムの開発の実施を行う 業務目的 施策で使われるモデルやアルゴリズムを実装し、運用すること。 部門内のインフラエンジニア・アプリケーションエンジニアと協働して、本番システムを開発・運用すること。 プロジェクト例 ● 横断データを活用した、カスタマーのライフイベントタイミング予測 ● カスタマー属性の予測(年収、職業など)

● 基本的な数学（解析学・線形代数学・確率論）の理解 ● 基本的な統計学・機械学習の理解 ● Python / Rなどでの統計分析・機械学習の実務経験2年以上

【PHP】サーバサイドエンジニア★国内大手コスメECサイト開発

日本最大のコスメ・美容の総合サイトを運営してる企業にて、PHPを用いた自社ECサイトのサーバーサイド開発をご担当いただきます。 当企業は月間3億PV、会員480万人などのビッグデータを元に様々なサービス提供を行なっております。 今回想定している主な担当工程は、詳細設計～実装がメインではありますが、スキル次第では要件定義、基本設計フェーズから参画して頂く可能性もございます。 チームは機能ごとに複数チームに分かれており、１チーム２～８名規模でアジャイル開発で進めております。 また、言語はサービスによって都度求められる環境や条件に応じて選択しており、モダンな技術にも非常に積極的に取り組んでいます。 ※現場環境： ・言語：...

【必須】 ・PHPを用いた開発経験 ・クラウドインフラ（※AWSだと尚良）環境上での開発経験 【尚良】 ・大規模サービスの開発経験 ・設計書フェーズの経験

統合デジタルマーケティングツール開発

◆統合デジタルマーケティングツール開発 概要： アクセス解析や、A/Bテスト等の統合デジタルマーケティングツールをスクラムにて開発中です。 いくつかある機能毎に巻き取りながら開発を行って頂きます。 ポジション：スマートフォンアプリSDK開発 開発環境 言語 ：Java,Vue.JS,Objective-C,Swift,Kotlin OS ：Linux(PivotalベースのPaaS環境） DB ：Hadoop/HiveQL その他：Druid 場所：豊洲 開始：5/8～ 長期見込み 募集：1名～ 単金：60～85万円程度 ※スキル見合い 精算：140H-180H 面談：2回

必須スキル ・Androidアプリいずれかの開発経験 尚可スキル： ・データ収集の為のタグ埋め込みなどのご経験 ・デジタルマーケティング製品の開発経験 ・Kotlinによる開発経験 ・SDKの開発経験

AWSエンジニア募集

▼案件 ：AWSエンジニア募集 （※インフラの知見、アプリ開発の知見共に必要です。） 案件内容 ：ビッグデータを用いた施策案件や、 大規模データを処理できるインフラの構築・運用を担当頂きます。 なお今後はインフラ保守、構築・開発案件などもあり、 担務変更の可能性もございます。 ※AWSの構築/拡張/運用/保守がメイン業務となります。 案件例： ・AWSを活用したインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件（頻度：低） ...

▼経験スキル：［必須］ 以下の2点の経験/能力があること [1]インフラに関する業務経験（オンプレ、クラウド問わず） [2]基本的なプログラム作成（開発経験） ・推奨：Python（チーム共通の言語のため） ※プログラムの基本に加えAWSのAPIを組み合わせて 作成できればよい程度 ※実務経験があれば言語は問いません ※シェルスクリプトのみの経験はNG ［尚可］ ・ソフトウェアの広く浅い知識 ※一人当たりの扱う技術領域は広いため、 ...

人材業界でのデータエンジニア募集

■業務内容 （1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯ （2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化 （3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装 稼　働：週2日~5日　相談可能 時　間：9：30 - 18：30(応相談) 服　装：ビジネスカジュアル・私服

・Scala（もしくはJava）の実装経験 ・Hadoopエコシステムに関する知識（実務経験は問わない）

大量データを扱う情報基盤のシステムの保守・運用

◆大量データを扱う情報基盤のシステムの保守・運用 概要 ・オンプレミスで構築されている大量データを扱う 情報基盤システムの保守・運用要員募集 Hadoopは触れることは必須ではなく、興味がある方や大量データの インフラ構築や、パフォーマンスチューニングにご興味がある方に マッチします。 内容：情報基盤システムとは、分散処理技術「Hadoop」を使用 2018年内で旧サーバから、新サーバへ移行完了予定となっており、 2019年からは新サーバでのパフォーマンスチューニングおよび、 オンプレミス、クラウドのハイブリッドを想定しるための構築を 行いたいと考えております。 場所：恵比寿...

必須スキル： ・Linux環境でのインフラ作業経験 ・shell scriptの使用経験：2年以上 尚可スキル ・ＡＷＳ環境のご経験 ・ＡＤサーバ経験

データ分析システム（サーバサイドエンジニア）

◆ 募集職種：データ分析システム（サーバサイドエンジニア） ◆ 勤務地：東京駅 ◆ 希望参画時期：2月以降 ◆ 内容 ・オフラインの移動データ（GPS、ビーコンの移動データ）の可視化、分析する基盤の 構築、APIの提供によるレポーティングツールの作成を行っています。 ・このツールのサーバサイドの開発にご参画いただける方を募集いたします。 ・分析システムの構築案件ですが、予測、分析に関して興味がある場合は大歓迎です。 システムがある程度組み終わったら分析もお任せしていけたらと思います。 ◆求める人物像 - 直近2年ぐらいのデファクトな技術の知識がある - 今後も新技術・新環境の学習意欲がある - デー...

◆ スキル（必須） ・gitを用いた開発経験1年以上 ・Linux/UNIX上での開発経験1年以上 ・チーム開発経験あり ・AWSの使用経験 ◆ スキル（推奨） ・pythonを用いた開発経験あり ・Ajaxを用いたシステム開発経験あり ・JavaScriptを用いた開発経験 ・Jade, Sass, CoffeeScriptの使用経験 ・HTML/CSSの開発経験

データ分析システム（サーバサイドエンジニア）

◆ 募集職種：データ分析システム（サーバサイドエンジニア） ◆ 勤務地：東京駅 ◆ 希望参画時期：4月以降 ◆ 内容 ・オフラインの移動データ（GPS、ビーコンの移動データ）の可視化、分析する基盤の 構築、APIの提供によるレポーティングツールの作成を行っています。 ・このツールのサーバサイドの開発にご参画いただける方を募集いたします。 ・分析システムの構築案件ですが、予測、分析に関して興味がある場合は大歓迎です。 システムがある程度組み終わったら分析もお任せしていけたらと思います。 ◆求める人物像 - 直近2年ぐらいのデファクトな技術の知識がある - 今後も新技術・新環境の学習意欲がある - デー...

◆ スキル（必須） ・gitを用いた開発経験1年以上 ・Linux/UNIX上での開発経験1年以上 ・チーム開発経験あり ・AWSの使用経験 ◆ スキル（推奨） ・pythonを用いた開発経験あり ・Ajaxを用いたシステム開発経験あり ・JavaScriptを用いた開発経験 ・Jade, Sass, CoffeeScriptの使用経験 ・HTML/CSSの開発経験

データ分析アプリ開発案件

◆ 案件名：Hadoop、Spark、Pythonを用いたデータ分析アプリ開発案件 ◆ 金額 ： MAX90万 ◆ 募集枠： 1名 ◆ 勤務地 ： 渋谷 ◆ 参画時期： 即日～長期 ◆ 面談： 2回 ◆ 支払： 40日 ◆ 内容： ・Hadoopクラスタ上のデータ分析を行うアプリをPySpark （Sparkを実行するためのPython API）にて開発する案件でございます。 Pythonが書ける方であればキャッチアップしていただきスキルアップが 可能な案件でございます。

◆ スキル（必須） ・Pythonでの開発経験 OR ・ Scala若しくはJavaでの開発経験3年以上 ・マルチスレッドプログラミングのご経験

ERPパッケージSCM領域導入支援

◇案件名 ：ERPパッケージSCM領域導入支援 ◇作業内容 ：・製造業向けのERP(enterprise resource planning)パッケージソフト導入における 要件定義フェーズから製品設計業務をご担当して頂きます。 複数クライアントとの業務要件定義から業務要件からPKG機能設計への落とし込み (プロセス/機能/エンティティ設計)主に販売、購買、在庫、原価、PJ管理のモジュールを 導入していきます。 ※設計以降開発はオフショアを想定しております。 ◇開発Word ：Java、JavaScript、 SAP,EBS,D...

◇スキル ：Web系システムの開発経験（要件定義経験3年以上）

データウェアハウス(DWH)の開発・インフラ面

◆ 案件名：データウェアハウス(DWH)の開発・インフラ面 ◆イメージ(いずれかのご経験) ・Hadoop／DWH／BI／その他OSSDB若しくはKVSの設計・構築・運用のご経験 ・クラウド（AWS、GCP）でのデータ分析インフラのご経験 ・大規模RDBMSの設計（論理／物理）・構築・運用のご経験 ◆ 勤務地： 六本木一丁目 ◆ 参画時期： 3月～長期予定 ◆ 金額： 70万～80万（精算有り）※スキル見合い ◆ 面談： 2回 ◆ 内容： 求人サイトのインフラチームにて DWHのインフラ面での作業者を探しております。 詳細は御面談にてお話をさせていただければと思います。

◆ スキル（必須） ・Oracleデータベースにかかわる知識 ・パフォーマンス分析/チューニング/運用改善などの経験 ◆ スキル（推奨） ・Spark／Storm／Prestoなどリアルタイムテクノロジー実装のご経験 ・大規模なレコードのデータセットを扱った経験 ・運用設計（ドキュメント作成）ならびに実運用のご経験

クオンツ向けPythonアプリ開発支援

◇案件名 ：クオンツ向けPythonアプリ開発支援 ◇開発環境 ：SQL Server/PyQt/Elasticsearch/Hadoop/Spark/Docker/GCP ◇期間 ：4月～長期 ◇場所 ：神谷町、茅場町 ◇単価 ：65万～75万（スキル見合い）応相談 ◇募集枠 ：2名 ◇精算 ：140H～180H ◇支払 ：55日サイト ◇面談 ：2回

◇スキル ：Pythonアプリケーション開発経験 ※金融工学の知識等は不要

キャリア向けインフラ保守プロジェクト

案件：キャリア向けインフラ保守プロジェクト 概要：現行チームからのインフラ保守引継いでの対応 アプリのJP1再実行等も作業として発生する可能性有り 【インフラ保守のスコープ】 OS・NW・ソフトウェアの問合せ、障害調査、 設定変更等 ※HWは対象外 作業場所：飯田橋 期間：即日～長期 人数：2名 面談：1回 予算：スキル見合いですのでご提示ください （目安は60万～65万 ） 【環境】 OS：CentOS or ReaHat NW：HP：PowerConnect 6248 他 想定作業（一部） NW機器(Swich/FireWall)の軽微な設定変更(ルーティング追加等) NW機器への新規機器接...

【スキル】 ・OS,NW関連の保守、メンテナンス経験、知見のある方 ・Apache・Tomcatの保守、メンテナンス経験、 知見 のある方 【尚可スキル】 ・Hadoop中心のシステムとなるため、Hadoopの構築、運用経験 ※HIVEも同様

【python,SQL,】オンプレ環境→クラウド環境への移行プロジェクト

オンプレのHadoop環境上にSQL・Pythonで実装した各種アプリケーションをGCP(GoogleCloudPlatform)環境のBigQuery等へコンバートするための移行開発業務 ■プロジェクト背景 性能面・コスト面の課題を受け、5年間運用してきたお客様のオンプレ環境を刷新することになり、今年１月より稼働中（プロジェクトの終了は来期の１Q予定で）

・常駐可能であること（東京駅近辺） ・SQLを利用した開発経験 ・Linux/Shellの開発経験 ・Git等のバージョン管理システムの経験 ・開発メンバーとコミュニケーションがとれ、主体的に動いて頂ける方 ・100％の開発要件がおちてくる訳ではないため、積極的に要件詰めや課題提案ができる方

【解析DWH開発】ビックデータ解析による医療系サービス開発解析

医療に関わる膨大なデータを解析することで新たなサービスを創出する企業。 開発はPythonで実装し、DB側の知識、経験が求められます。 ポテンシャルが高ければビッグデータ、Pythonの経験がなくても問題ありません。 ※今後、Web開発も予定しています

・プロジェクトリーダ経験あり ・基本設計～開発/テストを1人称で行える ・システム開発経験 5年以上 ・SQL開発経験(DB問わず)3年以上 ・オブジェクト指向言語経験(言語問わず)3年以上 ・得意な技術 or フェイズ（要件定義、基本設計など）があること

【MW,機械学習,ブロックチェーン】パッケージ製品ベンダーの研究開発

AIやブロックチェーン等の最新技術を用いた、パッケージ製品への機能拡充を検討されており、 その研究開発のご支援となります。 具体的には、 ・機械学習等のAI機能を用いたグループウェア機能の最適化 ・OCR機能を用いた帳票処理自動化機能 ・ブロックチェーンを用いたBPM連携 等々がスコープとなっております。

・新技術の調査・利用のご経験がある方 ・下記はいずれか1つは必須 　- Linux上でのOSSミドルウェア導入経験 　- Restful API等を活用したマッシュアップでのアプリ開発 　　（設計、実装の双方をご経験されている）

【SQL】ビッグデータ分析支援/行動分析、混雑統計

データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成

・Unix /Linux OS の操作経験（2 年以上） ・SQL、Excel 等によるデータ加工経験 ・DBに関する基礎知識（データの読み書き、テーブル操作等）

大規模SNSアプリ開発案件

■プロジェクト名(案件名)： 大規模SNSアプリ開発案件 ■単価： ～80万円/月 140-180 ※スキル見合い ■お顔合わせ回数： 1回 ■作業内容： ・大規模SNSアプリ開発に携わって頂きます。 ・設計から幅広く業務を担当して頂きます。 ・開発手法は、スクラムです。 ・開発フローは、GitHub FlowをベースにPull Requestを活用しております。 ・Androidアプリやサーバサイドの開発経験がある方は、 併せて依頼される可能性がございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。 ■環境： 言語：Objective-C,Andro...

■要求スキル： 【必要】 ・iPhoneアプリ開発の実務経験1年以上 ・複数人でネイティブアプリを開発した実務経験 【尚可】 ・Androidアプリ開発の実務経験 ・Gitを用いた開発の実務経験 ・スクラム開発の実務経験 ・UI周りの実務経験 ・ソーシャルメディアのWebAPIを応用したアプリ開発の実務経験 ・大規模アプリの開発および運用の実務経験 ・設計レビューやコードレビューの実務経験 ・ソーシャルゲーム開発の実務経験 ・アーキテクトの実務経験 ・Linux/RDBMSの知見 ・AWSの知見 ・英語や中国語での業務遂行能力 ・能動的な方

ビッグデータ分析システム開発

ビッグデータ分析システム開発 勤務地：東銀座 期 間：12月～長期 単 価：65万円～75万円（月額） 時間幅：確認中 面 談：1回 ＜業務内容＞ ビッグデータ分析システム開発に携わっていただきます。 データ分析に興味がある方や、これから習得したいと思っている方にとって 未経験の業務や新しい知識・技術を学べるチャンスです。 Javaの開発経験3年以上ある方であれば、Hadoop、Hiveは学ぶ意欲があれば 経験なくても問題ございません。

＜必須スキル＞ ・Java開発経験3年以上（playフレームワーク経験希望） ・AWS環境における開発経験 ・基本設計～可能な方 ＜尚可スキル＞

【機械学習,画像認識】パッケージ製品へのAI関連の機能開発支援

パッケージ製品へのAI関連の機能の 拡充を検討されており、その開発のご支援となります。 具体的には、 ・機械学習を用いた処理の最適化機能 ・画像認識機能、OCR機能 ・音声での対話入出力機能 が初期スコープとなっております。

（下記のいずれか1つ必須） ・機械学習を用いた分析の実施経験 ・画像認識もしくはOCRの実装経験 ・音声での対話システムの構築経験

【Python,ビッグデータ分析基盤】大規模データの分析基盤の開発・運用支援

稼働中の大規模データの分析基盤に対するPythonプログラムの追加改修及び運用

1.Pythonを用いたDBアクセスを行うプログラムの作成・運用の経験 2.Pythonで書いたプログラムのレビューワーの経験 3.Pythonで書いたプログラムのデプロイの実施した経験 4.Gitの開発フローの実施した経験(ex:git-flow/github-flow)

【PHP】データ分析サイトの機能追加支援

データ分析サイトの機能追加 【工程】：・システム仕様の英訳 ・オフショア対応（欧州） 【環境】：Linux、Apache、Tomcat、PHP、MySQL、Hadoop

・英語での業務対応 ・Webシステム開発経験（PHPベター）、Javascript、HTML、CSS

【アクセスログ解析,SQL,PHP】BtoCサイトにおけるウェブログ解析案件

・ウェブアクセス解析の経験 ・ウェブサイトの分析経験 ・SQL経験 ・PHP経験