エンタープライズSaaSプロダクトにおけるデータパイプラインの設計、構築、および最適化をお願いする想定です。 様々な外部データソース(例:GoogleDrive,Dropbox,Webpage,etc)とのデータ連携のための処理の実装 データの正確性、完全性、一貫性を保証するためのデータ品質 管理プロセスの設計と実装、 およびデータパイプラインの健全 性を監視するシステムの構築
・Pythonを用いたデータ処理(Flask/Pandas/NumPy/Daskなど)の実務経験(3年以上) ・GCPを用いたデータウェアハウス、データレイク、またはデータパイプライン構築の実務経験 ・リレーショナルデータベース(例:PostgreSQL, MySQL)またはデータウェアハウス(例:BigQuery)におけるSQLを用いたデータ操作、分析、および最適化の実務経験 ・バッチ処理およびストリーミング処理を含む、データパイプラインの設計、構築、運用の実務経験
(140時間 ~ 180時間)
TechCareer Freelance
運営会社:株式会社アイデンティティ
案件・求人数:20507件
契約形態:業務委託(フリーランス)
アカウントをお持ちでない方はこちら
すでにアカウントをお持ちの方はこちら