GCPサーバレス構成によるデータ基盤エンジニア【Python/リモートあり】

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 GCPサーバレス構成によるデータ基盤エンジニア ・SaaS等の外部データソースからデータを抽出し、分析基盤(GCSおよびBigQuery)へ連携するデータパイプラインの「新規構築」「追加実装」「運用保守」 具体的な業務内容: ・新規パイプラインの設計・実装 ・Pythonによるデータ抽出処理の実装 ・各種SaaS(CRM、MA、広告媒体)のAPIを叩き、データを取得・加工してGCSへ 保存するスクリプトの作成。 ・コンテナ化 ・PythonコードのDockerイメージ化およびCloudRunJobsへのデプロイ設定。 ・ワークフロー定義 ・CloudWorkflows(YAML/JSON)を用いて、CloudRunJobsの実行順序制御、並列実行、エラーハンドリング、BigQueryへのロード処理(bqload等)をオーケストレーション実装。 ・運用・保守・改善 ・エラー対応 ・ワークフロー失敗時のログ調査(CloudLogging)、リトライ処理の改善、API仕様変更への追随。 ・パフォーマンス・コスト最適化 ・CloudRunの並列数調整やメモリチューニング、Workflowsのステップ最適化によるコスト削減。 ・IaC管理 ・Terraform等を用いたインフラ構成のコード管理。 ▼条件等 出社：リモートあり(週2~3日出社) 場所：大崎駅 精算幅：140h~180h 勤務時間：10:00~19:00(実稼働8H) 【必須スキル】 ・Pythonによるバックエンド開発経験(3年以上目安) ・Requests等を用いたRESTAPI連携の実装経験 ・Pandas等を用いたデータ加工処理の経験 ・GoogleCloud(GCP)の利用経験 ・CloudRun、BigQuery、GCSの基礎知識 ・IAM権限周りの基本的な理解 ・CloudWorkflowsの実装経験 ・コンテナ技術(Docker)の利用経験 ・SQL(BigQuery標準SQL)の読み書き ・TerraformによるIaC経験 【尚可スキル】 ・CI/CDパイプラインの構築経験 ・dbt(databuildtool)の利用経験 テックビズなら記帳代行無料！充実のサポートで安心して参画していただけます！

1回