掲載終了7ヶ月前

【AWS/GCP/Terraform】データ基盤構築（データレイク・DWH・ETL）

850,000〜1,050,000/月

作業内容

AWSとGCPを活用したデータ基盤の構築をご担当いただきます。サービス運用やビジネス分析、出版社支援など多様なデータ活用ニーズに応えるためのスケーラブルな基盤を目指します。主な担当領域: - データレイク/ETL基盤の整備・AWS Glue（Apache Spark）を用いた分散処理・ETL開発・S3やLake Formationを活用したデータガバナンス/セキュリティ設計 - BigQueryベースのDWH構築・AWS→GCP間のデータ連携フロー最適化・BigQueryにおけるデータモデリングとクエリ性能改善 - IaCによるマルチクラウド管理・Terraformでの環境差異の制御と自動化 - 運用効率化と品質向上・Airflow等でのワークフロー管理、CI/CD整備・データ品質向上に向けたテスト自動化 CTOやリードエンジニアと協働し、データ基盤全体のアーキテクチャ方針策定にも関与いただけます。

必須スキル

・AWS上でのインフラ構築/運用経験（S3、IAM、VPC など）・GCPの構築経験（特に BigQuery と IAM/ネットワーク設定）・BigQueryを用いた分析SQLの実務経験（パーティショニング/クラスタリング）・AWS Glue（PySpark）によるETL開発およびパフォーマンスチューニング経験・Terraformを用いたIaC実践（マルチクラウドまたは複数環境での運用）

歓迎スキル

・AirflowやCloud Composer、Step Functions等を用いたワークフロー設計/運用経験・Lake Formationによるデータガバナンス運用設計・データ品質テスト（Great Expectations 等）の導入経験・セキュリティ/ネットワーク設計のベストプラクティス理解・CI/CD（GitHub Actions、GitLab CI、CodeBuild等）の整備経験・アーキテクチャ設計レビューのリード経験

稼働条件

週5日 / 常駐

面談回数

1回

契約形態

業務委託(フリーランス)

開発環境

開発/運用環境: - クラウド: AWS（S3, IAM, VPC, Lake Formation, Glue/Spark）, GCP（BigQuery, IAM, VPC） - ETL/Workflow: AWS Glue（PySpark）, Airflow - IaC: Terraform - データ管理: データレイク, DWH, データモデリング - CI/CD: GitHub Actions など - 言語: Python（PySpark） - 監視/ログ: CloudWatch、GCP Monitoring（想定）

作業時間

10:00～19:00 目安（応相談）

精算基準時間

140~180時間 (上下割)

募集回数

1回

募集背景

データ活用需要の拡大に伴い、マルチクラウドで拡張可能なデータ基盤を整備・強化するための増員募集です。長期での体制強化を見据えています。担当工程要件定義,基本設計,詳細設計,実装,テスト,運用・保守,データ分析募集人数 1人チーム規模 6-10名平均稼働時間月間140～180時間目安（精算幅に準拠）現場の雰囲気 CTO/リードエンジニアと近い距離で協働できる環境。品質と自動化を重視しつつ、アジャイルに改善を回す文化です。案件担当のコメントエンド直案件で意思決定が速く、技術選定にも関与できます。AWS×GCPのマルチクラウドでスキルを伸ばしたい方におすすめです。