データエンジニア(AWS × GCP)
作業内容
・ データレイク / ETL 基盤の構築 ・ AWS Glue(Apache Spark)による分散処理 ・ ETL 開発 ・ S3 / Lake Formation を用いたデータ管理・セキュリティ設計 ・ BigQuery ベースの DWH 環境整備 ・ AWS → GCP 間データ連携パイプラインの最適化 ・ BigQuery によるデータモデリング・クエリ最適化 ・ IaC を軸としたマルチクラウド管理 ・ Terraform による環境差分管理・自動化 ・ 品質管理・運用効率化 ・ Airflow などのワークフロー管理と CI/CD 整備 ・ データ品質テストの自動化
必須スキル
・ AWS 環境でのインフラ構築・運用経験(S3 / IAM / VPC など) ・ GCP での構築経験(特に BigQuery と IAM/ネットワーク設定) ・ BigQuery を用いた分析 SQL 実務経験(パーティショニング/クラスタリング) ・ AWS Glue(PySpark)での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践(マルチクラウド or 複数環境)
歓迎スキル
・ BI ダッシュボード構築(Looker Studio 等) ・ Airflow / MWAA での複雑なジョブ管理 ・ データレイクハウス設計(Delta Lake / Iceberg / Hudi) ・ ストリーミング処理(Kinesis / Firehose / Pub/Sub) ・ Python / Go / Java でのツール開発
稼働条件
週5日
面談回数
1回
契約形態
フリーランスのみ
精算基準時間
140-180H
募集回数
1回
職種・ポジション
スキル
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
案件について詳しく聞いてみませんか?
知りたい内容を選んでください(複数選択可)
