【Go/Python】大規模ログをリアルタイムに飲み込む。グローバル基準のセキュア基盤をTerraformで構築

### 【案件概要】 【BigQuery/Terraform】世界を相手に開発プロセスそのものを「AI化」する。 ■ 「作る」だけじゃない。開発の「常識」をハックする。 今回のミッションは、Google Cloudをベースにしたグローバル規模のデータ分析基盤の構築です。 これだけ聞くとよくある話に聞こえるかもしれませんが、特筆すべきは「開発プロセスのAI化」への本気度です。 GitHub Copilot EnterpriseやCursorといった、今エンジニアが最も熱狂しているコーディングエージェントを単に「使っていいよ」ではなく、「チーム全体の標準としてどう組み込み、どうポリシーを策定するか」からお任せします。 「ツールに踊らされるのではなく、ツールを使って開発の限界値を引き上げる」 そんな、エンジニアとしての本能をくすぐる試行錯誤がここにはあります。 ■ 現場の「ヒリつく」面白さ ### グローバル×セキュリティの極致： 世界中のデータを扱うため、個人情報保護法などの厳しい規制をクリアする必要があります。Terraformを用いたIaC（Infrastructure as Code）で、一寸の狂いもないセキュアな機密データ管理体制を設計する。 これは、最高難度のパズルを解くような快感です。 ### GoとPythonによるリアルタイム処理： Pub/Subを用いたリアルタイムログ転送や大規模データの抽出ロジック実装。 パフォーマンスが求められる領域であなたのGo/Pythonスキルを存分に振るっていただきます。 ### 「守り」と「攻め」のエンジニアリング： 監視や保守といった「守り」はもちろん、次世代の技術選定やレビューといった「攻め」の業務まで。データエンジニアリングの全方位をカバーする、まさに「フルスタック・データエンジニア」への道です。 ■ テックスタック ・Infras: Google Cloud (BigQuery, Pub/Sub, etc.) / Terraform ・Languages: Python, Go ・AI/DevOps: GitHub Copilot Enterprise, Cursor, GitHub ・Focus: Global Scale / Security / AI-Driven Development ■ 必須スキル ・データエンジニアまたはSREとしての作業経験 　- BigQuery等のデータウェアハウス設計、可用性 ・スケーラビリティを考慮した基盤構築経験 ・PythonやGoを用いた開発経験 　- 並行処理を重視したバックエンド実装やデータ処理スクリプト、API開発の実務経験 ・ーディングエージェントをチーム共通で使用できる環境に整備した経験 　- AIツールの導入支援、プロンプトエンジニアリングの共有、または開発フローの自動化経験 ・Google Cloudを用いたデータ分析基盤のアーキテクチャ設計と構築運用経験 　- Cloud Storage, Dataflow, BigQuery等を組み合わせたデータレイク ・DWHの構築 ・Terraformの利用経験 　- モジュール化による再利用性の担保、およびCI/CDパイプラインとの統合実務 ・ログ転送やメッセージキューイングを用いたリアルタイムログ転送の実践的構築と運用経験 　- Pub/Sub, Kafka, Fluentd等を用いた大規模 ・低遅延なストリーミング処理基盤の構築 ■ 歓迎スキル ・MLに係るパイプラインの設計と運用及び保守経験 　- Vertex AI Pipelines等を用いた、モデルの学習からデプロイまでの自動化経験 ・データリネージやメタデータを管理するツール導入やシステム開発経験 　- Dataplex (Data Catalog)等の活用による、データの透明性とガバナンスの確保 ・機密データを適切に管理するためのアクセス制御や暗号化などのセキュリティ技術の知見 　- Cloud KMS, IAM権限の最小化、DLP APIを用いたデータマスキングの実践経験 ・ELTやETLを行うジョブスケジューラを導入したデータ転送ジョブの開発や運用経験 　- Cloud Composer (Airflow)やdbtを用いたワークフロー管理の経験 ・RDBやデータウェアハウス上でのデータモデリングにより実用的なデータマートを設計した経験 　- 分析目的に最適化されたテーブル設計（スター形式等）の実践 ----------------------- 【会社紹介】 エンジニアの自由を孤独にしない。株式会社VOOM ―― 代表は「元ホームレス」のエンジニア。 「エンジニアが開発だけに没頭できる理想郷を作りたい」 そんな想いで、元エンジニアの代表・津田が立ち上げたのがVOOMです。 どん底を知り、技術で這い上がってきたからこそ、エンジニアの苦労もキャリアの難しさも痛いほど分かる。 エンジニアが「開発だけに純粋に没頭できる環境」を追求し続ける、ギルドのような組織です。 圧倒的サポート「7つの業界初」 フリーランスの「不安」と「面倒」を、VOOMがすべて肩代わりします。 【技術】IT塾が無料： ReactやNext.jsなど、最新技術を働きながら習得。 【税務】確定申告が無料： 領収書を送るだけ。プロの税理士が完全代行。 【装備】補助金申請が無料： PCやタブレット購入費の最大2/3を国が支援。 【成長】メンター＆面談対策： ハイスキル層があなたのキャリアを直接バックアップ。 【安心】社保加入サービス： フリーランスの自由さと、正社員の安心を両立。 【絆】交流会が活発： スマブラ大会、BBQ、ダーツ。孤独とは無縁の環境です。 案件の質にも、一切妥協なし。 ・所属エンジニア数 1,500名以上 ・取引先企業数 2,500社（直請け・プライム案件多数） ・主な提供案件 高単価・モダン開発・フルリモートなど厳選案件 ・福利厚生 無料健康診断、正社員紹介支援、記帳代行など まずはカジュアルにお話ししませんか？ 「今の単価に満足していない」「事務作業が苦痛」「もっとモダンな技術に触れたい」 どんなお悩みでも構いません。1,500名の仲間が選んだ「VOOMという選択肢」を、ぜひ一度オンラインで確かめてみてください。 株式会社VOOM

1回