【4月★小倉★在宅併用】＼LLMエンジニア／Langfuse評価基盤構築★大手インターネット企業での機械学習エンジニア募集｜オンサイト,リモート(福岡県)｜システムエンジニア（SE）

大手インターネット事業会社でのAIプロダクト開発プロジェクトです。TypeScriptによる実装力と、LLMの専門知識を掛け合わせ、プロダクトを自ら動かす醍醐味を味わえます。 【業務詳細】 AIサービスの品質改善を目的とした、 LLM評価基盤・LLMOps環境の設計および運用を担当します。 ▼主な業務内容 ■LLM評価基盤の設計 Langfuseを用いたLLMトレース環境の構築 モデルの評価指標（Quality Metrics）の設計 自動評価および人手評価プロセスの設計 ■LLMプロダクト改善 プロンプト設計および改善 モデル精度改善のための検証 RAG構成の改善 ■ログ分析・品質改善 LLMログデータの分析 品質課題の特定 改善施策の提案 ■LLMOps環境構築 LLM運用フロー設計 再現性のある評価サイクルの構築 ML運用パイプライン改善 ■コスト最適化 トークン使用量の最適化 LLM運用コストの改善 ▼担当フェーズ AIアーキテクチャ設計 LLM評価基盤構築 モデル改善 運用改善 ▼得られる経験 LLMプロダクトの本番運用経験 LLMOpsの実践経験 RAG設計スキル AIプロダクト改善経験 【スケジュール】 4月参画 参画後 AI基盤理解 ↓ 評価基盤設計 ↓ 改善サイクル運用 【開発環境】 LLM / ML OpenAI系LLM RAG LLMOps Langfuse 開発言語 TypeScript（Node.js）

1回