【Dagster/Iceberg/Keycloak/AWS/フルリモート】データインフラエンジニア案件
この案件を3行でまとめると
- データインフラ基盤の設計・構築・改善を担当し、データ活用を加速させる本プロジェクトです。
- データリネージ設計、データカタログ導入、Keycloak移行、マルチテナント化、AWSインフラ最適化などを実施します。
- フルリモートで月給95万円、週5日稼働で安定した報酬と自律的な開発環境が魅力本ですよ。
作業内容
本案件では、データインフラ基盤の設計・構築・改善に幅広く携わっていただきます。 具体的には、以下の業務を想定しています。 ・データリネージ機能の設計と構築 ・データカタログ基盤の導入検討と実装（OpenMetadataなどの活用を視野に入れ、Iceberg / PostgreSQL / Dagsterとの連携設定を含む） ・既存の認証基盤をAWS上でのKeycloakデプロイに移行し、CognitoからのIdP切り替えと管理を実施 ・データパイプラインのマルチテナント化対応（Dagster / Iceberg / Nessieを活用したネームスペース分離） ・AWSインフラの継続的な改善と最適化（ECSリソースの調整、堅牢なモニタリングシステムの設計、コスト効率の向上策実施） 募集背景 事業成長を加速させるため、データインフラの強化と先進的なデータ活用基盤の構築を目指しています。特に、アーキテクチャ設計から自律的に推進できる方を求めており、この重要なミッションを担う新たなメンバーを募集しています。
必須スキル
Keycloak データインフラエンジニアとして、以下のスキルと経験を必須とします。 ・Dagster、Airflow、dbtなど、いずれかのツールを用いたデータパイプラインの設計および構築の実務経験 ・データリネージやデータカタログの設計経験、またはこれらのアーキテクチャに関する深い専門知識 ・AWS環境におけるインフラの構築、運用経験（ECS、RDS、ALB、S3など主要サービスの知識と経験） ・Terraformを使用したInfrastructure as Code (IaC) の実践経験 ・DockerおよびDocker Composeを活用した開発環境の構築経験 ・GitHubを用いたチーム開発の実績 ・技術選定から設計、実装、そして運用まで、一連の開発サイクルを自律的に推進できる能力
歓迎スキル
以下のスキルや経験をお持ちの方を歓迎いたします。 ・OpenMetadata、Apache Atlas、DataHubなどのデータカタログ製品の導入や運用経験 ・データメッシュやメダリオンアーキテクチャなどの現代的なデータアーキテクチャに対する理解 ・Apache Iceberg、Nessie、Trinoといったデータレイク関連技術の実践経験 ・Keycloak、OAuth2、OIDCなどの認証基盤の構築経験 ・Pythonを用いたツールやスクリプト開発の経験 ・データ品質管理やデータガバナンス戦略の設計経験 ・クラウドコスト最適化や高度なモニタリングシステム設計の経験
稼働条件
週5日 / 140時間～180時間/月 / フルリモート
契約形態
業務委託(フリーランス)
開発環境
主要な開発・利用環境： ・プログラミング言語: Python ・データパイプライン: Dagster, Airflow, dbt ・データカタログ: OpenMetadata, Apache Atlas, DataHub ・データレイク: Apache Iceberg, Nessie, Trino ・認証基盤: Keycloak, Cognito, OAuth2, OIDC ・クラウドプラットフォーム: AWS (ECS, RDS, ALB, S3) ・IaC: Terraform ・コンテナ技術: Docker, Docker Compose ・バージョン管理: GitHub ・データベース: PostgreSQL
作業時間
9:00～18:00（目安）
精算基準時間
140h〜180h
募集回数
1回
企業名
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
この案件のおすすめポイント
- フルリモートで働けるため、場所を選ばずに業務に集中できます。
- 月給95万円と週5日稼働で安定した報酬が得られます。
- データリネージやKeycloak移行など、実務経験を活かせる幅広い業務があります。
よくある質問
案件について詳しく聞いてみませんか？
知りたい内容を選んでください（複数選択可）