【Python/Shell】【PL】大手製造小売業におけるデータ設計開発業務の求人・案件
作業内容
大手製造小売業におけるデータ設計開発業務の運用リーダーとしてご参画していただきます。\n\n主に下記作業をご担当いただきます。\n・AWS を活用したデータ基盤(DWH/データレイク)の設計・構築・運用\n・Glue・Spark/PySpark・MWAA などを用いた ETL/\nデータパイプラインの開発・改善\n・分析向けデータモデル(DWH スキーマ等)の設計および dbt を用いたモデル開発\n・データ処理の品質管理、パフォーマンス改善、運用フローの最適化\n・運用チームのタスク管理・トラブルシューティングなどのリーダー業務\n\n【開発環境】\n使用言語: Python, Shell Script, SQL\nデータ処理: Spark / PySpark, dbt\nクラウド: AWS(S3, Glue, Athena, Kinesis, ECS, \nMWAA)\nパイプライン / ワークフロー: ETL パイプライン、Airflow(MWAA)
必須スキル
・中国語スキル(ビジネスレベル) ・Python/Shell経験 ・Spark/PySparkに精通し、大規模データ処理ができる ・AWSのデータ関連サービスに精通している(以下を含むが、これらに限らない) ┗Sc // Glue(Catalog / Job) // Athena // Kinesis // ECS // MWAA(Managed Airflow) ・ETLデータパイプラインの開発・実装を独立して行うことができる ・データモデル(ディメンション・ファクトテーブル・DWHアーキテクチャ等)の設計スキル
歓迎スキル
・Databricks の使用経験 ・dbt を理解し、モデルの設計・実装を自走できる ・日本向けオフショア案件の経験、もしくはグローバルチームでの協働に対応できる ・データ可視化の経験(Tableau など) ・DevOps、CI/CD を用いたデータエンジニアリングプロセス構築経験
稼働条件
リモート
契約形態
業務委託(フリーランス)
開発環境
Python,SQL,Shell,AWS
作業時間
9:00-18:00
募集回数
1回
募集背景
大手製造小売業におけるデータ設計開発業務にご参画していただきます。\nPython/Shellのご経験がある方におすすめの案件です。\n\nリモート併用可能のお仕事となります。
職種・ポジション
企業名
confidential
サービス/プロジェクト名
詳細スケジュール/リリース時期
現場責任者の雰囲気
開発体制の詳細
詳細は面談でお伝えします。ご相談ください。
一部の情報は非公開の場合があります
案件について詳しく聞いてみませんか?
知りたい内容を選んでください(複数選択可)
