【Python／Shell】【PL】大手製造小売業におけるデータ設計開発業務の求人・案件

職務内容

• 大手製造小売業におけるデータ設計開発業務の運用リーダーとしてご参画していただきます。 主に下記作業をご担当いただきます。 ・AWS を活用したデータ基盤（DWH／データレイク）の設計・構築・運用 ・Glue・Spark／PySpark・MWAA などを用いた ETL／ データパイプラインの開発・改善 ・分析向けデータモデル（DWH スキーマ等）の設計および dbt を用いたモデル開発 ・データ処理の品質管理、パフォーマンス改善、運用フローの最適化 ・運用チームのタスク管理・トラブルシューティングなどのリーダー業務 【開発環境】 使用言語: Python, Shell Script, SQL データ処理: Spark / PySpark, dbt クラウド: AWS（S3, Glue, Athena, Kinesis, ECS, MWAA） パイプライン / ワークフロー: ETL パイプライン、Airflow（MWAA）

求めるスキル

• 【必須スキル】 ・中国語スキル（ビジネスレベル） ・Python/Shell経験 ・Spark/PySparkに精通し、大規模データ処理ができる ・AWSのデータ関連サービスに精通している（以下を含むが、これらに限らない） ┗Sc // Glue（Catalog / Job） // Athena // Kinesis // ECS // MWAA（Managed Airflow） ・ETLデータパイプラインの開発・実装を独立して行うことができる ・データモデル（ディメンション・ファクトテーブル・DWHアーキテクチャ等）の設計スキル 【歓迎スキル】 ・Databricks の使用経験 ・dbt を理解し、モデルの設計・実装を自走できる ・日本向けオフショア案件の経験、もしくはグローバルチームでの協働に対応できる ・データ可視化の経験（Tableau など） ・DevOps、CI/CD を用いたデータエンジニアリングプロセス構築経験

担当者からのコメント

大手製造小売業におけるデータ設計開発業務にご参画していただきます。 Python/Shellのご経験がある方におすすめの案件です。 リモート併用可能のお仕事となります。