【データエンジニア】データ基盤・パイプライン開発案件

データソリューション領域を支えるデータ基盤・データパイプラインの開発・運用を担う、データエンジニアを募集します。特定のプロダクトに閉じず、3つの領域を横断してデータの取り込み・加工・提供を担う、データソリューション全体の中核となるポジションです。 データソリューションは、単なるデータ管理からAIを軸とした顧客価値提供へと構造転換を進めるフェーズにあり、その基盤となるデータエンジニアリングの重要性が高まっています。自走してデータパイプラインの開発・運用を進めながら、基盤全体の品質・生産性向上にも貢献いただける方を求めています。 【期待する役割】 - 短期：既存のデータパイプライン・データ基盤を早期にキャッチアップし、機能開発・改善とレビューを通じてアウトプットを安定的に出す。 - 長期：データ基盤のアーキテクチャ・品質・信頼性に積極的に関心を持ち、開発生産性とデータの安定供給に主体的に貢献する。 【具体的な業務内容】 - 横断したデータパイプライン（ETL／ELT）の設計・開発・運用 - Apache Spark を用いた大規模データ処理、および Iceberg 形式へのデータ変換処理の開発 - Argo Workflows によるジョブオーケストレーション／ワークフローの開発・運用 - データ不整合の検知やデータ品質担保の仕組み作り - データ処理基盤（Spark）のパフォーマンスチューニング - 障害発生時の調査・原因特定と、監視・再発防止の仕組み作り - AI開発ツール（Cursor／Claude Code等）を活用した開発生産性の向上

- バックエンド開発経験、または、データエンジニアとしての開発経験 - 実データ（生データ）を扱ったデータの加工・集計・パフォーマンスチューニングの経験（SQL等） - AWSを始めとするクラウドサービスを利用した開発経験

- 大規模データを扱うデータパイプライン（ETL／ELT）・データ処理基盤の設計・開発・運用経験 - Kubernetes(EKS)・Argo Workflows などを用いたデータ基盤の開発・運用経験 - データ不整合検知や運用自動化など、サービス品質向上の経験

WEBサービス

言語 - Python / SQL / Go / Java 使用技術 - AWS(EKS, S3, Aurora, ECR, Lambda, Step Functions, CloudWatch) / Apache Spark / Apache Iceberg / Apache Hudi / Apache Flink / Trino / Apache Kafka / Helm / Argo CD / Argo Workflows / Argo Events / Airbyte / Docker / Podman / gRPC / Grafana / Prometheus 開発者ツール - Cursor / Claude Code / GitHub / GitHub Actions / Notion / Slack / k9s / uv

140時間〜180時間

2027/01

1

09:00-18:00

週5日

出社リモート併用

1回

あり

なし

2026/07/28 19:20:27