顧客内製システムの自動化開発案件。人力で行っている障害発生時の切り分けを、各業務フローを一元化して、自動で切り分けられるようにする。

・Pythonを用いた開発経験10年以上 ・5名程度の開発チームのリーダー経験 ・開発フレームワーク/ツール/プロセスの選定と制定 ・Data Pipeline構築経験(ETL開発経験) ・マイクロサービスアーキテクチャやサーバレスアーキテクチャの実装理解 ・DWHやETL等のビッグデータ実装への理解 ・Pytest等を使ってテストコード実装したことがある人(知識がある人) ・AWS上でのシステム開発経験(AWSの環境をいじったことがある) ・サーバレスのWF(ワークフロー)開発の経験 ・Airflow・DAGの開発経験もしくは概念の理解

・Pandasライブラリを用いた開発経験 ・Kinesisを用いた開発経験 ・Sparkを用いた開発経験 ・Redshiftを用いた開発経験 ・Glueを用いた開発経験 ・Jenkins、Ansibleの経験 ・Data Pipeline構築経験(ETL開発経験) ・Lamdaなどのサーバーレス開発経験 ・RDBを用いたシステム開発の経験 ・OSSを活用したシステム開発経験(Kafka, MySQL, MongoDB...) ・AWSのマネージドサービス利用経験(Redshift,SMS/SQS,RDS) ・アジャイルでのシステム開発経験 ・JIRA/Confulence相当を利用した開発経験

Python、AWS、Airflow、Pandas、Kinesis、Spark、Redshift、Glue、Jenkins、Ansible、 Kafka, MySQL, MongoDB、JIRA、Confluence

140時間 ~ 180時間

2025/10

9:00 - 18:00

週4日出社

2回

オンライン

未設定

未設定

2025/09/12 19:00:25

ビッグデータ活用が不可欠な現代において、データパイプラインの構築と自動化は、企業の競争力を高める上で重要な取り組みです。 本案件では、ETL開発経験を活かし、データの一元化と効率的な処理を実現することで、企業のデータドリブンな意思決定を支援します。 障害発生時の迅速な対応を可能にするシステムの構築は、企業の信頼性向上にも大きく貢献するでしょう。