【Databricks/Python】データパイプライン移行PJ案件・求人

業務委託

東京都神谷町駅

590,000 ~ 610,000円/月額

募集状況を聞く（無料）

人気案件は申し込みが集中いたしますため、お早めに募集状況をお聞きください。
具体的な報酬単価・企業名・労働条件につきましては、お問い合わせ後に説明いたします。

案件詳細: 大手企業向けデータ基盤において、既存のSPARKパイプラインをDatabricksへ移行するプロジェクトです。既存のDWH（契約者のデータ）が各システムからデータを収集収集して、シルバーデータやゴールドデータとして作成している処理をDatabrickに移行するというプロジェクトです。移行対象となるパイプラインは約1,000本規模に及ぶため、複数名体制での対応が想定されます。アジャイル開発スタイルのSES参画となり、Q単位での契約更新を予定しています。【業務内容・ミッション】既存SPARKパイプラインの現状調査・仕様整理 DatabricksへのETLパイプライン移行・実装シルバー/ゴールドレイヤーのデータ変換処理の開発・テスト移行後の動作確認・品質担保
開発言語: Java Python Scala SQL Spark PySpark Databricks
必須スキル・経験: ・DWH／データパイプライン開発・運用経験・Pythonを用いたデータ処理の実務経験・SQLによるデータ加工・集計の実務経験・Apache Spark / PySpark ・Databricks ・複数名チームでのプロジェクト参画経験
尚可スキル・経験: ・シルバーデータ／ゴールドデータ設計・開発経験・アジャイル／スクラ
職種・ポジション: フルスタックエンジニアデータ周りエンジニア
業界: WEBサービス
募集背景: 既存のSPARKパイプラインをDatabricksへ移行するプロジェクトのため、複数名体制での対応が想定されます。
開発環境: Databricks, Apache Spark, PySpark
参画時期: 2026/07
チーム規模: 1～3人
出社頻度: フルリモート
PC貸与: あり
服装規定: なし
案件公開日時: 2026/06/18 13:20:58

おすすめポイント

データ基盤の重要性が高まる中、既存のパイプラインを最新のDatabricksへ移行することは、データ活用基盤の強化に不可欠です。本案件は、大規模なパイプライン移行を通じて、データエンジニアリングの専門性を深める貴重な機会となります。アジャイル開発手法を取り入れることで、変化に強く、効率的なプロジェクト推進が期待できます。

案件について、詳しく聞いてみませんか？

フリーランスジョブでは、
あなたのご希望とご経歴に最適な案件を
エージェントが直接ご紹介します

募集状況を聞く（無料）