【インフラ】オンプレKubernetesログのDatabricks on AWS蓄積機能開発案件

業務委託

東京都神谷町駅

670,000 ~ 850,000円/月額

募集状況を聞く（無料）

人気案件は申し込みが集中いたしますため、お早めに募集状況をお聞きください。
具体的な報酬単価・企業名・労働条件につきましては、お問い合わせ後に説明いたします。

案件詳細: オンプレサーバ(kubernetes)のログをDatabricks on AWS側に蓄積する機能開発案件です。システム基盤ログのセキュリティ分析・監視にSplunkを利用していますが、Databricksでも同様の分析・監視を可能にすることを目指します。オンプレのKubernetesログデータ(2TB/日)をDatabricksのbronzeテーブルに転送し、セキュリティ分析に活用できる基盤を構築します。スコープは、ログデータのDatabricksへの転送までとなり、データ加工やBIは含まれません。個人情報を含まないログデータを対象とします。 2027年1月までにデータ疎通テストを成功させ、2027年3月までにドキュメントを整備する予定です。 Databricks on AWSの構築に加え、オンプレサーバからのデータ送信基盤の提案も担当範囲となります。
開発言語: Terraform Linux Tableau fluentd SQL Snowflake ネットワーク Kubernetes AWS Databricks splunk セキュリティ bi
必須スキル・経験: ・Linuxサーバの構築経験・dbt、Snowflake、Fivetran、Tableau等の知見・基本的なネットワーク知識 (TCP/IP, ルーティングなど) ・syslog, fluentd, kafka, kubernetesに対する基本的な技術理解・顧客要望を受けて、顧客インフラ担当者と具体的な基盤構築要件を詰められること・基盤設計書やパラメータシート、運用手順書等のドキュメントを作成できること
尚可スキル・経験: ・systlog, Fluentd, Kafkaに類するシステムログ転送処理の機能設計/開発に関する経験・非機能要件を考慮した基盤設計の知見 (2TB/日のデータ転送に耐えうる性能設計および耐障害設計) ・AWSのネットワーク知見 (AWS Direct Connect, AWS Transit Gateway, AWS VPCなど) ・Databricks on AWSに関する知見
職種・ポジション: インフラエンジニアプロジェクトマネージャー(PM)クラウドエンジニアデータエンジニアシステムエンジニア(SE)サーバーエンジニア
キーワード: Kafka dbt
業界: 通信
募集背景: 2027年3月末までのプロジェクトですが、継続の可能性があります。
開発環境: Kubernetes, Databricks on AWS, Fluentd, Kafka
精算基準時間: 140時間〜180時間
参画時期: 2026/12
チーム規模: 1名～2名
勤務時間: 想定稼働時間：140～180時間/月
現場の雰囲気: 基本リモート
出社頻度: フルリモート
面談回数: 2回
商談方法: オンライン
PC貸与: あり
案件公開日時: 2026/11/10 18:01:05

おすすめポイント

通信業界では、増大するデータ量を効率的に分析・活用するための基盤整備が急務となっています。本案件は、オンプレミスのKubernetesログデータをDatabricks on AWSへ集約し、高度なセキュリティ分析を可能にするための重要なインフラ開発です。最新のデータプラットフォーム技術を活用し、セキュアでスケーラブルなログ分析基盤の構築に貢献できる、やりがいのあるプロジェクトです。

募集状況を聞く（無料）

案件について、詳しく聞いてみませんか？

フリーランスジョブでは、
あなたのご希望とご経歴に最適な案件を
エージェントが直接ご紹介します

無料で会員登録する