Spark×リモートワーク・在宅可のフリーランス案件・求人一覧

担当領域において、一人称で調査・設計・実装・検証を進められること 既存システムやデータの構造を理解し、課題を整理した経験 仮説を立てて検証を行い、結果に基づいて改善策を検討した経験 調査結果や技術的な課題を、関係者に分かりやすく説明・共有できること 【技術リード】 Databricksを用いたデータ基盤の設計・構築経験 リレーションを踏まえたデータ設計・データモデリング経験 PoCの検証方針・評価観点を定め、技術課題や優先順位を判断した経験 【データエンジニア】 SQLを用いたデータ調査・抽出・加工経験 Python/PySparkを用いたデータ処理の実装経験 ETLまたはデータパイプラインの設計・開発経験 RDBのテーブル構造・リレーションに関する理解 DatabricksでのBronze/Silver層の構築に対応できる知識・経験 【AIエンジニア】 RAGを用いた検索システムの開発または改善経験 LLM APIを利用した開発経験 Embeddingやベクトル検索に関する知識・実装経験 検索結果や回答内容を評価し、データ加工やプロンプト調整によって精度改善を行った経験

Python、RDB（Microsoft SQL Server）を用いた設計・製造経験 求められている成果を理解し、個人で成果物を作成できること ロジカルシンキングができること 業務経験3年以上 コミュニケーションが良好で、一人称で動ける方

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLを用いたデータ抽出、加工、調査の経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

担当領域において、一人称で調査・設計・実装・検証を進められること。既存システムやデータの構造を理解し、課題を整理した経験。仮説を立てて検証を行い、結果に基づいて改善策を検討した経験。調査結果や技術的な課題を、関係者に分かりやすく説明・共有できること。 【技術リード】Databricksを用いたデータ基盤の設計・構築経験。リレーションを踏まえたデータ設計・データモデリング経験。PoCの検証方針・評価観点を定め、技術課題や優先順位を判断した経験。 【データエンジニア】SQLを用いたデータ調査・抽出・加工経験。Python/PySparkを用いたデータ処理の実装経験。ETLまたはデータパイプラインの設計・開発経験。RDBのテーブル構造・リレーションに関する理解。DatabricksでのBronze/Silver層の構築に対応できる知識・経験。 【AIエンジニア】RAGを用いた検索システムの開発または改善経験。LLM APIを利用した開発経験。Embeddingやベクトル検索に関する知識・実装経験。検索結果や回答内容を評価し、データ加工やプロンプト調整によって精度改善を行った経験。

データ基盤／DWH移行におけるテスト・検証の実務経験（基盤・非機能観点：データ整合／性能／接続等） Databricksの実務知見（構造・挙動を理解し、テスト設計・実行・不具合切り分けが可能な水準） ITインフラ／基盤観点で構成・挙動を捉えられる素養（インフラ／基盤エンジニアの経験）

Databricksによるデータ処理開発経験 DWHの設計・構築経験 Domoの設計・開発経験

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLを用いたデータ抽出、加工、調査の経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

Pythonでの開発経験 AWS環境での開発経験 基本設計の経験

データエンジニアリング分野で6~10年の実務経験 (うち3年以上はSnowflake、DBT、Apache Airflow/MWAAの実践経験) 本番環境向けデータパイプラインの設計・開発・導入・運用実績 英語:ビジネスレベル以上(会話・読み書き) Snowflake:各種機能活用、パフォーマンス・コスト最適化、セキュリティ管理の実務経験 DBT:プロジェクト開発・保守経験(モデル、マクロ、Incremental Models、CI/CD連携等) SQL / Oracle:高度な実務スキル(JOIN、Window関数、PL/SQL、ストアドプロシージャ等) データ基礎:データ構造・変換・品質管理・モデリング・インクリメンタル処理等の深い理解 Python:高レベルなスキル(Pandas、PySparkによる分散処理・データ変換) MWAA / Apache Airflow:DAG開発、依存関係管理、トラブルシューティングの実務経験 AWS:データ領域サービス(S3, Glue, Lambda, Step Functions等)の実務知識

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

ソフトウェアエンジニアリング経験3年以上 TypeScriptでの開発経験1年以上 テスト自動化フレームワーク(Jest、Playwright、Vitestなど)の利用経験 テスト設計経験

・Databricks / Spark の開発経験（3年以上目安） ・Sparkクラスタのチューニング経験 ・大規模データ（数億件規模）の処理経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験 現行データ分析基盤(Talend、RedShift)の課題や改善点など抽出可能な方

①OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上 ② Apache Sparkを用いたデータバッチ処理の開発・運用経験 ③ Spark環境におけるサイジングおよび性能チューニングの実務経験

バックエンド開発経験、または、データエンジニアとしての開発経験 実データ（生データ）を扱ったデータの加工・集計・パフォーマンスチューニングの経験（SQL等） AWSを始めとするクラウドサービスを利用した開発経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験 Spark環境におけるサイジングおよび性能チューニングの実務経験

- バックエンド開発経験、または、データエンジニアとしての開発経験 - 実データ（生データ）を扱ったデータの加工・集計・パフォーマンスチューニングの経験（SQL等） - AWSを始めとするクラウドサービスを利用した開発経験

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・databricksの構築経験 ・業界経験3年以上 ・インフラの知見、経験 ・一人称で対応出来る方 ・勤怠に問題無い方、自発的に動ける方

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・基本設計～開発、試験工程までの経験を一人称で対応可能 ・自主的に動ける方 ・Spark、Linux、RDBでの開発経験（特にシェル作り込みなどLinuxに長けていること）

セキュリティと利便性を考慮したデータプラットフォームの設計・開発・運用経験 品質や再利用性を考慮したデータパイプラインの設計・開発・運用経験 Databricks上でのデータプラットフォーム開発・運用の経験 Terraformの開発・運用の経験 AWS上での開発経験 Infrastructure as Code (IaC)の開発・運用経験

Databricks活用経験 要件定義など上流工程の対応経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・LightGBMの使用経験 ・機械学習のアルゴリズムの知見（売上や需要予測） ・基本的なコミュニケーション能力

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験