Sparkのフリーランス案件・求人一覧

Databricksを使用した経験（年数不問） ※自己学習レベルの方やSnowflake経験者も相談可能です。

・基本設計～開発、試験工程までの経験を一人称で対応可能 ・自主的に動ける方 ・Spark、Linux、RDBでの開発経験（特にシェル作り込みなどLinuxに長けていること）

セキュリティと利便性を考慮したデータプラットフォームの設計・開発・運用経験 品質や再利用性を考慮したデータパイプラインの設計・開発・運用経験 Databricks上でのデータプラットフォーム開発・運用の経験 Terraformの開発・運用の経験 AWS上での開発経験 Infrastructure as Code (IaC)の開発・運用経験

Databricks活用経験 要件定義など上流工程の対応経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・LightGBMの使用経験 ・機械学習のアルゴリズムの知見（売上や需要予測） ・基本的なコミュニケーション能力

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験

・ネットワーク運用保守（3年以上） ・ログ調査、不具合調査の経験 ・運用設計などマニュアル作成経験

・大量のトランザクションデータを使って顧客の行動予測した経験 ・機械学習モデルの学習、評価、デプロイ経験 ・大量データのパイプラインをDatabricks上で、設計・実装経験

・DWH／データパイプライン開発・運用経験 ・Pythonを用いたデータ処理の実務経験 ・SQLによるデータ加工・集計の実務経験 ・Apache Spark / PySpark ・Databricks ・複数名チームでのプロジェクト参画経験

移動体や時系列の大規模なraw（生）データの処理経験 データパイプラインシステム（データ処理基盤）の構築経験 クラウド環境（特にAWS：S3,EC2,EKS,EMR,AWS Glue,Athena,RDSなど）での実務経験 Apache Sparkなどのビッグデータフレームワークの利用経験 Python,Java,SQL,Linux,Bashの実務経験 生データの内容を把握した上でのデータ比較/加工/集計/分析要件定義、およびデータベースやサーバーサイドの設計/実装/ドキュメンテーション能力

dbt（core）または Dataform を用いたデータモデリング設計・ワークフロー（パイプライン）構築経験 BigQuery を中心とした GCP 環境での実務経験 新しいツール・技術へのキャッチアップ意欲

Databricks（Delta Lake・メダリオンアーキテクチャ・ジョブ設計）、Snowflake（スキーマ設計・データ連携）、Python / SQL（Sparkパイプラインの読み解き・移行実装）、ETL/ELT パイプラインの設計・構築経験

PythonまたはSQLを用いた業務経験5年以上 クラウド環境（Azure/AWS/GCP等）での業務経験 データ処理、バッチ処理、ETL等の経験 英語でのコミュニケーションに抵抗がない方（外国籍メンバーとの打合せあり） 関係者とコミュニケーションを取りながら業務を進められる方

PythonまたはSQLを用いた業務経験 クラウド環境（Azure/AWS/GCP等）での業務経験 データ処理、バッチ処理、ETL等の経験 英語でのコミュニケーションに抵抗がない方（外国籍メンバーとの打合せあり） 関係者とコミュニケーションを取りながら業務を進められる方

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

HadoopまたはApache Sparkの運用業務経験 インフラ支援業務の経験 円滑なコミュニケーション能力

HadoopまたはApache Sparkの運用業務経験 インフラ支援業務の経験 円滑なコミュニケーション能力

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

データ基盤 / DWHのアーキテクチャ設計経験 大規模データ処理（数千万〜数億レコード規模）の設計・開発経験 クラウド環境におけるデータ基盤構築経験（GCP / AWS / OCI 等） SQL / Pythonを用いたデータパイプライン開発経験 データモデリング（DWH / OBT / Star Schema等）の実務経験 データ基盤におけるアクセス制御・セキュリティ設計経験

Databricksの運用・保守経験（設計・構築まで経験あれば尚良し） クラウド（Azure）の運用・保守経験（設計・構築まで経験あれば尚良し） DWH・ETLシステムの運用・保守経験（設計・構築まで経験あれば尚良し） ジョブ管理ツールの運用・保守の経験（System Wallker Operayion Manager）

Pythonを用いた開発実務経験 SQL, Power Query, VBAを用いた実務経験 AWS環境（Glue, Athena等）の知見・利用経験 データ分析業務経験（データマート作成、分析基盤の構築・運用） ETL処理の開発・運用経験 生成AI（GitHub Copilot等）の導入・活用に意欲的な方 GitHubを用いたソースおよびドキュメント管理の経験

Redshift, Glue, QuickSightなどのインフラ構築経験(IaC/CDK) DWH内のスキーマやテーブル作成経験 Pythonを用いた開発経験(PySparkの習得意欲がある方) QuickSightでのダッシュボード開発経験(GUIベース)

Webアプリケーションでのオンライン処理開発に関する一般的な技術 （Web画面/アプリケーションの設計、製造、テスト） SQLでの基本的なクエリのコーディング、オペレーション AWS環境での基本的なオペレーション linux環境での基本的なオペレーション

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

AWS環境でのインフラ構築・運用経験（S3/IAM/VPC等）、GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定）、BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング）、AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング、TerraformによるIaC実践（マルチクラウド or 複数環境）

AWS 基盤(EC2/ALB/Aurora/PostgreSQL/S3/Glue/CloudWatch)の構築 Aurora PostgreSQL のスキーマ/テーブル設計の理解 Glue(PySpark/Python)による ETL(抽出/変換/CSV/日次/失敗検知/リトライ/ログ連携) Okta 連携 SSO/ユーザ ID 自動連携、MasterInfinity の権限/運用