PySparkのフリーランス案件・求人一覧

Pythonでバッチ処理開発の経験 基本設計から1人称で対応可能な方 Python、AWS環境下での開発経験

データ基盤／DWH移行におけるテスト・検証の実務経験（基盤・非機能観点：データ整合／性能／接続等） Databricksの実務知見（構造・挙動を理解し、テスト設計・実行・不具合切り分けが可能な水準） ITインフラ／基盤観点で構成・挙動を捉えられる素養（インフラ／基盤エンジニアの経験）

Databricksによるデータ処理開発経験 DWHの設計・構築経験 Domoの設計・開発経験

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLを用いたデータ抽出、加工、調査の経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

AWS Glue,Step Functions,EventBridge 開発経験 PySpark 開発経験 SQL経験（データ抽出,加工,調査） Git経験

Databricksによるデータ処理開発経験 DWHの設計・構築経験 Domoの設計・開発経験

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLを用いたデータ抽出、加工、調査の経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

Pythonを用いた開発／データ加工経験 SQL（Oracle）を用いたデータ操作経験 必要なカラムを選択し、データ加工／抽出できる方 データマートまたはデータパイプライン構築経験 要件／仕様を理解し、主体的に実装まで進められる方

データエンジニアリング分野で6~10年の実務経験 (うち3年以上はSnowflake、DBT、Apache Airflow/MWAAの実践経験) 本番環境向けデータパイプラインの設計・開発・導入・運用実績 英語:ビジネスレベル以上(会話・読み書き) Snowflake:各種機能活用、パフォーマンス・コスト最適化、セキュリティ管理の実務経験 DBT:プロジェクト開発・保守経験(モデル、マクロ、Incremental Models、CI/CD連携等) SQL / Oracle:高度な実務スキル(JOIN、Window関数、PL/SQL、ストアドプロシージャ等) データ基礎:データ構造・変換・品質管理・モデリング・インクリメンタル処理等の深い理解 Python:高レベルなスキル(Pandas、PySparkによる分散処理・データ変換) MWAA / Apache Airflow:DAG開発、依存関係管理、トラブルシューティングの実務経験 AWS:データ領域サービス(S3, Glue, Lambda, Step Functions等)の実務知識

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

Pythonでバッチ処理開発の経験 基本設計からご対応可能な方 Python（PySpark）、AWS（Glue）の環境下での開発経験

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

・Pysparkのコーディングに精通していること。※1人称で自走できること ・Pysparkでパフォーマンスチューニングの経験があること

・日本語/英語バイリンガル ・テクニカルリードの経験 ・SQLによるクエリ開発経験 ・Azureサービスとの連携経験 (Azure Data Lake、Azure Synapseなど)

・日本語/英語バイリンガル ・テクニカルリードの経験 ・SQLによるクエリ開発経験 ・Azureサービスとの連携経験 (Azure Data Lake、Azure Synapseなど)

・日本語/英語バイリンガル ・テクニカルリードの経験 ・SQLによるクエリ開発経験 ・Azureサービスとの連携経験 (Azure Data Lake、Azure Synapseなど)

Python/Pyspark(またはSpark/SQL)の経験 Pythonを利用したアプリケーション開発経験 PySpark、Spark、SQLのいずれかを利用したデータ処理の開発経験 アプリケーション設計・開発経験 全般 AIコーディングツール（Claude Code等）を活用

データ分析経験（リーダーのみ）、ログの前処理・後処理経験、コーディングスキル（PySpark またはJava、シェルスクリプト（awscli））、BIツールを用いてのダッシュボード作成

・運用オペレーターのご経験 ・夜勤経験者

・AWS Glue（VisualETL） or PySparkの経験 ※上記、どちらか一方でも可 ・RDBMSの経験 ・Python ・SQL ・Amazon Redshift ・Amazon S3 ・Power BI

GlueでのETL処理経験 PySpark経験 単純作業でも継続できる忍耐力・責任感

・AWS Glue（VisualETL） or PySparkの経験 ※上記、どちらか一方でも可 ・RDBMSの経験

・AWS Glue（VisualETL） or PySparkの経験がある方 ※上記、どちらか一方でも可 ・RDBMSの経験

下記いずれかのご経験 ・AWS GlueでVisualETL　ご経験 ・PySpark　ご経験 RDBMS　ご経験

・日本語/英語バイリンガル ・テクニカルリードの経験 ・Azure DatabricksもしくはPySparkを用いた開発経験 ・SQLによるクエリ開発経験 ・Azureサービスとの連携経験(Azure Data Lake、Azure Synapseなど)

SQL、ETL、PySpark、Databricks

・PySpark/Apache Kafka/Apache Flinkのいずれかの使用経験

・sagemaker、vertex ai、Kubeflowなどで課題に応じた適切なMLOps基盤の構築経験および継続的な改善経験 ・DVCやRDB・NoSQLなどを用いたデータセットを管理機構の構築・運用経験 ・ CI/CDの構築経験　もしくは　CI/CDが設計された開発環境での経験

・要件定義、設計などの上流工程経験 ・PowerAutomate、PowerAppsなどMicrosoft製品の有識者または学習意欲 ・RPAの概念理解 ・英語：資料やメールの読み書きができるレベル（翻訳ツール使用可）

・Uipath開発経験（2年以上） なければ、Uipath以外でのプラットフォームでRPA開発経験2年以上 ・お客様とのコミュニケーション能力 現場常駐にてお客様との直接コミュニケーションが発生します。 お客様側の知識レベルに合わせた会話が必要です。 ・VBA開発経験 UiPathでの開発に関連してVBAを使った開発の可能性もあるため