PySparkのフリーランス案件・求人一覧

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

データ分析経験（リーダーのみ）、ログの前処理・後処理経験、コーディングスキル（PySpark またはJava、シェルスクリプト（awscli））、BIツールを用いてのダッシュボード作成

・sagemaker、vertex ai、Kubeflowなどで課題に応じた適切なMLOps基盤の構築経験および継続的な改善経験 ・DVCやRDB・NoSQLなどを用いたデータセットを管理機構の構築・運用経験 ・ CI/CDの構築経験　もしくは　CI/CDが設計された開発環境での経験

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider 等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift 等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions 等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

AWS環境でのインフラ構築・運用経験（S3/IAM/VPC等）、GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定）、BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング）、AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング、TerraformによるIaC実践（マルチクラウド or 複数環境）

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング Terraform による IaC 実践（マルチクラウド or 複数環境）

・AI開発の実務経験（Pythonなど） ・AI開発を含むプロジェクトのPM経験

Azure Data Factoryを用いたデータパイプラインの設計・開発経験 Azure Synapse Analytics (旧Azure SQL DW) または同等のDWH製品の利用経験 SQLを用いたデータ抽出・加工・分析スキル Power BIまたは同等のBIツールを用いたレポーティング・ダッシュボード作成経験 顧客やチームメンバーと円滑なコミュニケーションを取り、主体的にPJを推進できる能力

・AI開発の実務経験（Pythonなど） ・AI開発を含むプロジェクトのPM経験

・AI開発の実務経験（Pythonなど） ・AI開発を含むプロジェクトのPM経験

・計算機科学、情報科学、統計学もしくは類似する技術領域の修士号をお持ちの方 ・論文中の数式をPythonなどのプログラムで実装できる方 ・Pythonを用いた機械学習モデルの開発もしくは業務データ分析のご経験 ・チームでの開発経験3年以上

・使用言語：Python

・機械学習モデルを用いたモデル開発、及びMLOpsの経験 ・勾配ブースティングモデル（LightGBM, XGBoostなど）の深い理解 ・Pythonを用いた開発経験　5年以上 ・LLM（生成系AI）を用いたモデル開発経験 ・AWSをはじめとしたパブリッククラウドサービスでの開発経験

インフラ、ネットワーク、サーバ

・Snowflakeの開発経験 ・SQL ・AWSサービスを用いての設計、開発、テスト経験 ・コミュニケーション力

・Snowflakeの開発経験 ・SQL ・AWSサービスを用いての設計、開発、テスト経験 ・コミュニケーション力

DWH／データレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift等） SQLによるデータ加工・分析経験（複雑なクエリ設計含む） Pythonによるデータ処理・分析経験（pandas、PySpark等） ETL／ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt等）

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL／ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

①OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上 ② Apache Sparkを用いたデータバッチ処理の開発・運用経験 ③ Spark環境におけるサイジングおよび性能チューニングの実務経験

OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上、またはApache Sparkを用いたデータバッチ処理の開発・運用経験、またはSpark環境におけるサイジングおよび性能チューニングの実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験 Spark環境におけるサイジングおよび性能チューニングの実務経験

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力