Sparkのフリーランス案件・求人一覧

・使用言語：Python

1人称で目的整理～分析設計～実分析～報告対応。 可視化、統計、機械学習、生成AIの各種対応。 お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること。

1人称で目的整理～分析設計～実分析～報告対応が必要。 可視化、統計、機械学習、生成AI、各種対応できること 生成AIは具体的な案件未定なので感触レベル お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること、は必須

・機械学習モデルを用いたモデル開発、及びMLOpsの経験 ・勾配ブースティングモデル（LightGBM, XGBoostなど）の深い理解 ・Pythonを用いた開発経験　5年以上 ・LLM（生成系AI）を用いたモデル開発経験 ・AWSをはじめとしたパブリッククラウドサービスでの開発経験

DWH／データレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift等） SQLによるデータ加工・分析経験（複雑なクエリ設計含む） Pythonによるデータ処理・分析経験（pandas、PySpark等） ETL／ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt等）

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL／ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上、またはApache Sparkを用いたデータバッチ処理の開発・運用経験、またはSpark環境におけるサイジングおよび性能チューニングの実務経験

ソフトウェアエンジニアリングの実務経験（3年以上） TypeScript での実装経験（1年以上） AIを活用し、仕組み・自動テスト（Autotest）・業務改善を実践した経験 テスト設計、手動テスト・検証の経験（品質視点で問題を発見し、適切なテストを設計・記述できる能力） ビジネス / CS / エンジニアなど、非エンジニア（非テクニカル層）との円滑なコミュニケーション経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境における、サイジングおよび性能チューニングの実務経験

AWS主要サービス(Step Functions、AWS Glue、Amazon Redshift、S3、IAM、VPC 等)の実務経験 オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで)

オンプレミスからAWS環境への移行プロジェクト経験(設計〜本番切替まで) AWS主要サービス(Step Functions、AWS Glue、Amazon Redshift、S3、IAM、VPC 等)の実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

データ分析経験（リーダーのみ）、ログの前処理・後処理経験、コーディングスキル（PySpark またはJava、シェルスクリプト（awscli））、BIツールを用いてのダッシュボード作成

データエンジニアリングまたはアナリティクスエンジニアリング経験5年以上 SQLおよびPythonを用いたデータパイプライン開発経験（Databricks／Spark／dbt等） AWS環境でのデータ基盤構築・運用経験およびGit／CI/CDの実務経験 Databricks上でのデータパイプライン設計・実装 Sparkなどのデータ処理フレームワークの実務経験

データエンジニアリングまたはアナリティクスエンジニアリングの実務経験（5年以上） SQLおよびPythonを用いたデータパイプライン開発経験 Databricks、Spark、dbtなどのデータ基盤関連技術の実務経験 AWS環境でのデータ基盤構築または運用経験 GitおよびCI/CDを用いた開発経験 設計や技術判断を主体的に推進できる方

・AWS環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定） ・BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング） ・AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング ・TerraformによるIaC実践（マルチクラウド or 複数環境）

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

・最適化や機械学習に関する開発経験 ・システムロジック開発経験 ・Pythonによるアルゴリズム構築経験 ・アルゴリズムのモジュール化経験

・最適化や機械学習に関する開発経験 ・システムロジック開発経験 ・Pythonによるアルゴリズム構築経験 ・アルゴリズムのモジュール化経験

・最適化や機械学習に関する開発経験 ・システムロジック開発経験 ・Pythonによるアルゴリズム構築経験 ・アルゴリズムのモジュール化経験

・最適化／機械学習の開発経験 ・顧客ヒアリング経験（業務フロー整理含む） ・Pythonによるアルゴリズム構築経験 ・モジュール化／チーム開発経験 ・テクニカルドキュメント作成スキル

- データエンジニア・データサイエンティストとしてPython（pandas／numpy／scikit-learn など）の活用経験 - LLM／生成AIの検証・本番化経験 - Git 等での開発フロー - 複数チームでの開発