Sparkのフリーランス案件・求人一覧

①OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上 ② Apache Sparkを用いたデータバッチ処理の開発・運用経験 ③ Spark環境におけるサイジングおよび性能チューニングの実務経験

バックエンド開発経験、または、データエンジニアとしての開発経験 実データ（生データ）を扱ったデータの加工・集計・パフォーマンスチューニングの経験（SQL等） AWSを始めとするクラウドサービスを利用した開発経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験 Spark環境におけるサイジングおよび性能チューニングの実務経験

- バックエンド開発経験、または、データエンジニアとしての開発経験 - 実データ（生データ）を扱ったデータの加工・集計・パフォーマンスチューニングの経験（SQL等） - AWSを始めとするクラウドサービスを利用した開発経験

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

データ基盤／ストレージの構築・運用経験 LinuxおよびOSS環境での構築・運用経験 S3互換オブジェクトストレージ、POSIX、ブロックストレージの知識 英語ドキュメントを読み解き、主体的に調査・検証を進められる方 顧客との技術的な折衝、報告書作成、技術説明の経験

基本設計から1人称で対応可能な方（SE）、Pythonでのバッチ処理開発経験、Python（PySpark）、AWS（Glue）環境下での開発経験、高稼働下でも作業完遂に向けて協力できる方

ソフトウェアエンジニアリング経験3年以上 TypeScriptでの開発経験1年以上 テスト自動化フレームワーク（Jest、Playwright、Vitestなど）の利用経験 テスト設計経験

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

ソフトウェアエンジニア経験 (3年以上) 　 - TypeScript での開発経験 AIを活用し、自動テストや業務改善を実践した経験 品質視点でのテスト設計、手動テスト・検証のご経験 ビジネス / CS / エンジニアなど、非エンジニアとのコミュニケーション経験

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider 等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift 等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions 等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

Databricksによるデータ処理開発経験 DWHの設計・構築経験 Domoの設計・開発経験

・大規模インフラプロジェクトにおけるPMまたはリード経験 ・数十〜100名規模のシステム、またはマルチチームが動くプロジェクトでのインフラ領域マネジメント実績 ・エンタープライズ向けデータ基盤／クラウド基盤の構築・運用経験 　AWS、Google Cloud、Azureなどのパブリッククラウドを活用した大規模アーキテクチャの知見 ・ステークホルダーとの高い合意形成スキル 　抽象的な要望から要件を定義し、顧客や他チームと能動的に仕様調整・提案ができる能力

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL／ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLを用いたデータ抽出、加工、調査の経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

PythonおよびSQLを用いたデータマート・データパイプライン構築の実務経験

大規模データ基盤（DWH）設計・構築経験 高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 IaC/RAG基盤/分散処理を用いた運用経験

ソフトウェアエンジニアリングの実務経験 （3年以上） TypeScriptを用いた実装経験 （1年以上） テスト設計/手動テスト/検証経験

OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上、またはApache Sparkを用いたデータバッチ処理の開発・運用経験、またはSpark環境におけるサイジングおよび性能チューニングの実務経験

Pythonでバッチ処理開発の経験 基本設計から1人称で対応可能な方 Python（PySpark）、AWS（Glue）環境下での開発経験

Databricksによるデータ処理開発経験 DWHの設計・構築経験 Domoの設計・開発経験

・大規模データ基盤（DWH）設計・構築経験 ・高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 ・IaC/RAG基盤/分散処理を用いた運用経験

大規模インフラプロジェクトにおけるPMまたはリード経験（数十〜100名規模、またはマルチチームマネジメント実績） エンタープライズ向けデータ基盤／クラウド基盤（AWS、Google Cloud、Azure等）の構築・運用経験 ステークホルダーとの高い合意形成スキル（抽象的な要望からの要件定義、能動的な調整・提案力）

データエンジニア または アナリティクスエンジニアとしての業務経験 SQLを使ったデータ集計 何らかのデータベースの利用経験 Pythonなど何らかのプログラム言語を用いたコーディング経験 Hadoopなどの大規模データの分散処理技術を用いた業務経験

データエンジニア または アナリティクスエンジニアとしての業務経験 SQLを使ったデータ集計 何らかのデータベースの利用経験 Pythonなど何らかのプログラム言語を用いたコーディング経験 Hadoopなどの大規模データの分散処理技術を用いた業務経験

大規模インフラプロジェクトにおけるPMまたはリード経験（数十〜100名規模、またはマルチチームマネジメント実績） エンタープライズ向けデータ基盤／クラウド基盤（AWS、Google Cloud、Azure等）の構築・運用経験 ステークホルダーとの高い合意形成スキル（抽象的な要望からの要件定義、能動的な調整・提案力）

Python(2年以上), SQL(2年以上), システム開発に関する設計・開発・テスト経験(3年以上)

Pythonでバッチ処理開発の経験 基本設計からご対応可能な方 Python（PySpark）、AWS（Glue）の環境下での開発経験