Spark×リモートワーク・在宅可のフリーランス案件・求人一覧

①OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上 ② Apache Sparkを用いたデータバッチ処理の開発・運用経験 ③ Spark環境におけるサイジングおよび性能チューニングの実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験 Spark環境におけるサイジングおよび性能チューニングの実務経験

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider 等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift 等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions 等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上、またはApache Sparkを用いたデータバッチ処理の開発・運用経験、またはSpark環境におけるサイジングおよび性能チューニングの実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

ソフトウェアエンジニアリングの実務経験（3年以上） TypeScript での実装経験（1年以上） AIを活用し、仕組み・自動テスト（Autotest）・業務改善を実践した経験 テスト設計、手動テスト・検証の経験（品質視点で問題を発見し、適切なテストを設計・記述できる能力） ビジネス / CS / エンジニアなど、非エンジニア（非テクニカル層）との円滑なコミュニケーション経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境における、サイジングおよび性能チューニングの実務経験

オンプレミスからAWS環境への移行プロジェクト経験(設計〜本番切替まで) AWS主要サービス(Step Functions、AWS Glue、Amazon Redshift、S3、IAM、VPC 等)の実務経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験

・大量のトランザクションデータを使って顧客の行動予測した経験 ・機械学習モデルの学習、評価、デプロイ経験 ・大量データのパイプラインをDatabricks上で、設計・実装経験

PythonまたはSQLを用いた業務経験 クラウド環境（Azure/AWS/GCP等）での業務経験 データ処理、バッチ処理、ETL等の経験 英語でのコミュニケーションに抵抗がない方（外国籍メンバーとの打合せあり） 関係者とコミュニケーションを取りながら業務を進められる方

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

・Pythonでの開発経験（3年以上） ・Qiskit, PennyLane, Cirqなどの量子開発フレームワークの利用経験 ・量子アルゴリズムに関する基礎知識（Grover, QAOA, VQE など） ・機械学習／数理最適化に関する理解 ・Gitなどを用いたチーム開発経験

・Pythonの活用 ・音声感情認識または表情認識の実装経験 ・自然言語処理・対話モデル（Rasa, LLM, Dialogflowなど）の利用経験 ・ROS/ROS2 を用いたロボット開発経験 ・センサーデータ（カメラ、マイク、距離センサなど）を扱った実務経験

・LangGraph、LlamaIndexなどを用いたエージェント構築の経験 ・LangChainやGradioを用いた開発経験 ・LLMファインチューニングやデータパイプラインの構築経験 ・LLM/AIモデルの学習・評価・運用経験

・API開発経験 ・モデルのAPI化やバックエンド・インフラ連携を考慮したシステム開発経験が2年以上ある方 ・AWSの使用経験 ・AWSサービス（特にSageMakerやLambdaを含む）を用いたシステム構築の経験が2年以上ある方 ・AI/機械学習の実務経験 ・AIや機械学習技術の調査・検証、フィジビリティスタディ、プロダクトへの実装経験が3年以上ある方

・計算機科学、情報科学、統計学もしくは類似する技術領域の修士号をお持ちの方 ・論文中の数式をPythonなどのプログラムで実装できる方 ・Pythonを用いた機械学習モデルの開発もしくは業務データ分析のご経験 ・チームでの開発経験3年以上

・使用言語：Python

1人称で目的整理～分析設計～実分析～報告対応。 可視化、統計、機械学習、生成AIの各種対応。 お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること。

・機械学習モデルを用いたモデル開発、及びMLOpsの経験 ・勾配ブースティングモデル（LightGBM, XGBoostなど）の深い理解 ・Pythonを用いた開発経験　5年以上 ・LLM（生成系AI）を用いたモデル開発経験 ・AWSをはじめとしたパブリッククラウドサービスでの開発経験