Sparkのフリーランス案件・求人一覧

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

Databricks運用経験 Terraformによる定義修正 AWS(IAM/S3等)の理解 障害一次対応/解析

AWS中心のクラウドサービス利用経験（設計／構築／運用／保守いずれか）、クラウド環境の基本設計思想／運用知識、SQL実務経験、Gitを用いた開発／運用経験、IT経験2年以上

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLの実装経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

TypeScriptもしくはJavaScript、CSS、の業務経験 RDBに関する知識・経験 Pythonの業務経験（未経験の場合は、他言語の経験をもとにキャッチアップ頂けること。主にデータ加工の際にPysparkを使用） 開発メンバーとしてリーダーやチームメンバーと双方向でコミュニケーションを行いながら、自立的にタスクや課題を遂行できる

Databricks運用経験 Terraformによる定義修正 AWS(IAM/S3等)の理解 障害一次対応/解析

大規模データ基盤（DWH）設計・構築経験 高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 最新技術（IaC/RAG基盤/分散処理）を用いた運用経験

Databricks(SQL/Python、PySpark、Delta Lake)の開発経験 PowerBI(Power Query、DAX)の開発経験 英語の読み取り(翻訳ツール使用OK / 英文作成は不要)

大規模データ基盤（DWH）設計・構築経験 高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 最新技術（IaC/RAG基盤/分散処理）を用いた運用経験

SQLの実務経験 PySpark, またはPythonの経験 課題解決のためのコミュニケーション（質問/報告/相談）を積極的に取れる方 基本設計～の経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験 現行データ分析基盤(Talend、RedShift)の課題や改善点など抽出可能な方

以下いずれかの組み合わせや類似スキルでの提案も応相談 ・Databricks（Apache Sparkパイプライン開発／DeltaLake構築）もしくは他ETL製品によるデータ加工 ・SAS Viya／SAS EG ・AWS（S3） ・Azure（Blob Storage） ・Google Cloud（BigQuery）

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・databricksの構築経験 ・業界経験3年以上 ・インフラの知見、経験 ・一人称で対応出来る方 ・勤怠に問題無い方、自発的に動ける方

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

Databricksを使用した経験（年数不問） ※自己学習レベルの方やSnowflake経験者も相談可能です。

・基本設計～開発、試験工程までの経験を一人称で対応可能 ・自主的に動ける方 ・Spark、Linux、RDBでの開発経験（特にシェル作り込みなどLinuxに長けていること）

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・LightGBMの使用経験 ・機械学習のアルゴリズムの知見（売上や需要予測） ・基本的なコミュニケーション能力

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験

・ネットワーク運用保守（3年以上） ・ログ調査、不具合調査の経験 ・運用設計などマニュアル作成経験

・大量のトランザクションデータを使って顧客の行動予測した経験 ・機械学習モデルの学習、評価、デプロイ経験 ・大量データのパイプラインをDatabricks上で、設計・実装経験

HadoopまたはApache Sparkの運用業務経験 インフラ支援業務の経験 円滑なコミュニケーション能力

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

データ基盤 / DWHのアーキテクチャ設計経験 大規模データ処理（数千万〜数億レコード規模）の設計・開発経験 クラウド環境におけるデータ基盤構築経験（GCP / AWS / OCI 等） SQL / Pythonを用いたデータパイプライン開発経験 データモデリング（DWH / OBT / Star Schema等）の実務経験 データ基盤におけるアクセス制御・セキュリティ設計経験

Databricksの運用・保守経験（設計・構築まで経験あれば尚良し） クラウド（Azure）の運用・保守経験（設計・構築まで経験あれば尚良し） DWH・ETLシステムの運用・保守経験（設計・構築まで経験あれば尚良し） ジョブ管理ツールの運用・保守の経験（System Wallker Operayion Manager）

Pythonを用いた開発実務経験 SQL, Power Query, VBAを用いた実務経験 AWS環境（Glue, Athena等）の知見・利用経験 データ分析業務経験（データマート作成、分析基盤の構築・運用） ETL処理の開発・運用経験 生成AI（GitHub Copilot等）の導入・活用に意欲的な方 GitHubを用いたソースおよびドキュメント管理の経験