Spark×リモートワーク・在宅可のフリーランス案件・求人一覧

大規模データ基盤（DWH）設計・構築経験 GCP環境でのデータ設計～実装経験 大量データの分散処理経験

Pythonでの開発経験 AWS環境での開発経験 基本設計の経験

データエンジニアリング分野で6~10年の実務経験 (うち3年以上はSnowflake、DBT、Apache Airflow/MWAAの実践経験) 本番環境向けデータパイプラインの設計・開発・導入・運用実績 英語:ビジネスレベル以上(会話・読み書き) Snowflake:各種機能活用、パフォーマンス・コスト最適化、セキュリティ管理の実務経験 DBT:プロジェクト開発・保守経験(モデル、マクロ、Incremental Models、CI/CD連携等) SQL / Oracle:高度な実務スキル(JOIN、Window関数、PL/SQL、ストアドプロシージャ等) データ基礎:データ構造・変換・品質管理・モデリング・インクリメンタル処理等の深い理解 Python:高レベルなスキル(Pandas、PySparkによる分散処理・データ変換) MWAA / Apache Airflow:DAG開発、依存関係管理、トラブルシューティングの実務経験 AWS:データ領域サービス(S3, Glue, Lambda, Step Functions等)の実務知識

大規模データ基盤（DWH）設計・構築経験 高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 IaC/RAG基盤/分散処理を用いた運用経験

データエンジニア または アナリティクスエンジニア としての業務経験 SQLを使ったデータ集計 何らかのデータベースの利用経験 Pythonなど何らかのプログラム言語を用いたコーディング経験 Hadoopなどの大規模データの分散処理技術を用いた業務経験

Databricksによるデータ処理開発経験 DWHの設計・構築経験 Domoの設計・開発経験

大規模データ基盤（DWH）設計・構築経験 高度なデータモデリングおよびパイプライン開発（SQL/Python）経験 IaC/RAG基盤/分散処理を用いた運用経験

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL／ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

AWSのサービスの利用経験（Glue、StepFunctions、CloudWatch、APIGatewayなど） SQLを用いたデータ抽出、加工、調査の経験 Gitの使用経験 明るく、自発的、能動的にコミュニケーションを取れる方

・データ基盤/ストレージの自力構築・運用経験 （Linux+OSS、S3互換オブジェクトストレージ/POSIX/ブロックストレージの理解） ・高い自走力（英語ドキュメントの解読、検証内容の主導的決定・推進） ・顧客との直接・対等な技術議論、および報告書作成・説明能力 ・1人称でプロジェクトを遂行できる方

・データ基盤/ストレージの自力構築・運用経験 （Linux+OSS、S3互換オブジェクトストレージ/POSIX/ブロックストレージの理解） ・高い自走力（英語ドキュメントの解読、検証内容の主導的決定・推進） ・顧客との直接・対等な技術議論、および報告書作成・説明能力 ・1人称でプロジェクトを遂行できる方

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

ソフトウェアエンジニアリング経験3年以上 TypeScriptでの開発経験1年以上 テスト自動化フレームワーク(Jest、Playwright、Vitestなど)の利用経験 テスト設計経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験（3年以上）、Spark環境におけるサイジングおよび性能チューニングの実務経験

SQLの業務経験(3年以上) システム開発に関する設計・開発・テストの経験(1年以上)

SQLを用いた実務経験が3年以上 システム開発における設計、開発、テストの経験が1年以上

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

・Databricks / Spark の開発経験（3年以上目安） ・Sparkクラスタのチューニング経験 ・大規模データ（数億件規模）の処理経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験 現行データ分析基盤(Talend、RedShift)の課題や改善点など抽出可能な方

①OCI環境における、Dataflowを利用したバッチ処理基盤の構築・運用経験1年以上 ② Apache Sparkを用いたデータバッチ処理の開発・運用経験 ③ Spark環境におけるサイジングおよび性能チューニングの実務経験

バックエンド開発経験、または、データエンジニアとしての開発経験 実データ（生データ）を扱ったデータの加工・集計・パフォーマンスチューニングの経験（SQL等） AWSを始めとするクラウドサービスを利用した開発経験

Apache Sparkを用いたデータバッチ処理の開発・運用経験 Spark環境におけるサイジングおよび性能チューニングの実務経験

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・databricksの構築経験 ・業界経験3年以上 ・インフラの知見、経験 ・一人称で対応出来る方 ・勤怠に問題無い方、自発的に動ける方

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・基本設計～開発、試験工程までの経験を一人称で対応可能 ・自主的に動ける方 ・Spark、Linux、RDBでの開発経験（特にシェル作り込みなどLinuxに長けていること）

セキュリティと利便性を考慮したデータプラットフォームの設計・開発・運用経験 品質や再利用性を考慮したデータパイプラインの設計・開発・運用経験 Databricks上でのデータプラットフォーム開発・運用の経験 Terraformの開発・運用の経験 AWS上での開発経験 Infrastructure as Code (IaC)の開発・運用経験

Databricks活用経験 要件定義など上流工程の対応経験