Spark×リモートワーク・在宅可のフリーランス案件・求人一覧

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験 現行データ分析基盤(Talend、RedShift)の課題や改善点など抽出可能な方

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・databricksの構築経験 ・業界経験3年以上 ・インフラの知見、経験 ・一人称で対応出来る方 ・勤怠に問題無い方、自発的に動ける方

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

・基本設計～開発、試験工程までの経験を一人称で対応可能 ・自主的に動ける方 ・Spark、Linux、RDBでの開発経験（特にシェル作り込みなどLinuxに長けていること）

セキュリティと利便性を考慮したデータプラットフォームの設計・開発・運用経験 品質や再利用性を考慮したデータパイプラインの設計・開発・運用経験 Databricks上でのデータプラットフォーム開発・運用の経験 Terraformの開発・運用の経験 AWS上での開発経験 Infrastructure as Code (IaC)の開発・運用経験

Databricks活用経験 要件定義など上流工程の対応経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・LightGBMの使用経験 ・機械学習のアルゴリズムの知見（売上や需要予測） ・基本的なコミュニケーション能力

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験

・ネットワーク運用保守（3年以上） ・ログ調査、不具合調査の経験 ・運用設計などマニュアル作成経験

・大量のトランザクションデータを使って顧客の行動予測した経験 ・機械学習モデルの学習、評価、デプロイ経験 ・大量データのパイプラインをDatabricks上で、設計・実装経験

・DWH／データパイプライン開発・運用経験 ・Pythonを用いたデータ処理の実務経験 ・SQLによるデータ加工・集計の実務経験 ・Apache Spark / PySpark ・Databricks ・複数名チームでのプロジェクト参画経験

Databricks（Delta Lake・メダリオンアーキテクチャ・ジョブ設計）、Snowflake（スキーマ設計・データ連携）、Python / SQL（Sparkパイプラインの読み解き・移行実装）、ETL/ELT パイプラインの設計・構築経験

PythonまたはSQLを用いた業務経験 クラウド環境（Azure/AWS/GCP等）での業務経験 データ処理、バッチ処理、ETL等の経験 英語でのコミュニケーションに抵抗がない方（外国籍メンバーとの打合せあり） 関係者とコミュニケーションを取りながら業務を進められる方

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

データ基盤 / DWHのアーキテクチャ設計経験 大規模データ処理（数千万〜数億レコード規模）の設計・開発経験 クラウド環境におけるデータ基盤構築経験（GCP / AWS / OCI 等） SQL / Pythonを用いたデータパイプライン開発経験 データモデリング（DWH / OBT / Star Schema等）の実務経験 データ基盤におけるアクセス制御・セキュリティ設計経験

Databricksの運用・保守経験（設計・構築まで経験あれば尚良し） クラウド（Azure）の運用・保守経験（設計・構築まで経験あれば尚良し） DWH・ETLシステムの運用・保守経験（設計・構築まで経験あれば尚良し） ジョブ管理ツールの運用・保守の経験（System Wallker Operayion Manager）

Redshift, Glue, QuickSightなどのインフラ構築経験(IaC/CDK) DWH内のスキーマやテーブル作成経験 Pythonを用いた開発経験(PySparkの習得意欲がある方) QuickSightでのダッシュボード開発経験(GUIベース)

Webアプリケーションでのオンライン処理開発に関する一般的な技術 （Web画面/アプリケーションの設計、製造、テスト） SQLでの基本的なクエリのコーディング、オペレーション AWS環境での基本的なオペレーション linux環境での基本的なオペレーション

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

AWS 基盤(EC2/ALB/Aurora/PostgreSQL/S3/Glue/CloudWatch)の構築 Aurora PostgreSQL のスキーマ/テーブル設計の理解 Glue(PySpark/Python)による ETL(抽出/変換/CSV/日次/失敗検知/リトライ/ログ連携) Okta 連携 SSO/ユーザ ID 自動連携、MasterInfinity の権限/運用

・AWSインフラの構築経験 ・Oracleの経験

BigQueryを用いた開発経験 DWH／データ基盤の開発経験 Airflow の利用経験 データ取り込みパイプラインの設計・実装経験