Spark×リモートワーク・在宅可のフリーランス案件・求人一覧

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・LightGBMの使用経験 ・機械学習のアルゴリズムの知見（売上や需要予測） ・基本的なコミュニケーション能力

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験

・ネットワーク運用保守（3年以上） ・ログ調査、不具合調査の経験 ・運用設計などマニュアル作成経験

・大量のトランザクションデータを使って顧客の行動予測した経験 ・機械学習モデルの学習、評価、デプロイ経験 ・大量データのパイプラインをDatabricks上で、設計・実装経験

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

Python、SQL、Azure(AWSでも検討可)、Databricks

・データウェアハウスもしくはデータレイクの設計・構築・運用経験（Snowflake、BigQuery、Synapse、Databricks、Redshift 等いずれか） ・SQLによるデータ加工・分析の実務経験（複雑なクエリ設計含む） ・Pythonを用いたデータ処理・分析の実務経験（pandas、PySpark 等） ・ETL / ELTツールを用いたデータパイプライン構築経験（Data Factory、Airflow、dbt 等）

ソフトウェアエンジニア経験 (3年以上) 　 - TypeScript での開発経験 AIを活用し、自動テストや業務改善を実践した経験 品質視点でのテスト設計、手動テスト・検証のご経験 ビジネス / CS / エンジニアなど、非エンジニアとのコミュニケーション経験

・DWH／データパイプライン開発・運用経験 ・Pythonを用いたデータ処理の実務経験 ・SQLによるデータ加工・集計の実務経験 ・Apache Spark / PySpark ・Databricks ・複数名チームでのプロジェクト参画経験

Databricks（Delta Lake・メダリオンアーキテクチャ・ジョブ設計）、Snowflake（スキーマ設計・データ連携）、Python / SQL（Sparkパイプラインの読み解き・移行実装）、ETL/ELT パイプラインの設計・構築経験

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider 等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift 等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions 等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

PythonまたはSQLを用いた業務経験 クラウド環境（Azure/AWS/GCP等）での業務経験 データ処理、バッチ処理、ETL等の経験 英語でのコミュニケーションに抵抗がない方（外国籍メンバーとの打合せあり） 関係者とコミュニケーションを取りながら業務を進められる方

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

Databricksにおける分散処理およびデータモデリング経験 SQL／Pythonによるコーディングスキル PySparkの理解 Delta Lakeの理解およびデータパイプライン開発経験 Power BI（Desktop／Service）での開発経験 Power Queryの開発経験 DAX（Data Analysis Expressions）の開発経験

データ基盤 / DWHのアーキテクチャ設計経験 大規模データ処理（数千万〜数億レコード規模）の設計・開発経験 クラウド環境におけるデータ基盤構築経験（GCP / AWS / OCI 等） SQL / Pythonを用いたデータパイプライン開発経験 データモデリング（DWH / OBT / Star Schema等）の実務経験 データ基盤におけるアクセス制御・セキュリティ設計経験

Databricksの運用・保守経験（設計・構築まで経験あれば尚良し） クラウド（Azure）の運用・保守経験（設計・構築まで経験あれば尚良し） DWH・ETLシステムの運用・保守経験（設計・構築まで経験あれば尚良し） ジョブ管理ツールの運用・保守の経験（System Wallker Operayion Manager）

Redshift, Glue, QuickSightなどのインフラ構築経験(IaC/CDK) DWH内のスキーマやテーブル作成経験 Pythonを用いた開発経験(PySparkの習得意欲がある方) QuickSightでのダッシュボード開発経験(GUIベース)

Webアプリケーションでのオンライン処理開発に関する一般的な技術 （Web画面/アプリケーションの設計、製造、テスト） SQLでの基本的なクエリのコーディング、オペレーション AWS環境での基本的なオペレーション linux環境での基本的なオペレーション

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

AWS 基盤(EC2/ALB/Aurora/PostgreSQL/S3/Glue/CloudWatch)の構築 Aurora PostgreSQL のスキーマ/テーブル設計の理解 Glue(PySpark/Python)による ETL(抽出/変換/CSV/日次/失敗検知/リトライ/ログ連携) Okta 連携 SSO/ユーザ ID 自動連携、MasterInfinity の権限/運用

・AWSインフラの構築経験 ・Oracleの経験

BigQueryを用いた開発経験 DWH／データ基盤の開発経験 Airflow の利用経験 データ取り込みパイプラインの設計・実装経験

Databricks / Spark の開発経験（3年以上目安） Sparkクラスタのチューニング経験 大規模データ（数億件規模）の処理経験 Azure環境（Data Factory、SQL等）の構築経験 SQLクエリの最適化スキル

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

AWS（EventBridge、StepFunctions、Lambda、Glue）を用いた開発経験 AWS 基盤全般の知識（S3、EC2、ELB、SG 等） Python 開発経験 PySpark を用いたデータパイプライン構築経験 複数テーブル JOIN を伴う SQL 実装経験 Stored Procedure の開発またはレビュー経験 Git を用いたチーム開発経験 情報系システム（または何らかの業務システム）の運用経験 ジョブフロー設計書のレビュー経験