PySparkのフリーランス案件・求人一覧

・DWH／データパイプライン開発・運用経験 ・Pythonを用いたデータ処理の実務経験 ・SQLによるデータ加工・集計の実務経験 ・Apache Spark / PySpark ・Databricks ・複数名チームでのプロジェクト参画経験

dbt（core）または Dataform を用いたデータモデリング設計・ワークフロー（パイプライン）構築経験 BigQuery を中心とした GCP 環境での実務経験 新しいツール・技術へのキャッチアップ意欲

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

オンプレミスからクラウド環境への移行プロジェクト経験（設計〜本番切替まで） ジョブスケジューラ（JP1等）の運用または移行経験 ETLツール（Asteria、Informatica、DataSpider 等）を用いた開発・移行経験 DWH（Greenplum、Teradata、Oracle Exadata、Redshift 等）の設計または移行経験 クラウド環境でのサービス（S3、IAM、VPC、Glue、Redshift、Step Functions 等）の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

Databricksを利用した開発経験 PythonまたはPySparkを用いた開発経験 SQLを用いたデータ抽出・加工経験 ETL/ELT処理、データパイプライン開発経験 クラウド環境でのデータ基盤開発経験 基本設計、詳細設計、テスト設計の経験 日本語での業務コミュニケーション能力

SQLの業務経験(3年以上) システム開発に関する設計・開発・テストの経験(1年以上)

SQLを用いた実務経験が3年以上 システム開発における設計、開発、テストの経験が1年以上

・オンプレミス→AWS環境への移行PJ経験（設計～本番切替までの一貫経験） ・AWS主要サービス（Step Functions／AWS Glue／Amazon Redshift／S3／IAM／VPC 等）の実務経験 ※現行3製品そのものより「移行先AWSサービスに精通したメンバ」を最優先

AWS主要サービス(Step Functions、AWS Glue、Amazon Redshift、S3、IAM、VPC 等)の実務経験 オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで)

オンプレミスからAWS環境への移行プロジェクト経験(設計〜本番切替まで) AWS主要サービス(Step Functions、AWS Glue、Amazon Redshift、S3、IAM、VPC 等)の実務経験

AWS（S3 など）の経験 Pythonの経験 SQLの経験 PySparkの経験（必須）

Databricks運用保守経験 何かしらのクラウドの運用保守経験（Azureであれば尚可）

AWS, Python, SQL, PySpark

DWH／データパイプライン開発・運用経験 Pythonを用いたデータ処理の実務経験 SQLによるデータ加工・集計の実務経験 Apache Spark / PySpark Databricks 複数名チームでのプロジェクト参画経験

AWS（S3 など）の経験 Pythonの経験 SQLの経験

TypeScriptもしくはJavaScript、CSS、の業務経験 RDBに関する知識・経験 Pythonの業務経験（未経験の場合は、他言語の経験をもとにキャッチアップ頂けること。主にデータ加工の際にPysparkを使用） 開発メンバーとしてリーダーやチームメンバーと双方向でコミュニケーションを行いながら、自立的にタスクや課題を遂行できる

Databricks運用保守経験 何かしらのクラウドの運用保守経験（Azureであれば尚可）

Python経験：2年以上 SQL経験：常時使用

DWH／データパイプライン開発、運用経験 Pythonを用いたデータ処理の実務経験 SQLによるデータ加工・集計の実務経験 Apache Spark / PySpark Databricks 複数名チームでのプロジェクト参画経験

AWS（S3 など）の経験 Pythonの経験 SQLの経験

Pythonの業務経験(2年以上) SQLの業務経験(2年以上) システム開発に関する設計・開発・テストの経験(3年以上)

Pythonの業務経験(2年以上) SQLの業務経験(2年以上) システム開発に関する設計・開発・テストの経験(3年以上)

Databricks運用保守経験 何かしらのクラウドの運用保守経験（Azureであれば尚可）

Databricks 設計、開発、運用の経験 クラウド(Azure)運用、保守の経験 DWH/ETLシステムの運用保守の経験 Azure Data Factory 設計、開発、運用の経験 Storage Account 運用、保守の経験 ジョブ管理ツールの運用、保守経験

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

TypeScriptもしくはJavaScript、CSS、の業務経験 RDBに関する知識・経験 Pythonの業務経験（未経験の場合は、他言語の経験をもとにキャッチアップ頂けること。主にデータ加工の際にPysparkを使用） 開発メンバーとしてリーダーやチームメンバーと双方向でコミュニケーションを行いながら、自立的にタスクや課題を遂行できる

オンプレミスからクラウド環境への移行プロジェクト経験(設計〜本番切替まで) ジョブスケジューラ(JP1等)の運用または移行経験 ETLツール(Asteria、Informatica、DataSpider 等)を用いた開発・移行経験 DWH(Greenplum、Teradata、Oracle Exadata、Redshift 等)の設計または移行経験 クラウド環境でのサービス(S3、IAM、VPC、Glue、Redshift、Step Functions 等)の実務経験 ステークホルダー調整・課題管理を主体的に推進できるコミュニケーション力

Databricks(SQL/Python、PySpark、Delta Lake)の開発経験 PowerBI(Power Query、DAX)の開発経験 英語の読み取り(翻訳ツール使用OK / 英文作成は不要)

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

・Pysparkのコーディングに精通していること。※1人称で自走できること ・Pysparkでパフォーマンスチューニングの経験があること