PySparkの案件

SQL、ETL、PySpark、Databricks

・PySpark/Apache Kafka/Apache Flinkのいずれかの使用経験

・sagemaker、vertex ai、Kubeflowなどで課題に応じた適切なMLOps基盤の構築経験および継続的な改善経験 ・DVCやRDB・NoSQLなどを用いたデータセットを管理機構の構築・運用経験 ・ CI/CDの構築経験　もしくは　CI/CDが設計された開発環境での経験

・要件定義、設計などの上流工程経験 ・PowerAutomate、PowerAppsなどMicrosoft製品の有識者または学習意欲 ・RPAの概念理解 ・英語：資料やメールの読み書きができるレベル（翻訳ツール使用可）

・Uipath開発経験（2年以上） なければ、Uipath以外でのプラットフォームでRPA開発経験2年以上 ・お客様とのコミュニケーション能力 現場常駐にてお客様との直接コミュニケーションが発生します。 お客様側の知識レベルに合わせた会話が必要です。 ・VBA開発経験 UiPathでの開発に関連してVBAを使った開発の可能性もあるため

・要件定義、設計などの上流工程経験 ・PowerAutomate、PowerAppsなどMicrosoft製品の有識者または学習意欲 ・RPAの概念理解 ・英語：資料やメールの読み書きができるレベル（翻訳ツール使用可）

・PySpark(Python)経験 ・AWS Glueでの実装経験

RPA(Uipathを使用)の対応を1人称で可能なこと。(システム開発経験があるとなおよし。) コミュニケーションが問題無く行えること。 チームで動けること。(リーダー＋担当) ただし、９月、(１０月)は引継ぎも兼ねて、現在対応中の初期メンバーと作業を行っていただきます。

- BtoB自動テストツールについての経験 (MagicPodもしくはSelenium) - BtoB自動テストのシステム構築の経験 ※上記についての経験有無を〇×及びやっている場合項番をご教示いただけますと幸いです※

- BtoB自動テストツールについての経験 (MagicPodもしくはSelenium) - BtoB自動テストのシステム構築の経験 ※上記についての経験有無を〇×及びやっている場合項番をご教示いただけますと幸いです※

Databricksの運用・保守経験（設計・構築まで経験あれば尚良し） クラウド（Azure）の運用・保守経験（設計・構築まで経験あれば尚良し） DWH・ETLシステムの運用・保守経験（設計・構築まで経験あれば尚良し） ジョブ管理ツールの運用・保守の経験（System Wallker Operayion Manager）

Pythonを用いた開発実務経験 SQL, Power Query, VBAを用いた実務経験 AWS環境（Glue, Athena等）の知見・利用経験 データ分析業務経験（データマート作成、分析基盤の構築・運用） ETL処理の開発・運用経験 生成AI（GitHub Copilot等）の導入・活用に意欲的な方 GitHubを用いたソースおよびドキュメント管理の経験

Redshift, Glue, QuickSightなどのインフラ構築経験(IaC/CDK) DWH内のスキーマやテーブル作成経験 Pythonを用いた開発経験(PySparkの習得意欲がある方) QuickSightでのダッシュボード開発経験(GUIベース)

Webアプリケーションでのオンライン処理開発に関する一般的な技術 （Web画面/アプリケーションの設計、製造、テスト） SQLでの基本的なクエリのコーディング、オペレーション AWS環境での基本的なオペレーション linux環境での基本的なオペレーション

Pythonでの開発経験 ETL/ELT 開発経験 ネットワーク運用の経験または知見

AWS環境でのインフラ構築・運用経験（S3/IAM/VPC等）、GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定）、BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング）、AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング、TerraformによるIaC実践（マルチクラウド or 複数環境）

AWS 基盤(EC2/ALB/Aurora/PostgreSQL/S3/Glue/CloudWatch)の構築 Aurora PostgreSQL のスキーマ/テーブル設計の理解 Glue(PySpark/Python)による ETL(抽出/変換/CSV/日次/失敗検知/リトライ/ログ連携) Okta 連携 SSO/ユーザ ID 自動連携、MasterInfinity の権限/運用

・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発に関する設計・開発・テストの経験(3年以上)

・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発に関する設計・開発・テストの経験(3年以上)

・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発に関する設計・開発・テストの経験(3年以上)

・AWSインフラの構築経験 ・Oracleの経験

・Pythonの業務経験(2年以上) ・SQLの業務経験(2年以上) ・システム開発に関する設計・開発・テストの経験(3年以上)

Databricks / Spark の開発経験（3年以上目安） Sparkクラスタのチューニング経験 大規模データ（数億件規模）の処理経験 Azure環境（Data Factory、SQL等）の構築経験 SQLクエリの最適化スキル

・Databricks / Spark の開発経験（3年以上目安） ・Sparkクラスタのチューニング経験 ・大規模データ（数億件規模）の処理経験

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

AWS（EventBridge、StepFunctions、Lambda、Glue）を用いた開発経験 AWS 基盤全般の知識（S3、EC2、ELB、SG 等） Python 開発経験 PySpark を用いたデータパイプライン構築経験 複数テーブル JOIN を伴う SQL 実装経験 Stored Procedure の開発またはレビュー経験 Git を用いたチーム開発経験 情報系システム（または何らかの業務システム）の運用経験 ジョブフロー設計書のレビュー経験

AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング Terraform による IaC 実践（マルチクラウド or 複数環境）

・TypeScriptもしくはJavaScript、CSS、の業務経験 ・RDBに関する知識・経験（Foundryがデータ統合プラットフォームであるため） ・Pythonの業務経験（未経験の場合は、他言語の経験をもとにキャッチアップ頂けること。主にデータ加工の際にPysparkを使用）

・TypeScriptもしくはJavaScript、CSS、の業務経験 ・RDBに関する知識・経験（Foundryがデータ統合プラットフォームであるため） ・Pythonの業務経験（未経験の場合は、他言語の経験をもとにキャッチアップ頂けること。主にデータ加工の際にPysparkを使用） ・開発メンバーとしてリーダーやチームメンバーと双方向でコミュニケーションを行いながら、自立的にタスクや課題を遂行できる

・TypeScriptもしくはJavaScript、CSS、の業務経験 ・RDBに関する知識・経験（Foundryがデータ統合プラットフォームであるため） ・Pythonの業務経験（未経験の場合は、他言語の経験をもとにキャッチアップ頂けること。主にデータ加工の際にPysparkを使用） ・開発メンバーとしてリーダーやチームメンバーと双方向でコミュニケーションを行いながら、自立的にタスクや課題を遂行できる