Spark×リモートワーク・在宅可の案件

・Databricks / Spark の開発経験（3年以上目安） ・Sparkクラスタのチューニング経験 ・大規模データ（数億件規模）の処理経験

・Databricksまたは類似のクラウドデータ基盤の運用・保守経験 ・Sparkログを用いた原因調査・切り分けの経験 ・利用部門・関連部署との調整を伴う運用業務経験

AWS 基盤(EC2/ALB/Aurora/PostgreSQL/S3/Glue/CloudWatch)の構築 Aurora PostgreSQL のスキーマ/テーブル設計の理解 Glue(PySpark/Python)による ETL(抽出/変換/CSV/日次/失敗検知/リトライ/ログ連携) Okta 連携 SSO/ユーザ ID 自動連携、MasterInfinity の権限/運用

・AWSインフラの構築経験 ・Oracleの経験

BigQueryを用いた開発経験 DWH／データ基盤の開発経験 Airflow の利用経験 データ取り込みパイプラインの設計・実装経験

Databricks / Spark の開発経験（3年以上目安） Sparkクラスタのチューニング経験 大規模データ（数億件規模）の処理経験 Azure環境（Data Factory、SQL等）の構築経験 SQLクエリの最適化スキル

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

・Pysparkのコーディングに精通していること。※1人称で自走できること ・Pysparkでパフォーマンスチューニングの経験があること

Snowflakeを用いたDWH開発・運用経験 SQLおよびPython（PySpark）によるデータ処理実装経験 Azure環境でのデータ基盤開発経験

Pythonによる詳細設計以降の開発経験（3年以上） AWS環境での開発／利用経験 関係者と円滑に調整できるコミュニケーション力 自走して課題解決に取り組めること

・SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験がある方 ・データパイプライン構築・運用経験がある方 ・テスティングフレームワークを用いたユニットテストの経験がある方（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験がある方 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力がある方

・Javaでの開発経験 5年以上 ・AWS上での開発経験がある方 ・設計業務から一人称で対応可能な方

・SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験がある方 ・データパイプライン構築・運用経験がある方 ・テスティングフレームワークを用いたユニットテストの経験がある方（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験がある方 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力がある方

SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験 データパイプライン構築・運用経験 Git等のバージョン管理システムの使用経験 テスティングフレームワークを用いたユニットテストの経験（テストコード作成を含む） 要件定義、基本設計、詳細設計、テスト設計の経験 プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力

-PythonまたはPySparkでの開発経験3年以上 -詳細設計経験および -アジャイルでの開発経験 -自発的な行動と円滑なコミュニケーション能力

・SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験 ・データパイプライン構築・運用経験 ・Git等のバージョン管理システムの使用経験 ・テスティングフレームワークを用いたユニットテストの経験（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力

PythonまたはPySparkでの開発経験3年以上 詳細設計経験 アジャイルでの開発経験 自発的な行動と円滑なコミュニケーション能力

SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験 データパイプライン構築・運用経験 Git等のバージョン管理システムの使用経験 テスティングフレームワークを用いたユニットテストの経験（テストコード作成を含む） 要件定義、基本設計、詳細設計、テスト設計の経験 プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力

・AWSを用いた開発経験 （EventBridge、StepFunctions、Lambda、Glue） ・AWS基盤全般の知識 （S3、EC2、SG、ELB 等） ・Tableau Prepを用いたデータ加工、前処理の実務経験 ・Tableau Serverの環境設定、運用経験 ・テーブル定義書、Stored Procedure、IF定義書のレビュー経験 ・複数テーブルJOINを伴うSQL実装経験 ・Stored Procedureの開発経験 ・Python開発経験 ・PySparkを用いたデータパイプライン構築経験 ・Gitを利用したチーム開発経験 ・情報系システム、または何らかのシステム運用経験 ・ジョブフロー設計書のレビュー経験

-PythonまたはPySparkでの開発経験3年以上 -詳細設計経験および -アジャイルでの開発経験 -自発的な行動と円滑なコミュニケーション能力

・Pythonを用いた開発実務経験（3年以上） ・SQLを用いた高度なデータ集計の実装経験 ・大規模データへの興味・関心

・Python、Java、Javascript、RDB（Microsoft SQL Server）の設計・製造経験（※Python未経験でも意欲的に学習可能であれば可。他言語でも既存ソースから処理把握が可能であれば可） ・業務経験3年以上、ロジカルシンキング、良好なコミュニケーションで一人称で動ける方

スクラム開発経験 AWS(ECS, StepFunction, 各種リソース...)の知見 kubernetesの知識 python(pyspark, jupyter notebook...) Dockerfileの作成・読解経験 機械学習アプリケーションに関する知見 Githubアクションのコード作成・読解経験

【AWS】 ・EventBridge、StepFunctions、Lambda、Glue を利用した開発経験 ・S3、EC2、SG、ELB など AWS 基盤の知識 【DB】 ・テーブル定義書／Stored Procedure のレビュー経験 ・複数テーブルJOINを伴うSQL実装 ・Stored Procedure 開発経験 【開発】 ・Python 開発経験 ・PySpark を用いたデータパイプライン構築 ・Git を利用したチーム開発経験 【運用】 ・情報系システム（または類似システム）での運用経験 ・ジョブフロー設計書レビュー経験

・Python(4年~5年)での詳細設計以降の経験 ・関係者とのコミュニケーション力 ・自走力(指示待ちではなく自ら問題意識をもって取り組める方) ・AWSの経験

・Pythonによる詳細設計以降の開発経験 ・Shellスクリプト開発経験 ・関係者と円滑に調整できるコミュニケーション力 ・自走力（指示待ちではなく主体的に課題解決できる方） ・AWSの利用経験（Glue以外でも可）

・Databricks（分析プラットフォーム）を利用した実務経験 ・顧客との要件定義に立ち合い、必要となるサービス構成を導くことができる方 ・一人称で能動的に動ける方

・Databricks（分析プラットフォーム）を利用した実務経験 ・顧客との要件定義に立ち合い、必要となるサービス構成を導くことができる方 ・一人称で能動的に動ける方

大量データを処理するバッチシステムの設計経験

大量データを処理するバッチシステムの設計経験