Sparkの案件

Pythonによる詳細設計以降の開発経験（3年以上） AWS環境での開発／利用経験 関係者と円滑に調整できるコミュニケーション力 自走して課題解決に取り組めること

Pythonを使用したデータ連携処理の開発経験(2年以上) SQLの読み書きが出来る方 1人称でタスクを遂行できること

AWS環境でのインフラ構築・運用経験（S3/IAM/VPC等）、GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定）、BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング）、AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング、TerraformによるIaC実践（マルチクラウド or 複数環境）。

RedshiftやGlue、QuickSightなどのインフラ準備（IaCコードの作成するイメージ） DWH内のスキーマやテーブル準備 Glueジョブ開発（PySpark。Pythonができれば、検索しながら対応可能） QuickSightでのダッシュボード開発（プログラミングはせず、GUIで作成）

・SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験がある方 ・データパイプライン構築・運用経験がある方 ・テスティングフレームワークを用いたユニットテストの経験がある方（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験がある方 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力がある方

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・Javaでの開発経験 5年以上 ・AWS上での開発経験がある方 ・設計業務から一人称で対応可能な方

・SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験がある方 ・データパイプライン構築・運用経験がある方 ・テスティングフレームワークを用いたユニットテストの経験がある方（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験がある方 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力がある方

SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験 データパイプライン構築・運用経験 Git等のバージョン管理システムの使用経験 テスティングフレームワークを用いたユニットテストの経験（テストコード作成を含む） 要件定義、基本設計、詳細設計、テスト設計の経験 プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・クラウド上データエンジニアリング経験 ・ETL パイプライン構築・運用 ・S3/Lambda などAWSの基本知識 ・SQL 実務経験（高度） ・自走して SQL を記述できる方 ・ETLパイプラインにおいてストアドプロシージャを多用しているため、ストアドの読解・改修ができること ・生成AIを適切に活用しつつ、仕様理解・レビューは自身で行える方 ・DB 実務経験（Redshift、PostgreSQL） ・運用・保守、テーブル・スキーマ設計 ・ETL/ELT パイプライン実装経験 ・SQL/ストアド中心のETL、加えてPython（可能であれば PySpark）を用いた処理 ・Gitを用いたチーム開発経験（ブランチ運用・レビュー） ・ドキュメント作成スキル（設計書・運用手順など）

・SQL、Python、Spark（その他、Hadoop、Apache Kafka、Mesosなど分散処理基盤の構築）によるデータ処理の経験 ・データパイプライン構築・運用経験 ・Git等のバージョン管理システムの使用経験 ・テスティングフレームワークを用いたユニットテストの経験（テストコード作成を含む） ・要件定義、基本設計、詳細設計、テスト設計の経験 ・プロジェクト関係者とコミュニケーションが取れるレベルのドキュメント作成能力

・AWSを用いた開発経験 （EventBridge、StepFunctions、Lambda、Glue） ・AWS基盤全般の知識 （S3、EC2、SG、ELB 等） ・Tableau Prepを用いたデータ加工、前処理の実務経験 ・Tableau Serverの環境設定、運用経験 ・テーブル定義書、Stored Procedure、IF定義書のレビュー経験 ・複数テーブルJOINを伴うSQL実装経験 ・Stored Procedureの開発経験 ・Python開発経験 ・PySparkを用いたデータパイプライン構築経験 ・Gitを利用したチーム開発経験 ・情報系システム、または何らかのシステム運用経験 ・ジョブフロー設計書のレビュー経験

-PythonまたはPySparkでの開発経験3年以上 -詳細設計経験および -アジャイルでの開発経験 -自発的な行動と円滑なコミュニケーション能力

・Pythonを用いた開発実務経験（3年以上） ・SQLを用いた高度なデータ集計の実装経験 ・大規模データへの興味・関心

AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング Terraform による IaC 実践（マルチクラウド or 複数環境）

Python、Java、Javascript、RDB（Microsoft SQL Server）の設計・製造経験（※Python未経験でも意欲的に学習可能であれば可。他言語でも既存ソースから処理把握が可能であれば可） ・業務経験3年以上、ロジカルシンキング、良好なコミュニケーションで一人称で動ける方

AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など）、GCP での構築経験（特に BigQuery と IAM/ネットワーク設定）、BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング）、AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング、Terraform による IaC 実践（マルチクラウド or 複数環境）

・Python、Java、Javascript、RDB（Microsoft SQL Server）の設計・製造経験（※Python未経験でも意欲的に学習可能であれば可。他言語でも既存ソースから処理把握が可能であれば可） ・業務経験3年以上、ロジカルシンキング、良好なコミュニケーションで一人称で動ける方

・AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・Terraform による IaC 実践（マルチクラウド or 複数環境）

・Python、Java、Javascript、RDB（Microsoft SQL Server）の設計・製造経験（※Python未経験でも意欲的に学習可能であれば可。他言語でも既存ソースから処理把握が可能であれば可） ・業務経験3年以上、ロジカルシンキング、良好なコミュニケーションで一人称で動ける方

スクラム開発経験 AWS(ECS, StepFunction, 各種リソース...)の知見 kubernetesの知識 python(pyspark, jupyter notebook...) Dockerfileの作成・読解経験 機械学習アプリケーションに関する知見 Githubアクションのコード作成・読解経験

【AWS】 ・EventBridge、StepFunctions、Lambda、Glue を利用した開発経験 ・S3、EC2、SG、ELB など AWS 基盤の知識 【DB】 ・テーブル定義書／Stored Procedure のレビュー経験 ・複数テーブルJOINを伴うSQL実装 ・Stored Procedure 開発経験 【開発】 ・Python 開発経験 ・PySpark を用いたデータパイプライン構築 ・Git を利用したチーム開発経験 【運用】 ・情報系システム（または類似システム）での運用経験 ・ジョブフロー設計書レビュー経験

・システム開発経験（詳細設計以降のフェーズ） ・関係者とのコミュニケーション力/理解力 ・スケジュール管理等の自己管理能力