Sparkの案件

データエンジニアリングまたはアナリティクスエンジニアリング経験5年以上 SQLおよびPythonを用いたデータパイプライン開発経験（Databricks／Spark／dbt等） AWS環境でのデータ基盤構築・運用経験およびGit／CI/CDの実務経験 Databricks上でのデータパイプライン設計・実装 Sparkなどのデータ処理フレームワークの実務経験

データエンジニアリングまたはアナリティクスエンジニアリングの実務経験（5年以上） SQLおよびPythonを用いたデータパイプライン開発経験 Databricks、Spark、dbtなどのデータ基盤関連技術の実務経験 AWS環境でのデータ基盤構築または運用経験 GitおよびCI/CDを用いた開発経験 設計や技術判断を主体的に推進できる方

・Databricksを用いたマイグレーションのご経験 ・テックリードのご経験

・データ加工処理に関連するマイグレーションのご経験 ※移行方式設計のご経験、クラウドシフトのご経験等、実際の移行作業ではなく移行計画/移行方式設計のできる方 ・データ加工処理基盤構築のための要求整理/要件定義のご経験 ・Apache Sparkを用いたデータ加工処理のご経験 ・Databricks、Snowflake（Snowpark）、AWS（Glue,EMR）の内のいずれかのご経験

・大量のトランザクションデータを使って顧客の行動予測した経験 ・機械学習モデルの学習、評価、デプロイ経験 ・大量データのパイプラインをDatabricks上で、設計・実装経験

AWS環境でのインフラ構築・運用経験（S3/IAM/VPC等）、GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定）、BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング）、AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング、TerraformによるIaC実践（マルチクラウド or 複数環境）

Databricksでのコーディングスキル（PySpark, Scala） コードのチューニング経験 Sparkクラスタの構造や処理方式ならびに各種最適化手法に関する知識・経験 大規模データを扱った経験 HadoopクラスタやSparkクラスタで数億行程度のデータを扱った経験

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

・ AWS 環境でのインフラ構築・運用経験 ・ GCP 環境でのインフラ構築経験 ・ETL開発及びパフォーマンスチューニング経験

・ AWS 環境でのインフラ構築・運用経験 ・ GCP 環境でのインフラ構築経験 ・ETL開発及びパフォーマンスチューニング経験

AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング Terraform による IaC 実践（マルチクラウド or 複数環境）

・Pythonでの開発経験（3年以上） ・Qiskit, PennyLane, Cirqなどの量子開発フレームワークの利用経験 ・量子アルゴリズムに関する基礎知識（Grover, QAOA, VQE など） ・機械学習／数理最適化に関する理解 ・Gitなどを用いたチーム開発経験

・Pythonの活用 ・音声感情認識または表情認識の実装経験 ・自然言語処理・対話モデル（Rasa, LLM, Dialogflowなど）の利用経験 ・ROS/ROS2 を用いたロボット開発経験 ・センサーデータ（カメラ、マイク、距離センサなど）を扱った実務経験

・LangGraph、LlamaIndexなどを用いたエージェント構築の経験 ・LangChainやGradioを用いた開発経験 ・LLMファインチューニングやデータパイプラインの構築経験 ・LLM/AIモデルの学習・評価・運用経験

・AI開発の実務経験（Pythonなど） ・AI開発を含むプロジェクトのPM経験

Azure Data Factoryを用いたデータパイプラインの設計・開発経験 Azure Synapse Analytics (旧Azure SQL DW) または同等のDWH製品の利用経験 SQLを用いたデータ抽出・加工・分析スキル Power BIまたは同等のBIツールを用いたレポーティング・ダッシュボード作成経験 顧客やチームメンバーと円滑なコミュニケーションを取り、主体的にPJを推進できる能力

・ウォーターフォール又はアジャイル開発プロジェクト経験 ・業務システムの要件定義～テスト(バックエンド側)の開発経験 ・PdMないしはコンサルのご経験3年以上

・API開発経験 ・モデルのAPI化やバックエンド・インフラ連携を考慮したシステム開発経験が2年以上ある方 ・AWSの使用経験 ・AWSサービス（特にSageMakerやLambdaを含む）を用いたシステム構築の経験が2年以上ある方 ・AI/機械学習の実務経験 ・AIや機械学習技術の調査・検証、フィジビリティスタディ、プロダクトへの実装経験が3年以上ある方

・計算機科学、情報科学、統計学もしくは類似する技術領域の修士号をお持ちの方 ・論文中の数式をPythonなどのプログラムで実装できる方 ・Pythonを用いた機械学習モデルの開発もしくは業務データ分析のご経験 ・チームでの開発経験3年以上

・使用言語：Python

1人称で目的整理～分析設計～実分析～報告対応。 可視化、統計、機械学習、生成AIの各種対応。 お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること。

1人称で目的整理～分析設計～実分析～報告対応が必要。 可視化、統計、機械学習、生成AI、各種対応できること 生成AIは具体的な案件未定なので感触レベル お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること、は必須

・機械学習モデルを用いたモデル開発、及びMLOpsの経験 ・勾配ブースティングモデル（LightGBM, XGBoostなど）の深い理解 ・Pythonを用いた開発経験　5年以上 ・LLM（生成系AI）を用いたモデル開発経験 ・AWSをはじめとしたパブリッククラウドサービスでの開発経験

・AWS環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・GCPでの構築経験（特にBigQueryとIAM/ネットワーク設定） ・BigQueryを用いた分析SQL実務経験（パーティショニング/クラスタリング） ・AWS Glue（PySpark）でのETL開発・パフォーマンスチューニング ・TerraformによるIaC実践（マルチクラウド or 複数環境）

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）

・最適化や機械学習に関する開発経験 ・システムロジック開発経験 ・Pythonによるアルゴリズム構築経験 ・アルゴリズムのモジュール化経験

・最適化や機械学習に関する開発経験 ・システムロジック開発経験 ・Pythonによるアルゴリズム構築経験 ・アルゴリズムのモジュール化経験

・最適化や機械学習に関する開発経験 ・システムロジック開発経験 ・Pythonによるアルゴリズム構築経験 ・アルゴリズムのモジュール化経験

・最適化／機械学習の開発経験 ・顧客ヒアリング経験（業務フロー整理含む） ・Pythonによるアルゴリズム構築経験 ・モジュール化／チーム開発経験 ・テクニカルドキュメント作成スキル