Sparkの案件

・プロジェクトリーダー、もしくはマネージャーの経験が3年以上をお持ちの方 ・細かい仕様が未定状態でのシステム設計／アーキテクチャ設計／プロトタイプ作成の経験が有る方 ・アジャイル開発の実践経験が有る方 ・システム設計から実装・導入・運用までの実施経験・実践的な知見が有る方（小規模プロジェクトで可）

イメージ的には性能改善のための内部設計のイメージがつく方 ・Python / SQLのバッチ側の保守・メンテを実施していた方 ・Polarsの利用経験 ・Redisの利用経験 ・キューの高速化の知見 ・マルチプロセス、マルチスレッドの知見 ・SQLAlchemy(O/Rマッパー)の利用経験

・SQL（ストアドプロシージャ等）の設計経験、 ・IT業界経験3年以上

・計算機科学、情報科学、統計学もしくは類似する技術領域の修士号をお持ちの方 ・論文中の数式をPythonなどのプログラムで実装できる方 ・Pythonを用いた機械学習モデルの開発もしくは業務データ分析のご経験 ・チームでの開発経験3年以上

・SQL（ストアドプロシージャ等）の設計経験、 ・IT業界経験3年以上

・5年以上のエンジニア経験（一人称でのSEレベル） ・Javaによる開発経験（Strutsを利用したWebアプリケーション開発経験） ・Webフレームワークを利用したWebアプリケーション開発経験 ・C,C++等の開発言語が読める方 ・ MySQLの一般知識 ・自発的にコミュニケーションを行える方

・データ分析、機械学習の基礎理解がある方 ・回帰モデルの検討と構築経験 ・python ・TensorFlow、PyTorch または Scikit-Learnの利用経験 ・納期を守り自律的にリモートワークで業務を行える方

・SQL（ストアドプロシージャ等）の設計経験、 ・IT業界経験3年以上

・SQL（ストアドプロシージャ等）の設計経験、 ・IT業界経験3年以上

-SQLによるデータ抽出、集計の実務経験 (3年以上) -PythonもしくはNode.jsのプログラミング経験（2年以上） -クラウド環境 (AWS, GCP, Azure)でのデータ基盤構築、運用経験 (1年以上) -データパイプライン構築、運用経験 (Airflow, Spark, Flinkなど) -データ品質に関する知識、データガバナンスに関する知識 -バージョン管理ツール (Gitなど) の利用経験 -アジャイル開発の経験

・アプリケーション開発経験 3年以上 ・Goの開発経験2年以上 ・顧客視点のコミュニケーションができる方

・使用言語：Python

1人称で目的整理～分析設計～実分析～報告対応。 可視化、統計、機械学習、生成AIの各種対応。 お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること。

1人称で目的整理～分析設計～実分析～報告対応が必要。 可視化、統計、機械学習、生成AI、各種対応できること 生成AIは具体的な案件未定なので感触レベル お客様内の生成AI環境（非SE／DSが使える環境、chat/RAG簡易GUIベース）で要件実現できること、は必須

・機械学習モデルを用いたモデル開発、及びMLOpsの経験 ・勾配ブースティングモデル（LightGBM, XGBoostなど）の深い理解 ・Pythonを用いた開発経験　5年以上 ・LLM（生成系AI）を用いたモデル開発経験 ・AWSをはじめとしたパブリッククラウドサービスでの開発経験

・Pythonを用いたデータ処理（Flask, Pandas, NumPy, Daskなど）の実務経験3年以上

・Rails（ruby）の開発経験2年以上

・アーキテクトの立場でのAzureサービスを組み合わせた要件定義、設計、構築経験 ・AzureでのDWHの構築経験 ・Azure全般（Functions, Synapse Analytics, Data Factory, Key Vault）

Glue, Redshift, SQL, データウェアハウス設計・開発経験

・Splunkの利用経験（ELKでも可） ・SQL等でのDB操作経験 ・shellなどでのスクリプト作成経験 ・LinuxベースOS上でのコマンドベースでの業務経験

・インフラエンジニアとしての経験豊富な方 - Azure - WindowsSever - Network - VMware

以下いずれかの組み合わせや類似スキルでの提案も応相談 ・Databricks（Apache Sparkパイプライン開発／DeltaLake構築）もしくは他ETL製品によるデータ加工 ・SAS Viya／SAS EG ・AWS（S3） ・Azure（Blob Storage） ・Google Cloud（BigQuery）

・一人称で能動的に動ける方 ・顧客との要件定義に立ち合い、必要となるサービス構成を導くことができる方 ・下記、経験／スキル要件をお持ちであること（一部の経験が無くても独力でキャッチアップできる方） ①BIツール ②データレイク（レイクハウス）構築 ③データパイプラインの設計・運用 ④システム構成図・アーキテクチャ図の設計 ⑤Terraform、ApacheSparkの利用 ⑥AWSサービス（S3,Athena,Glue,QuickSight,Lake Formation）

・AWS Glue（VisualETL） or PySparkの経験 ※上記、どちらか一方でも可 ・RDBMSの経験 ・Python ・SQL ・Amazon Redshift ・Amazon S3 ・Power BI

・一人称で能動的に動ける方 ・顧客との要件定義に立ち合い、必要となるサービス構成を導くことができる方 ・下記、経験／スキル要件をお持ちであること（一部の経験が無くても独力でキャッチアップできる方） ①BIツール ②データレイク（レイクハウス）構築 ③データパイプラインの設計・運用 ④システム構成図・アーキテクチャ図の設計 ⑤Terraform、ApacheSparkの利用 ⑥AWSサービス（S3,Athena,Glue,QuickSight,Lake Formation）

・AWS Glue（VisualETL） or PySparkの経験がある方 ※上記、どちらか一方でも可 ・RDBMSの経験

・AWS Glue（VisualETL） or PySparkの経験がある方 ※上記、どちらか一方でも可 ・RDBMSの経験

PythonやSQLを用いたデータ操作、変換、加工、自動化ツール作成の経験 エンド側とコミュニケーションを取りつつ、柔軟に諸事対応できること 大規模データを用いた開発経験

・AWS等のクラウドサービスを用いたインフラ設計・構築・運用経験(※5年程度) ・サブリーダー的な立ち位置の経験、またはAWS設計構築のエキスパート ・汎用プログラミング言語での開発経験(Python,node,Java,Goなど)

- PythonやSQLを用いたデータ操作、変換、加工、自動化ツール作成の経験 - エンド側とコミュニケーションを取りつつ、柔軟に諸事対応できること ・大規模データを用いた開発経験