この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
Python データエンジニア|データレイク/CDP基盤の技術検証(Redshift/EMR比較)
案件サマリー
AWS、Python、SQL、PySparkの知見を活かし、CDP基盤の技術検証をご担当いただきます。S3上のデータを対象に、Redshift ServerlessとEMR Serverlessの性能やコストを比較検証し、調査からPoC、結果の資料化まで一貫して携わるポジションです。
この案件のおすすめポイント
- AWS、Python、PySpark等モダンなデータ基盤スキルを磨けます
- RedshiftとEMRの比較検証という、上流の技術選定に携われます
- CDP基盤の技術選定経験はデータアーキテクトへの道を拓きます
案件の内容
他システムから受領したデータに対し、クレンジング・マスキング・名寄せ処理を施し、データレイクとして蓄積するCDP基盤の技術検証を担当いただきます。 主にAWSサービスの選定および構成の検討を目的とした調査・PoCを実施し、結果をとりまとめて資料化します。 具体的な作業: ・S3上のデータを前提とした処理方式の検討(クレンジング/名寄せ/マスキング) ・データレイク用S3の格納方式・ディレクトリ設計・権限/ライフサイクル方針の検討 ・Redshift Serverless と EMR Serverless の比較検証(性能/コスト/運用の観点) ・技術検証結果の整理、ドキュメント化および提案資料作成 稼働形態は基本リモートで、初日のみ出社想定です。稼働期間は2026年5月〜7月のうち合計1人月を見込みます。
募集背景
CDP基盤の本格構築に先立ち、最適なAWSサービス選定と構成方針を明確化するための技術検証リソースを短期で増強。
必須スキル
・AWSの実務経験(S3を中心としたデータ基盤周辺の利用経験) ・Pythonによるデータ処理の実務経験 ・SQLの実務経験(パフォーマンス観点でのチューニング知識があると尚良) ・PySparkを用いたデータ処理の経験 ・技術検証/PoCの計画〜実施〜結果整理まで一連を遂行できる方
歓迎スキル
・Redshift(特にServerless)またはEMR(Serverless含む)の評価/運用経験 ・S3ベースのデータレイク設計(データレイアウト、パーティション、テーブル形式の選定など)の知見 ・セキュリティ/ガバナンス(マスキング、IAM、Lake Formation 等)への理解 ・コスト最適化やパフォーマンス検証の経験 ・CDP/分析基盤の要件定義・アーキテクチャ検討の経験
開発環境
開発/検証環境: ・クラウド: AWS(S3, Redshift Serverless, EMR Serverless, IAM, Glue/Lake Formation など想定) ・言語/フレームワーク: Python, PySpark, SQL ・データ形式: Parquet/ORC/CSV など ・ドキュメンテーション: Confluence/Notion等(類似ツール) ・バージョン管理: Git系ツール
稼働日数
週5日
基本は平日フルタイムを想定(合計1人月/期間内で調整可)
精算
140~180時間
面談回数
1回(オンライン)
原則オンラインで1回。状況により初日出社時に追加確認の可能性あり。
作業開始時期
即日
募集人数
1人
チーム規模
2-5名
リモート
一部リモート可
作業開始/終了時間の目安
10:00〜19:00目安(初日のみ出社)
平均稼働時間
目安160時間/月(精算幅140〜180H)
現場の雰囲気
落ち着いたコミュニケーションでドキュメント重視。検証結果を迅速に共有する文化。
案件担当のコメント
短期で意思決定に直結する技術検証を担うポジションです。自走力が高く、仮説立案から検証設計、結果の言語化までスピーディに進められる方を歓迎します。
フリーランスボードからのアドバイス
AWSやPySparkを用いたデータ基盤構築のご経験を、より上流の技術選定で活かしませんか。本プロジェクトはCDP基盤の根幹を担うRedshiftとEMRの比較検証という、非常に重要な意思決定に関わる貴重な機会です。短期集中で技術を深掘りし、その結果をドキュメントにまとめる能力は、将来データアーキテクトを目指す上で必ず強力な武器になります。この経験を通じて、市場価値をさらに高めていきましょう。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア, インフラエンジニア
AWS, Python, SQL
東京都
75-85万円