【AWS】データレイク構築(python)
案件サマリー
PythonやScalaでの大規模バッチ処理開発経験が求められます。AWS環境でデータレイクの設計および構築を担う案件で、ビッグデータ開発に意欲的な方を歓迎します。
この案件のおすすめポイント
- AWSデータレイク設計で基盤スキル深化
- Python×Sparkで大規模バッチ実践強化
- Glue・S3活用で市場価値と年収向上
案件の内容
★エンジニア実務経験2年以上 / 直近で実務経験のある方が対象の案件です!!★ ■概要 AWS環境でデータレイクの設計および更改対応を行います。PythonやScalaを使用した大規模バッチ処理の開発経験が求められ、ビッグデータに関わる開発意欲のある方が対象です。 ■具体的な業務内容 ・データレイクの設計および構築 ・ドキュメント作成(設計資料、説明資料) ・大規模バッチ処理の開発 ・AWSサービス(Glue、EC2、S3)を使用したデータ処理
必須スキル
・AWS(EC2、Glue、S3)を使用した開発経験 ・大規模のバッチ処理の開発経験 ・ビッグデータに関する意欲 ・構造立てたドキュメント作成
歓迎スキル
・Sparkを使用した開発経験 ・ビッグデータに関わる開発経験
開発環境
AWS
稼働日数
週5日
面談回数
1回
作業開始時期
即日
案件担当のコメント
AWS上でのビッグデータ処理に意欲的で、データレイク構築経験がある方に最適なポジションです。PythonやSparkを用いた開発経験を活かし、データ処理基盤を整備できます。ご応募お待ちしております。
フリーランスボードからのアドバイス
AWSでのデータレイク更改は、今まさに需要が伸びる領域です。GlueやS3を軸に、PythonでのETL実装や大規模バッチ最適化を任せる内容。直近の実務経験を活かしつつ、SparkやScalaにも触れれば分散処理の即戦力として評価が高まります。設計資料や説明資料の作成も求められるため、アーキ設計の意図やデータ品質基準を言語化できると強いです。Glueジョブ設計、S3パーティショニング、コスト最適化の知見を棚卸しして臨みましょう。将来的にデータ基盤アーキテクトやデータエンジニアのリードへつながる好機です。積極的に提案し、運用まで見据えた改善視点を示してください。
詳細は面談でお伝えします。ご相談ください。
※一部の情報に関して非公開の場合があります
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
インフラエンジニア, クラウドエンジニア, データエンジニア
AWS, Python, Scala
東京都
70-80万円