この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
Databricks データエンジニア|大手事業会社の既存データパイプラインを移行
案件の内容
既存のSparkデータパイプラインの現状を詳細に調査し、仕様を整理するフェーズから参画いただきます。 DatabricksへのETLパイプラインの移行と実装を進め、シルバー/ゴールドレイヤーのデータ変換処理の開発およびテストを担当。 移行後のシステムが安定稼働するよう、徹底した動作確認と品質保証を行います。
募集背景
事業拡大に伴うデータ基盤の近代化・効率化を目的とした、データパイプラインの刷新プロジェクトです。
職種
業界
必須スキル
データウェアハウス(DWH)やデータパイプラインの開発および運用経験は必須です。 Pythonを活用したデータ処理の実務経験、SQLを用いたデータ加工・集計スキルも求められます。 具体的には、Apache SparkやPySpark、そしてDatabricksの実務経験が重要となります。 さらに、複数名のチームでプロジェクトに参画し、貢献した経験をお持ちの方を歓迎します。
歓迎スキル
シルバーデータやゴールドデータの設計・開発経験をお持ちの方、またアジャイル開発やスクラム開発の経験がある方は、即戦力としてご活躍いただけます。
開発環境
主要な開発環境はDatabricksであり、PythonやSQLを用いたデータ処理が中心となります。 既存のパイプラインはApache Spark/PySparkで構築されています。
稼働日数
週5日
精算
140~180時間
面談回数
2回(オンライン)
作業開始時期
即日
募集人数
3人
チーム規模
6-10名
リモート
フルリモート
平均稼働時間
月平均160時間程度
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア
Python, Spark, SQL
東京都
65-75万円