この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
Kubernetes データエンジニア|データ分析基盤のバッチ開発および移行業務
案件サマリー
GKEやSnowflake環境におけるデータ分析プラットフォームのバッチ開発・運用エンジニア案件です。データ取得バッチ基盤のリファクタリングやdbt移行、新規バッチの設計・実装や運用を担当していただきます。
この案件のおすすめポイント
- Snowflakeやdbtなどモダンな分析基盤構築の実践力が身につきます
- 大手動画配信の大規模データ取得バッチ刷新に携われる貴重な現場です
- 需要急増中のデータエンジニアとして今後の市場価値を飛躍させます
案件の内容
ライブ配信事業におけるデータ分析基盤の強化に伴い、某大手動画配信プラットフォームからのデータ取得バッチ基盤のリファクタリングおよびdbtへの移行業務をお任せいたします。 【具体的な業務内容】 ・GKEおよびArgo Workflows上で稼働する、外部API連携データ収集バッチの運用・監視・障害対応 ・事業側の分析ニーズに基づいた新規バッチ処理の設計および実装 ・Snowflake環境内におけるデータ加工処理およびデータモデルの設計・整備
募集背景
某大手動画配信プラットフォーム連携バッチ基盤のリファクタリングおよびdbt移行に向けた体制強化のため
必須スキル
・GCPの実務利用経験(BigQuery / GCS / Pub/Sub / GKEのうち複数領域) ・Kubernetes環境での運用経験(Argo Workflows / ArgoCDの経験があれば尚歓迎)
歓迎スキル
・dbtやDataform等のデータモデリングツールを用いた開発経験 ・Snowflakeを活用したデータ基盤の開発・運用経験 ・各種外部APIのクォータ制約や認可フローを考慮したバッチ開発経験
開発環境
GCP (BigQuery, GCS, Pub/Sub, GKE), Kubernetes, Argo Workflows, ArgoCD, Snowflake, dbt, Dataform
稼働日数
週5日
精算
140~180時間
面談回数
1回(オンライン)
作業開始時期
即日
募集人数
1人
リモート
フルリモート
作業開始/終了時間の目安
11:00~20:00
平均稼働時間
精算:営業日数×7h~営業日数×9h
フリーランスボードからのアドバイス
Snowflakeやdbt、Kubernetesを組み合わせたモダンデータスタックの経験は、データエンジニア市場において引く手あまたの強力な武器になります。今回は大手動画配信サービスと連携する大規模バッチのリファクタリングという、設計思想から深く関われる絶好の機会です。これまでのGCPやコンテナ運用の知見を活かしながら最先端のデータ基盤構築スキルを吸収できれば、市場価値はさらに跳ね上がるはずです。フルリモートかつ月額最大100万円の高水準な環境で、次世代を担うデータエンジニアへのステップアップに挑戦してみませんか。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア, バックエンドエンジニア
Google Cloud Platform(GCP), Kubernetes
東京都
95-100万円