この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
Python データエンジニア|データ処理基盤最適化
案件サマリー
Databricks(PySpark, Scala)とSparkクラスタの最適化経験を活かし、商用車ロジスティクス可視化基盤のデータ処理最適化を担います。数億行レベルの大規模データを扱い、Azure環境での性能改善、保守、リファクタリングまで幅広くご担当いただきます。
この案件のおすすめポイント
- 市場価値の高いDatabricksでの大規模データ処理の専門性が磨ける。
- 数億行のデータを扱うロジスティクス基盤の性能改善に貢献。
- AzureとDatabricksの専門家として、キャリアを加速させます。
案件の内容
Databricks(PySpark、Scala)を用いたデータ処理基盤のパフォーマンス最適化をご担当いただきます。 具体的には、Databricks環境のチューニング、大規模データ処理の実装・改修、Azureデータ基盤の性能改善、保守・構成管理およびリファクタリングを行っていただきます。
必須スキル
Databricks(PySpark, Scalaでのコーディング) Sparkクラスタ構成・処理方式の最適化経験 大規模データ処理(数億行レベル)の経験
歓迎スキル
Azureデータ基盤構築・運用(Data Factory, SQL Server, SQL Database, Databricks, Functions, DevOps等) Azureインフラ知識(VNet, Private Link, Private Endpoint, Load Balancer等) クエリチューニング(Transact-SQL)経験 スクリプティング(Python, PowerShell) ソースコード管理(GitHub)
面談回数
1回
作業開始時期
即日
募集人数
1人
リモート
常駐
案件担当のコメント
DatabricksやSparkのパフォーマンスチューニング経験が活かせる案件です。選考は比較的早めに進みます。
フリーランスボードからのアドバイス
DatabricksやSparkのパフォーマンスチューニング経験をお持ちのあなたに、まさに最適な案件が登場しました。数億行もの大規模データを扱うこのプロジェクトでは、既存のスキルを最大限に活かしつつ、さらに高度な最適化技術を追求できます。この経験は、需要が高まり続けるデータエンジニアリング市場において、あなたの市場価値を確固たるものにするでしょう。Azureデータ基盤全体の知見も深まるため、今後のキャリアの可能性を大きく広げるチャンスです。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア, バックエンドエンジニア
Spark, Scala, Python
神奈川県
75-100万円