この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
GCP データエンジニア|BigQueryやAirflowを用いたデータパイプライン構築
案件サマリー
PythonとGCP(BigQuery, Airflow)を用いたデータパイプライン開発経験のあるエンジニアを求めています。社内プロダクトとSNSデータを統合する、大規模データ基盤の設計・構築から運用までを一貫してお任せします。既存パイプラインの改善やデータ品質モニタリングの仕組み作りなど、裁量を持って幅広く活躍できるポジションです。
この案件のおすすめポイント
- 市場で需要の高いGCP(BigQuery/Airflow)での実務経験を存分に活かせます。
- 設計から運用まで携われるため、データ基盤構築の深い知見と経験が得られます。
- SNSとプロダクトデータ統合の経験は、データエンジニアとしての市場価値を高めます。
案件の内容
社内プロダクトデータとSNSデータを統合するデータ基盤の設計・構築・運用を担当していただきます。 具体的には、データパイプラインの設計・実装・運用、データマート/データモデルの設計・構築、既存パイプラインのリファクタリングや性能改善、運用を見据えた実装方針の提案、ドキュメント整備、障害対応およびデータ品質モニタリングの仕組み作り、プロダクトチームとの要件調整や仕様策定などを行っていただきます。 GCP(BigQuery、Cloud Composer/Airflow、Dataflow等)上での開発やPythonによる実装が主な業務です。
必須スキル
仕様提案から影響範囲の洗い出し〜リリースまでの一貫遂行経験 Pythonを用いた開発経験(3年以上目安) BigQueryやRDBに対するSQLを用いた開発経験 データ基盤・データパイプラインの開発経験 バックエンドサービスの開発(データ処理含む)経験 チーム開発の経験(GitHub/Git Flow等)
歓迎スキル
Airflow / Cloud Composer を用いたワークフロー構築経験 Apache Beam / Dataflow を用いたデータ処理経験 BigQuery / Redshift 等のDWH設計・運用経験 dbt等のデータ変換ツール利用経験 データモデリング(スタースキーマ、Data Vault等)の知識 CI/CDパイプライン構築経験
面談回数
1回
作業開始時期
即日
リモート
フルリモート
作業開始/終了時間の目安
10:00-19:00
案件担当のコメント
GCPのデータ基盤構築に携われるポジションです。設計から運用まで幅広く関われますので、BigQueryやAirflowを用いた実務経験が活かせます。週1日出社の想定で比較的柔軟な勤務体制です。
フリーランスボードからのアドバイス
PythonとGCPを用いたデータ基盤開発のご経験は、現在の市場で非常に高く評価されます。この案件では、設計から運用まで一貫して携わることで、そのスキルをさらに磨き上げることが可能です。特にプロダクトとSNSデータの統合は、多くの企業が注目する先進的な領域。ここで得られる知見は、あなたのデータエンジニアとしてのキャリアを確実に次のステージへと押し上げるはずです。ぜひ挑戦をご検討ください。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア, バックエンドエンジニア
Google Cloud Platform(GCP), Python, BigQuery
東京都
80-100万円