この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
Google Cloud Composerを使用したDWH移行開発
この案件のおすすめポイント
- AWSからGCPへのDWH移行という、需要の高いモダンな技術経験が積めます。
- Cloud ComposerとBigQueryを駆使したデータ基盤構築に携われます。
- データエンジニアとして、クラウド間の移行スキルは大きな強みになります。
案件の内容
・Cloud Composerを使用したDWH 移行開発 AWS Redshiftで構築されたDWHをGoogle BigQueryへ移行 →現行のデータマート作成DAG (バッチ)を基に、新規のデータマート作成DAGを開発 →最小権限の原則に則り、利用者が必要なデータのみを参照できるようVIEWを開発 →AWS Redshift から Google BigQuery 移行後、両者にデータ差分がないことの確認対応 →移行後のGoogle BigQueryのセキュリティテスト実施
必須スキル
・SQLを使ったシステム開発経験 ・Python(3.x) 開発のご経験 ・Git/Githubのご経験/理解がある方 ・Visual Studio Codeを使用したシステム開発のご経験 (研修程度でも可/コーディング、コードレビューが出来ること)
歓迎スキル
・Google Cloud での開発のご経験 ・Google BigQuery の利用経験 ・任意の会員システム開発のご経験 ・CI/CD (GitHub Action)
開発環境
・環境:クラウド(Google Cloud Platform) ・言語:Python(3.x)、Google Cloud Composer(Apache Airflow) ・DB:Google BigQuery ・Google Cloud (BigQuery、Cloud Composer) ・Git/Github (ソースコード管理、CI/CD の基点、ドキュメント等) ・slack(通常コミュニケーション、クラウド通知先)
稼働日数
週5日
精算
140~180時間
面談回数
1回(オンライン)
作業開始時期
即日
募集人数
2人
リモート
フルリモート
作業開始/終了時間の目安
10:00-19:00
フリーランスボードからのアドバイス
AWS RedshiftからGoogle BigQueryへのDWH移行という、まさに今トレンドのプロジェクトです。PythonとCloud Composer(Airflow)を用いてデータパイプラインを構築する経験は、データエンジニアとしての市場価値を大きく高めます。クラウド間のデータ移行スキルを身につけ、データ基盤構築のスペシャリストとしてキャリアアップを目指しましょう。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
バックエンドエンジニア
Python, Google Cloud Platform(GCP), SQL
東京都
50-65万円