AWS データエンジニア|データレイク/DWH構築、データ連携パイプラインの最適化
案件サマリー
AWS、GCP、BigQuery、AWS Glue、Terraformを用いたデータエンジニアの案件。AWSとGCP間のデータ連携パイプライン最適化やBigQueryベースのDWH環境整備、IaCを軸としたマルチクラウド管理などを担当します。
この案件のおすすめポイント
- AWSとGCP両方の経験は市場価値を高める貴重なスキルです
- AWS GlueやBigQueryなどモダンなデータ基盤構築を経験
- TerraformによるIaCでインフラ自動化の専門性を磨けます
案件の内容
下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・首都圏の顧客先に出社可能な方 ・週5日(月〜金)で稼働可能な方 *副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー ・データレイク / ETL 基盤の構築 ・AWS Glue(Apache Spark)による分散処理 ・ETL 開発 ・S3 / Lake Formation を用いたデータ管理・セキュリティ設計 ・BigQuery ベースの DWH 環境整備 ・AWS → GCP 間データ連携パイプラインの最適化 ・BigQuery によるデータモデリング・クエリ最適化 ・IaC を軸としたマルチクラウド管理 ・Terraform による環境差分管理・自動化 ・品質管理・運用効率化 ・Airflow などのワークフロー管理と CI/CD 整備 ・データ品質テストの自動化
必須スキル
・AWS 環境でのインフラ構築・運用経験(S3 / IAM / VPC など) ・GCP での構築経験(特に BigQuery と IAM/ネットワーク設定) ・BigQuery を用いた分析 SQL 実務経験(パーティショニング/クラスタリング) ・AWS Glue(PySpark)での ETL 開発・パフォーマンスチューニング ・Terraform による IaC 実践(マルチクラウド or 複数環境)
歓迎スキル
・ BI ダッシュボード構築(Looker Studio 等) ・ Airflow / MWAA での複雑なジョブ管理 ・ データレイクハウス設計(Delta Lake / Iceberg / Hudi) ・ ストリーミング処理(Kinesis / Firehose / Pub/Sub) ・ Python / Go / Java でのツール開発
稼働日数
週5日
面談回数
1回
作業開始時期
即日
リモート
一部リモート可
フリーランスボードからのアドバイス
AWSとGCPを横断するデータ基盤構築の経験は、今後のキャリアで大きな強みになります。市場で非常に需要の高いマルチクラウドスキルを実践的に高められる絶好の機会です。AWS GlueでのETL開発やTerraformを用いたIaCなど、モダンな技術に深く関われます。この案件で得られる知見は、データエンジニアとしての市場価値を飛躍的に向上させるでしょう。
詳細は面談でお伝えします。ご相談ください。
※一部の情報に関して非公開の場合があります
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア
AWS, Google Cloud Platform(GCP), Terraform
東京都
80万円