この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
AWS データエンジニア|データ基盤設計構築、データパイプラインとAWSインフラ改善
案件サマリー
AWS、Dagster、Terraform等の経験を活かし、データリネージ機能の設計・構築を担います。データインフラエンジニアとして、カタログ基盤構築や認証基盤移行、AWSインフラ最適化まで幅広く担当する案件です。
この案件のおすすめポイント
- DagsterやIcebergなどモダンデータスタックの専門性を高める。
- データリネージから認証基盤まで、裁量大きく設計・構築に携わる。
- データガバナンス領域のスペシャリストとしてキャリアアップを実現。
案件の内容
データリネージ機能の設計・構築をお任せします。 データカタログ基盤(OpenMetadata等、Iceberg/PostgreSQL/Dagster連携)の構築や、 認証基盤の移行(KeycloakのAWSデプロイ、Cognitoからの移行)も担当いただきます。 さらに、データパイプラインのマルチテナント対応(Dagster/Iceberg/Nessie)や、 AWSインフラの改善・最適化(ECSリソース調整、モニタリング、コスト最適化)も重要な業務です。
業界
必須スキル
データパイプラインの設計・構築経験(Dagster, Airflow, dbtなど)は必須です。 データリネージやデータカタログに関する設計経験、またはアーキテクチャの深い知見が求められます。 AWSインフラ(ECS, RDS, ALB, S3など)の構築・運用経験、TerraformによるIaCの経験、 Docker/Docker Composeの活用経験も必要です。GitHubを用いた開発経験があり、 技術選定から設計、実装、運用まで一貫して自走できる方を歓迎します。
歓迎スキル
データカタログの導入・運用経験(OpenMetadata, Atlas, DataHubなど)があれば尚可。 メダリオンアーキテクチャに関する知識、Iceberg/Nessie/Trinoの利用経験をお持ちの方。 Keycloak, OAuth2, OIDCなどの認証基盤の知見、Pythonでの開発経験、 データ品質管理に関する経験も歓迎します。
開発環境
主な開発環境はAWS上で行われ、ECS, RDS, ALB, S3などのサービスを利用します。 データ基盤にはOpenMetadata, Iceberg, PostgreSQL, Dagster, Nessie, Trinoなどを使用。 認証にはKeycloak, Cognito, OAuth2, OIDC。 Infrastructure as CodeにはTerraform、コンテナ技術としてDocker/Docker Compose、 バージョン管理にはGitHubを使用します。その他、Airflowやdbt、Pythonも利用します。
稼働日数
週5日
週5日稼働を想定していますが、0.8人月換算での単価となります。
面談回数
2回(オンライン)
作業開始時期
即日
募集人数
1人
チーム規模
2-5名
リモート
フルリモート
作業開始/終了時間の目安
個人の裁量に任せており、柔軟な働き方が可能です。
平均稼働時間
週5日稼働(月140時間程度)を想定していますが、0.8人月換算での単価となります。
フリーランスボードからのアドバイス
DagsterやIcebergといった最先端の技術スタックに触れられる、非常に魅力的な案件です。単なるパイプライン開発だけでなく、市場で重要性が高まるデータリネージやカタログといったガバナンス領域の設計・構築を上流から経験できます。AWSインフラの最適化から認証基盤の移行まで、裁量を持って取り組めるため、データプラットフォーム全体の専門家としての市場価値を大きく高める絶好の機会となるでしょう。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア, インフラエンジニア
AWS, Terraform, Python
東京都
95万円