この案件は募集終了しました
条件にあう案件が見つからない場合、エージェントに相談してみることをおすすめします。 この案件に類似する非公開案件の紹介やキャリアカウンセリングを無料で行ってくれます。
Dagster データエンジニア|データ基盤構築・認証基盤刷新とインフラ最適化
案件サマリー
AWS、Dagster、Terraformの経験を活かし、データリネージ機能の設計構築をリードするデータインフラエンジニアの業務です。データカタログ基盤の導入や認証基盤の刷新、AWSインフラ全体の最適化まで幅広く貢献していただきます。
この案件のおすすめポイント
- DagsterやTerraformなどモダンなデータ基盤技術の経験を積める
- データリネージ機能の設計から構築まで、裁量を持ってリードできる
- データガバナンス領域の専門性を高め、市場価値の高い人材を目指せる
案件の内容
データリネージ機能の設計から構築、そして技術選定までをリードしていただきます。 OpenMetadataなどのデータカタログ基盤の導入検討と構築、さらにKeycloakをAWS上にデプロイし、CognitoからのIdP移行を含む認証基盤の刷新も主要なミッションです。 その他、データパイプラインのマルチテナント対応や、ECSリソースの最適化、モニタリング設計、コスト管理など、AWSインフラ全体の改善と最適化にも貢献していただきます。
必須スキル
データパイプラインの設計・構築経験が必須です(Dagster、Airflow、dbtなどのツール使用経験)。 また、データリネージやデータカタログの設計経験、AWS(ECS、RDS、ALB、S3など)でのインフラ構築・運用経験をお持ちの方を求めています。 Terraformを用いたIaC(Infrastructure as Code)の経験、Docker環境の構築経験、GitHubでの開発経験も不可欠です。 自律的に課題を発見し解決できる方を歓迎します。
歓迎スキル
データカタログの導入・運用経験や、データメッシュ・メダリオンアーキテクチャへの理解をお持ちの方は特に歓迎いたします。 Apache Iceberg、Nessie、Trinoなどの技術経験、Keycloak、OAuth2、OIDCを用いた認証基盤の構築経験、Python開発経験も評価ポイントです。 データ品質管理やガバナンス設計の経験がある方も歓迎いたします。
開発環境
主要技術スタック: AWS (ECS, RDS, ALB, S3, Cognito), Dagster, Terraform, Docker, GitHub, Python 関連技術・ツール: Airflow, dbt, OpenMetadata, Keycloak, Apache Iceberg, Nessie, Trino, OAuth2, OIDC
稼働日数
週5日
週5日稼働を基本としますが、契約上は0.8人月での単価設定となります。
精算
140~180時間
作業開始時期
即日
リモート
フルリモート
平均稼働時間
月間平均140時間〜180時間程度
フリーランスボードからのアドバイス
AWSやTerraformでのインフラ構築経験を活かし、データガバナンスの最前線で活躍しませんか。本件ではDagsterを用いたデータリネージ機能の設計・構築をリードする重要な役割を担います。単なる基盤構築に留まらず、認証基盤刷新まで手がけることで、市場価値の高いデータインフラの専門家として、さらにキャリアの幅を広げる絶好の機会となるでしょう。
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
インフラエンジニア, データエンジニア, クラウドエンジニア
AWS, Terraform, Python
95万円