BigQuery データエンジニア|公営競技向けデータパイプラインとLLM活用
案件サマリー
SQL、BigQuery、Pythonでの開発経験を活かし、データエンジニアを募集します。公営競技向け新規サービス開発において、MySQLからBigQueryへのデータパイプライン設計・実装や、LLMを活用した自然言語でのデータ取得機能開発などをご担当いただきます。
この案件のおすすめポイント
- LLM活用の自然言語SQL生成など、最先端のデータ技術に挑戦できます
- MySQLからBigQueryへ、モダンなデータ基盤構築で市場価値向上へ
- 設計から実装まで裁量大、フルリモートで柔軟な働き方を実現できます
案件の内容
・公営競技向け新規サービス開発に携わっていただきます。 ・主に下記作業をご担当いただきます。 -MySQLからBigQueryへのデータパイプライン設計、実装、運用 -ETL、ELT処理の構築(抽出、変換、ロードの自動化) -データ整形、正規化、スキーマ設計 -BigQueryのパフォーマンス最適化(クエリ改善、コスト最適化) -Slackから自然言語によりデータ取得できる仕組みの設計、開発 -LLMを活用した自然言語からSQL変換ロジックの実装 -Slack API、Botによるインターフェース開発 -Pythonによるデータ処理、バッチ処理の実装 -定期実行ジョブ(スケジューラ)の設計、運用 -データ品質管理(検証、監視、エラーハンドリング) -ログ設計、トラブルシューティング -既存基盤の改善、リファクタリング -拡張性を見据えた設計
必須スキル
・SQLを用いた複雑クエリとパフォーマンスチューニング経験 ・BigQueryやRedshiftまたはSnowflakeを用いた作業経験 ・ETLとELTパイプライン設計及び実装経験 ・Pythonを用いたデータ処理とバッチ開発経験 ・RDB(MySQL等)実務経験 ・クラウド(GCPまたはAWS)を用いた作業経験 ・Gitを用いたチーム開発経験 ・一人称における要件整理~設計及び実装までの作業経験
歓迎スキル
・BigQueryやCloud Run及びDataflow等を用いた作業経験 ・S3やGlue及びAthena等を用いた作業経験 ・データ基盤の新規構築や大規模改善経験 ・LLMを活用した自然言語によるSQL変換ロジック実装経験 ・大規模データ処理経験 ・クエリとコスト最適化経験 ・Dockerを用いた作業やCI/CDパイプライン構築運用経験 ・Slack APIとBot開発経験 ・BIツール(LookerやTableau)を用いた作業経験 ・データ品質管理経験 ・ワークフロー管理経験
面談回数
1回
作業開始時期
即日
リモート
フルリモート
案件担当のコメント
データサイエンティストとしての経験を活かすことができます。 複数案件を保有している企業ですので、 ご経験と実績に応じて別案件のご提案も差し上げる場合がございます。 新しいアイディアや技術を積極的に導入し、 経験豊富なメンバーと成長が出来る環境でございます。 スキルアップされたい方、長期的に参画されたい方にオススメの案件です。 基本的にはフルリモート作業を見込んでおります。
フリーランスボードからのアドバイス
LLMを活用した自然言語からのSQL変換など、データエンジニアとして非常にエキサイティングな経験が積める案件です。BigQueryを中心としたモダンなデータ基盤構築スキルは市場価値が非常に高く、今後のキャリアを大きく飛躍させるでしょう。要件整理から実装まで一人称で裁量を持って進められる環境で、ぜひあなたの技術力を発揮してください。
詳細は面談でお伝えします。ご相談ください。
※一部の情報に関して非公開の場合があります
企業名
サンプル企業名株式会社
サービス/プロジェクト名
サービス/プロジェクト名
詳細スケジュール/リリース時期
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
詳細スケジュール/リリース時期は面談時にお伝えします
現場責任者の雰囲気
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
現場責任者の雰囲気は面談時にお伝えします。
開発体制の詳細
サンプル: エンジニア8名(バックエンド4名、フロントエンド3名、QA1名)
案件探しはAIに。あなたは確認だけ。
AIエージェントが40万件の案件からあなた専用の提案。利用中のフリーランスは平均より月10万円以上の高単価を実現しています。
この案件に似た条件で検索する
データエンジニア
Python, SQL, BigQuery
東京都
80万円