募集中 【Python】人材紹介事業のデータ基盤・パイプライン構築支援(リモート可)
社名：非公開
職種：BIエンジニア
稼働日数：週3〜5日溜池山王
報酬：〜80万円／月
| 業務内容 | Databricksを中心としたデータ分析基盤の設計・開発・運用において、主に実装面を一気通貫で担当していただきます。 <具体的な業務内容> ・データ基盤・パイプラインの構築・運用 ・Databricks、AWS、Google Cloud環境でのパイプライン開発（Python, PySpark, SQL） ・複数ソース（自社サイトアクセスログ、求職者属性データ、広告配信データ等）からのデータ収集・統合処理の実装 ・データモデリング・データマートの設計・実装 ・レイヤードアーキテクチャに基づいたデータモデリングおよび利用目的に応じたデータマートの作成 ・データガバナンス・アクセス制御の実装支援 ・Unity Catalogを用いたアクセス制御の設定やデータのマスキング処理、品質チェックの自動化 ・利用者の自走支援・基盤展開 ・Streamlitを用いたデータ可視化アプリの開発や、アナリスト・事業部向けデータ利用環境の整備 ■募集背景 当該企業では、自社プロダクトにおける意思決定の迅速化およびAI活用を見据え、Databricksを用いた大規模なデータ分析基盤の構築・統合を推進しております。 現在、社内エンジニア（1名）が設計・PM・開発を一手に担っていますが、事業スピードに合わせた基盤整備を加速させるため、実業務の手を動かせる即戦力エンジニアの増員が急務となっております。 参画後は社内エンジニアやシニアアドバイザーと密に連携し、手戻りのない堅牢なパイプライン構築およびデータ基盤の実装を牽引していただく方を募集いたします。 ※働き方：リモート＋一部出社相談可能性あり |
|---|---|
| 勤務地 |
溜池山王 |
| 必須要件 | ・データエンジニアとしての基盤構築・パイプライン開発実務経験（3年以上目安） ・Databricks / BigQuery / Snowflake いずれかを用いたデータプラットフォーム開発・運用経験 ・Python（PySpark）および SQL を用いた大規模データの処理・分析実装経験 ・Git を用いたチーム開発（コードレビュー、ブランチ運用等）の経験 ・データモデリング（ディメンショナルモデル等）やレイヤードアーキテクチャの実装経験 |
| 歓迎要件 | ・Unity Catalogを用いたデータガバナンス・アクセス制御の運用経験 ・非構造化データ（テキスト、音声、画像など）のETL/ELTパイプライン構築経験 ・CI/CD（GitHub Actions）やTerraformを用いたIaC・デプロイ自動化の経験 ・機械学習基盤（MLops）の構築や、LLM/AIエージェント連携に向けたデータ整備経験 |
担当者コメント
Databricksを用いた最新スタックでの開発です。
大規模な構造化データのみならず、音声やテキストなどの非構造化データ活用、
将来的なAI/ML連携を見据えた先進的なデータ基盤開発に携われます。
担当者の詳細を見る