【部署の特徴】
■大規模データを扱う前提
2兆レコードを超えるデータを持つプロダクトの開発をするチームだからこそ、UIも含めて常に大規模データを意識した開発を行っています。その意識と知見がチームの開発力を高めていると自認しています。
■助け合うチーム
業務委託の方も含めて、誰かが困っているとすぐに察知してアドバイスやサポートを行う風土が定着しています。チームとしての目的意識が標準的に高いチームだからこそ、能動的なアクションに繋がっているのだと考えています。
■試してみて共有する
新しい技術が出てきたら、プロダクトのこの機能に使えるかも、と仮説を持ってまずはやってみる。気になる技術はチームに共有する。誰かが試してプロダクトが強くなる。そんなサイクルが自然に回っているチームです。
【業務内容】
グループが提供する国内最大級のデータマネジメントプラットフォーム(DMP)を開発・運用する開発チームのデータ基盤構築エンジニアの募集です。グループ内企業から同社に組織とプロダクトが移管されたことで、グループ全体で利活用できる状態になりました。個別最適化されていたものから「統合マーケティングプラットフォーム」として再検討するフェーズの構想設計から関わっていただきます。
■ポジションについて
当ポジションでは、このデータマネジメントプラットフォーム(DMP)のバックエンド・データ基盤構築を担当します。インターネット上での消費者行動や嗜好に関する大規模なデータを収集・分析し、マーケティングや広告に活用していますが、そのアプリケーションのバックエンド側とデータ基盤の設計・構築・運用を担当していただきます。
[直近の主な業務内容]
・バックエンド・データ基盤の設計・構築・運用
・BigQueryに移行するプロジェクトの推進
・クライアントの要件に応じたレポート作成
・自社独自の推定処理(性別・興味関心など)の開発・改善・精度検証
・データの品質管理・保守・最適化
・データのセキュリティ・プライバシーの確保
[開発環境]
◎使用言語/フレームワーク
・画面系:JavaScript、PHP
・バッチ関連:Python、ShellScript、luigi、digdag
・データ処理:SQL
・バックエンド:Rust、Scala
◎使用クラウド
・Google Cloud(BigQuery *Gemini利用を含む、GCS、Dataproc、Cloud Run Functions、Dataplex、workflows、Dataflow、API Gateway等)
・AWS(RDS、S3、Fargate、EC2、Step Functions、Athena、Redshift等)
◎インフラ管理ツール:Terraform
◎データ基盤:Treasure Data、BigQuery、ErasticSearch
◎ソース管理:GitHub
◎CI/CD:CircleCI、GitHubActions、AWS CloudFormation
◎コミュニケーションツール:Slack、Teams、Backlog、Notion
【扱っているデータについて】
・2兆レコードを超えるオンライン行動データ
・アプリ行動ログ
・郵便番号単位の位置情報データ
・各種2ndパーティデータ(金融・購買データ・アンケートパネル・メディアデータ・BtoBデータ等)
・上記をもとにして、特許取得技術も活用した各種推定データ(興味関心・デモグラフィック・購買傾向・ライフスタイル等)
■休日:完全週休二日制, 土, 日, 祝日, GW, 夏季休暇, 年末年始