모델·학습기술 블로그
Meta, 광고 추천에 의미 토큰화 적용…전환 개선 자체 보고
원문 읽기 · Meta Engineering ↗(새 탭에서 열림)Meta는 광고·상품·페이지를 공유 의미 토큰으로 바꿔 신규 항목의 신호 부족을 보완하는 GenRecs 설계를 공개했다.
표현 방식
- 텍스트·이미지·이용 반응을 임베딩하고 부분공간 분해 뒤 코드북의 이산 토큰으로 양자화한다. 유사 항목은 토큰을 공유한다.
- 같은 토큰을 검색과 순위 모델에 사용해 신규 광고와 적은 노출의 항목에 기존 학습 신호를 전이한다.
자체 측정
- Meta는 2026년 2월 GEM·Adaptive Ranking Model과 결합해 전환 +0.35%를 보고했다. 각 구성의 기여나 측정 기준은 공개하지 않았다.
- 8개 토크나이저에서 군집 순도·분포 균형·코드북 활용과 클릭률 예측 정확도의 상관을 관찰했다. 상관계수는 각각 0.84·0.72·0.64다.
한계와 계획
- 전체 항목으로 확장하고 텍스트·이미지·음성·영상에 걸친 공통 표현을 탐색 중이다. 이는 현재 배포된 성능이나 완료된 기능이 아니다.
함께 확인할 조건
- 전환 +0.35%는 GEM·Adaptive Ranking Model과 결합한 내부 수치다. 기준선·표본·인과 기여는 미공개다.
- 토큰 품질과 클릭률 예측의 상관은 8개 버전에서 관찰한 값이며 인과 증거가 아니다.
출처와 편집 기준
Meta Engineering · 기술 블로그 · 검수 2026.10.20 (KST)
요약은 원문의 핵심을 정리했으며, 커머스 인사이트는 편집 해석이다.