AI · 글로벌
Perplexity AI, Unigram Tokenizer 공개 예정
Perplexity AI가 2026년 5월 28일에 새로운 Unigram tokenizer를 오픈소스로 공개할 예정이다. 이 tokenizer는 reranker 지연 시간을 5배 줄이고, 생산 CPU 사용량을 5-6배 감소시키는 성능을 갖추고 있다. Perplexity AI는 Hugging Face의 tokenizer와 비교해 성능 개선을 목표로 하고 있으며, 이는 AI 모델의 효율성을 높이는 데 기여할 것으로 기대된다.
출처·근거
1개 출처 종합매체 유형
해외 1
근거 강도
C단일 출처시각 균형
사실 보도 1
근거 약함 — 교차 확인된 보도 부족 — 후속 보도 권장
출처 1곳 자세히 보기
Perplexity AI의 새로운 기술 공개에 대한 사실 전달
확인된 사실
Perplexity AI, 2026년 5월 28일 Unigram tokenizer 오픈소스 공개 예정
새로운 tokenizer, reranker 지연 시간 5배 감소
CPU 사용량 5-6배 감소
이 이슈, 당신의 한 줄 입장
동의 0 · 반대 0 · 중립 00/30
- 첫 입장을 남겨보세요.
댓글
회원 없이도 댓글 작성 가능 · 작성자 책임 · 권리침해 시 즉시 임시조치