AI · 글로벌
Perplexity AI, Unigram Tokenizer 공개 예정
Perplexity AI가 2026년 5월 28일 새로운 Unigram tokenizer를 오픈소스로 공개한다고 밝혔다. 이 tokenizer는 reranker 지연 시간을 5배 줄이며 생산 CPU 사용량도 5-6배 감소시킬 것으로 분석된다. Perplexity AI는 Hugging Face의 tokenizer와 비교해 성능을 개선할 계획이다. 이러한 기술은 AI 모델의 효율성을 높이는 데 기여할 전망이다.
출처 1개해외단일 출처단일 출처
출처 1곳 자세히 보기
Perplexity AI의 새로운 기술 공개에 대한 사실 전달
확인된 사실
둘 이상의 출처가 교차 확인한 내용
Perplexity AI, 2026년 5월 28일 Unigram tokenizer 오픈소스 공개 예정
새로운 tokenizer, reranker 지연 시간 5배 감소
CPU 사용량 5-6배 감소
이런 정리를 매일 아침 8시 메일로
댓글
회원 없이도 댓글 작성 가능 · 작성자 책임 · 권리침해 시 즉시 임시조치