메타의 바이트 언어모델 BLT, 토큰화 없이 추론 효율 2배 향상 기술 공개
메타가 공개한 ‘바이트 언어모델 BLT’는 기존 AI 언어 모델의 핵심인 ‘토큰화’ 과정을 생략하고 데이터를 바이트 단위로 직접 처리하여 추론 효율을 2배 높이는 혁신적인 기술입니다. 이는 OOV 문제 해결, 정보 손실 감소, 계산량 단축으로 이어져 AI 서비스의 속도와 정확성을 크게 향상시키며, 다국어 처리 및 저사양 기기에서의 AI 활용 가능성을 넓힐 것으로 기대됩니다. 목차 BLT: AI 언어 … 더 읽기