research.google 기사

Google, 수면 단계 활용한 LLM 지속 학습 프레임워크 공개

Google Research의 Ali Behrouz와 Vahab Mirrokni는 새 정보를 단기 기억에서 장기 파라미터로 옮기는 ‘수면’ 단계 기반의 LLM 지속 학습 프레임워크를 소개했습니다. 모델은 입력을 받는 활성 단계와 오프라인 통합·자율 개선 단계를 번갈아 거치며, 연구진은 최대 1,000만 토큰의 장문 지식...