노르웨이 국립도서관, 자국어 주권 LLM 학습 파이프라인에 Huawei 2PB 플래시 스토리지 투입

노르웨이 국립도서관은 노르웨이어와 자국 문화·역사를 이해하는 주권 LLM을 개발하며, AI 학습 데이터 파이프라인에 Huawei OceanStor Dorado 2PB 플래시 스토리지를 사용하고 있습니다. 도서관은 2005년부터 디지털화한 도서, 신문, 웹페이지, 방송 자료 등 20PB 규모의 고유 데이터를 보유하고 있으며, 신문사와의 합의를 통해 저작권 콘텐츠도 학습에 활용할 수 있다고 설명했습니다.

이번 프로젝트는 영어 중심의 글로벌 LLM이 포착하기 어려운 지역 언어·문화 지식을 국가 차원에서 보존하려는 흐름을 보여줍니다. 동시에 대규모 AI 학습에서 데이터 주권과 고성능 스토리지 인프라가 핵심 경쟁 요소로 부상하고 있음을 시사하며, Huawei 장비 채택은 유럽 공공 부문 AI 인프라의 공급망 논쟁도 함께 불러올 수 있습니다.

Norway's 2 petabytes of Huawei flash storage and LLM training