텐센트가 개발한 70억 파라미터 규모의 대규모 언어 모델로, FP8 양자화 기술을 적용해 메모리 사용량을 50% 절감하고 256K 컨텍스트 윈도우를 지원하는 것이 특징입니다.
Suggested: