예진, 한국어 특화 8B 모델 공개…토크나이저부터 독자 개발
예진, 한국어 특화 8B AI 모델 공개…사전학습부터 독자 개발
- 매체
- AI타임스
- 게시
- 중요도
- 2/5
- 화제 지수
- —
한국어 요약
AI 스타트업 예진이 한국어에 특화된 80억 파라미터 파운데이션 모델 '예진 8B v3'를 공개했다. 토크나이저 설계부터 사전학습까지 전 과정을 자체 개발한 프롬 스크래치 모델이며, 기존 공개 모델과의 유사도가 0.0014 이하다. 학습에는 과학기술정보통신부와 정보통신산업진흥원의 지원을 받은 엔비디아 H200 GPU 8장을 활용했다.
원문 발췌 · English
AI 전문 예진(대표 고종현)은 한국어에 특화된 80억 매개변수 파운데이션 모델 ‘예진 8B v3’를 개발했다고 6일 밝혔다.예진 8B v3는 해외 공개 모델의 가중치를 쓰지 않고, 토크나이저 설계부터 사전학습까지 전 과정을 직접 수행한 프롬 스크래치 모델이다. 공개 모델 6종과 가중치를 비교한 결과, 유사도가 0.0014 이하로 기존 모델을 미세조정한 파생 모델이 아니라는 설명이다.학습에는 과학기술정보통신부와 정보통신산업진흥원(NIPA)의 ‘고성능 컴퓨팅 지원사업’으로 지원받은 엔비디아 H200 그래픽처리장치(GPU) 8장을 활용