📮 환각은 줄이고, 성능은 더 강력해졌다?

님, 어느새 봄이 성큼 다가왔어요🌿

아직은 일교차가 크지만, 공기가 맑은 날엔 잠시라도 초 봄의 싱그러움을 느껴보면 좋겠어요.

따뜻한 햇살과 함께 즐거운 한 주 보내세요!

마이크로소프트가 경량 LLM인 Phi-4-mini 모델의 테크니컬 리포트를 공개했습니다. 작년 12월 Phi-4 시리즈 발표 이후, 이번에는 Phi-4-mini와 Phi-4-multimodal 모델의 세부 정보를 발표했는데요.

Phi-4-mini는 어휘 크기(vocabulary size)가 확장되면서 다국어 애플리케이션을 보다 효과적으로 지원합니다. 또한, 3.8B 파라미터의 작은 규모에도 수학과 코딩 분야에서는 두 배 크기 모델과 유사한 성능을 보였다고 합니다. 한편, Phi-4-multimodal은 다양한 모달리티(modality) 정보를 처리하는 LoRA 컴포넌트를 결합해, 시각+언어뿐만 아니라 시각+음성, 오디오 입력까지 처리할 수 있도록 설계되었습니다.