📮 메모리 절반만 써도 되는 똑똑한 AI 등장!

#SmolLM3 #MemOS I 님, 모두레터가 왔어요🦊

2025. 7. 13.

함께 공유하고 성장하는 연구 문화를 전파해요

2025년 7월 14일 모두레터

친구랑 같이읽기 I 웹에서 보기 I 지난 레터 보기

Image created with GPT-4o [🎵]

님, 모두레터가 왔어요!

님, 무더위 속 어떻게 지내고 계세요?

오랜만에 비 소식이 들려와서 반갑더라구요🌧️

폭염에 녹아내릴 것 같았는데 다행이에요..!🫠

조금이나마 시원한 한 주 보내길 바랄게요 :)

이번주 AI 소식

허깅페이스, 소형 다국어 언어 모델 SmolLM3 오픈소스 공개
메모리 관리 혁신 MemTensor, 이제 LLM 성능 한계도 극복한다

허깅페이스, 소형 다국어 언어 모델 SmolLM3 오픈소스 공개

©HuggingFace

허깅페이스가 다국어 이해와 긴 콘텍스트 추론이 가능한 소형 언어 모델 SmolLM3를 오픈소스로 공개했어요. 크기가 3B 정도지만 Llama-3.2-3B, Qwen2.5-3B 등 비슷한 크기 모델보다 뛰어난 성능을 보였고, Gemma3 4B와 Qwen3 4B 등 더 큰 모델과도 경쟁할만한 결과를 얻었다고 합니다.

think/no_think 모드를 지원해서 추론 여부를 설정할 수 있고, 다국어 이해는 유럽 6개 언어만 지원합니다. 주목할 점은 SmolLM3 모델의 아키텍처부터 학습 방법까지 모든 정보가 블루프린트로 공개되어 언어 모델 개발에 관심 있는 분들에게 유용할 것 같아요.

SmolLM3: smol, multilingual, long-context reasoner

메모리 관리 혁신 MemTensor, 이제 LLM 성능 한계도 극복한다

MemOS vs OpenAI 성능 비교 결과: 정확도 38.97% 향상 | 토큰 사용량 60.95% 절약

©HuggingFace

중국 AI 스타트업 MemTensor가 LLM을 위한 메모리 관리 라이브러리 MemOS를 발표했어요. LLM 성능은 나날이 향상되고 있지만, 잘 정의된 메모리 관리 시스템이 부족해서 긴 콘텍스트 추론과 지속적인 개인화, 지식 일관성 등을 개발하기 어렵다고 합니다.

기존 모델은 주로 정적인 파라미터와 단기간 상태에 의존해서 장기간에 걸쳐 지식을 업데이트하는 데 한계가 있었다고 하네요. MemOS는 메모리를 관리 가능한 시스템 리소스로 취급하여 MemCube라는 기본 단위로 메모리 내용과 메타데이터를 캡슐화하고, 다양한 메모리 유형에 대한 통합 관리 프레임워크를 제공해서 LLM이 더욱 일관성 있고 개인화된 상호작용을 할 수 있도록 합니다.

MemOS: A Memory OS for AI System

필진 I 하자혜, 신승연

🗞️누구나 AI 연구자가 될 수 있다, 모두의연구소 100편 논문 달성!

학위나 소속 없이도 누구나 연구할 수 있는 환경을 만들어온 모두의연구소가 창립 10주년을 맞은 올해, 누적 논문 발표 100편을 달성했어요. 이 중 70여 편이 NeurIPS, ICLR 같은 탑티어 학회에 게재되었는데요. 님도 열린 연구에 관심 있다면, 한번 도전해 보세요! :)

자세히 읽기

열린 연구실

Quantum Computing LAB (시즌 4) 신청하기
VLMAI LAB 신청하기
Wiki_RAI LAB 신청하기

반려로봇 LAB (시즌 4) 신청하기

전체 보기

열린 세미나

생성형 모델 기반 로봇 행동 제어의 진화

일시: 7월 15일(화) 19:00 - 21:30
장소: 모두의연구소 강남캠퍼스 & 온라인
연사: 박철(DR4R LAB 랩짱)
내용: 오프닝 및 세미나 개요 · 생성형 모델의 기초 이론 · 확산 모델 이론 심화 · Diffusion 기반 로봇 제어 모델 소개 · ACT, Consistency Policy와의 연결 등

신청하기