📮미스트랄 AI, 첫 멀티모달 모델 공개!

• 미스트랄 AI, 첫 멀티모달 모델 공개
• 큐원 2.5 모델 시리즈 공개

언어 모델 미스트랄(Mistral), MoE(Mixture of Experts) 기법을 사용한 믹스트랄(Mixtral)로 잘 알려져 있는 미스트랄 AI(Mistral AI)가 새로운 모델 픽스트랄 12B(Pixtral 12B)를 공개했습니다. 미스트랄 AI에서는 처음으로 개발된 멀티모달(multimodal) 모델인데요. 이미지와 텍스트가 결합된 데이터로 학습되어 멀티모달 태스크에서 뛰어난 성능을 보였다고 합니다. 멀티모달 태스크뿐만 아니라, 텍스트 벤치마크 테스트에서도 클로드 하이쿠(Claude Haiku), 제미나이 플래시(Gemini Flash) 등 최신 모델과 점수가 비슷하게 나왔다고 하네요. 

픽스트랄 모델은 이미지를 토큰으로 변환하는 비전 인코더(vision encoder)와 다음 토큰을 예측하는 멀티모달 트랜스포머 디코더(transformer decoder)로 이루어져 있습니다. 허깅페이스, vLLM을 통해서도 사용해 볼 수 있으니 관심 있는 분들은 참고해 주세요!

큐원원2.5에는 0.5B(파라미터 5억 개)부터 72B까지 다양한 크기의 모델이 있고요. 성능 측면에서는 기존의 큐원2 모델보다 크게 향상된 것은 물론, 72B 모델 기준 '라마 3 70B', '믹스트랄 8x22B'보다 높은 벤치마크 점수를 기록했습니다. 큐원2.5-매스 모델은 영어와 중국어로 된 수학 문제만 처리할 수 있지만, 기존 모델의 CoT(Chain-of-Thought) 기법과 함께 Tool-integrated Reasoning 기법을 사용하여 현재 최고 수준의 성능을 기록했다고 합니다.

• AI-AI(Artificial Intelligence-Art Interactive) LAB  신청하기
• Edge 디바이스를 위한 AI Compiler Backend LAB  신청하기
• FAIR AI LAB  신청하기
• 쩝쩝 LAB  신청하기

• 소통의 확장 LAB  신청하기
• B-Peach LAB  신청하기
• 태양광 찾아볼 LAB  신청하기
• A(n) Eye LAB  신청하기
• 누구나리포터 LAB  신청하기
• Wheely-X Game LAB  신청하기
• 케어링 노트(부제: 마을약사의 케어링 노트 서비스 개발) LAB  신청하기

• 일시: 9월 27일 금요일 19:00 - 21:00
• 장소: 모두의연구소 대전캠퍼스
• 연사: 황희진(스몰빅웨딩, FE 개발 및 운영), 장래영(주식회사 비햅택스, Software Development 팀 리더)
• 내용: 사이드 프로젝트 제작기 스토리 · 기획, 디자인, 개발 그리고 출시에서 홍보까지 · 프로젝트를 통해 배운 점 · 나만의 모바일 청첩장 제작 실습

• 일시: 9월 30일 월요일 19:00 - 21:00
• 장소: 모두의연구소 대전캠퍼스
• 연사: 김윤숙(충북대학교 국가위기관리연구소)
• 내용: 총 정산액 계산하는 방법 · 결제 수단에 따른 정산액 계산하는 방법 · 전체 결제기관 리스트 출력하는 방법 · 신용카드로 결제한 기관 수 카운트 방법 · 특정 구매자의 결제 수단 확인 방법 · 간단한 매크로 활용법