📮 60초 만에 3D 모델이 뚝딱!

#3DGen #LLM

2024. 7. 7.

📮 60초 만에 3D 모델이 뚝딱!

함께 공유하고 성장하는 연구 문화를 전파해요

2024년 7월 8일 모두레터

친구랑 같이읽기 I 웹에서 보기 I 지난 레터 보기

created with ChatGPT-4o

님, 모두레터가 왔어요!

님은 좋아하는 여름 노래가 있나요?
전 최근 뉴진스 하니가 불러 핫해진

'푸른 산호초'에 꽂혔어요🪸.
비와 더위로 힘들지만, 이번주도 화이팅해요!

이번주 SW/AI 소식

텍스트 입력 후 60초 만에 3D 모델이 뚝딱!
LLM의 10억 가지 페르소나로 데이터 생성하기

열린 세미나: 🧠A Unified Framework to Calculate Every Deep Learning Architecture by Hand I 업무를 똑똑하게, 생성형 AI 활용하기

텍스트 입력 후 60초 만에 3D 모델이 뚝딱!

©Meta

메타가 텍스트 프롬프트로 60초 만에 고품질 3D 에셋(assets)을 생성하는 파이프라인 '3D 젠(3D Gen)'을 공개했습니다. 3D 젠의 핵심 기술 '에셋젠(AssetGen)'과 '텍스처젠(TextureGen)'의 논문도 각각 발표했습니다. 3D 젠 파이프라인은 크게 2단계로 이뤄져 있는데요. 첫 번째 단계(AssetGen)에서 3D 메시(mesh)를 생성하고, 두 번째 단계(TextureGen)에서 적절한 텍스처를 입히게 됩니다.

두 단계 모두 디퓨전(Diffusion) 기법이 사용되었는데요. 기존의 3D 생성 모델보다 더 정교하고 프롬프트도 잘 반영된다는 것을 확인할 수 있습니다. 하나의 3D 모델로도 텍스처에 따라서 다양한 사물과 분위기를 표현할 수 있는 것을 보니, 텍스처젠으로 텍스처를 다시 입히는 과정이 핵심적인 아이디어인 것 같네요!

Meta 3D Gen

LLM의 10억 가지 페르소나로 데이터 생성하기

텐센트 AI 연구소의 흥미로운 연구를 소개합니다. LLM으로 특정한 페르소나에 맞는 데이터를 생성하는 논문인데요. '이삿짐 운송 기사' 페르소나로 추론 문제를 생성하면 트럭에 짐을 싣는 예시가 나오고요. '화학 반응속도론 연구자' 페르소나로 수학 문제를 만들면 화합물의 반응에 관한 문제가 생성됩니다.

이 연구의 독특한 점은 약 10억 가지의 페르소나를 구축한 방법에 있는데요. 인터넷에서 텍스트 데이터를 모으고, GPT-4나 라마 3(Llama 3)와 같은 LLM을 이용해 해당 텍스트와 연관된 페르소나를 추출해 내고요. 해당 페르소나와 고객, 동료 등 다양한 관계에 있는 다른 페르소나들을 추가하는 방식으로 페르소나 데이터를 확장합니다. 깃허브 저장소에서 다양한 페르소나로 생성한 텍스트 샘플과 20만 가지의 페르소나 데이터를 공개하고 있으니, 관심 있다면 참고해 주세요.

Scaling Synthetic Data Creation with 1,000,000,000 Personas

필진 I 신승연, 하자혜

🎁설문조사 이벤트 #직장인 #DX #AIX #새내기

님, 업무 툴을 쓰면서 어려웠던 적 있나요?

혹시 엑셀/PPT/챗GPT 등 여러 업무 툴을 사용하면서 어려움을 겪고 있나요? 마땅히 물어볼 사수도 없어 답답하신가요?😩

현재 모두의연구소에서 DX(디지털 전환)에 어려움을 겪고 있는 직장인을 위한 교육 서비스를 만들고 있는데요. 실제 현업자 분들께 가장 적합한 서비스를 제공하고자 설문조사&심층 인터뷰를 진행하고 있습니다.

본 설문조사 말미에 '그룹 인터뷰 참가자'도 모집 중이니, 님도 관심 있다면 적극적인 참여 부탁드릴게요🌿.

지금 참여하기 (5분)

모두의연구소 소식

LAB 연구원 찾아요

🔥지금 65개의 LAB이 '연구 중'이에요!

Data Centric Learning(DCL) LAB 신청하기
Golden Kagglers LAB 신청하기
Continual Learning LAB 신청하기

Natural Language Feedback LAB 신청하기
RISK data-driven decision-making LAB 신청하기
DS4iD LAB 신청하기

새로운 LAB 만들기

풀잎스쿨 연구원 찾아요

빅쿼리로 데이터 웨어하우스 구축하기 신청하기
실전 RAG로 역량 강화하기 신청하기

새로운 풀잎 만들기

열린 세미나

🧠A Unified Framework to Calculate Every Deep Learning Architecture by Hand

영어로 진행되는 딥러닝 세미나

일시: 7월 9일 화요일 7PM - 9:30PM
장소: 모두의연구소 강남캠퍼스 라운지
연사: Tom Yeh (University of Colorado Boulder, Associate Professor)
내용: Presentation about the new freamwork "AI by Hand" · Hands-on exercise: Enjoy practicing some simple calculations sketching and drawing with Professor Tom Yeh!

무료 신청하기

🧑🏻‍💻원데이 세미나 : 업무를 똑똑하게, 생성형 AI 활용하기

프롬프트 기초부터 생성형 AI를 활용한 문서 작성, PPT까지

일시: 7월 15일 월요일 2PM - 5PM
장소: 모두의연구소 강남캠퍼스
연사: 정한결
내용: 생성형 AI 기초 이론 & 프롬프트 엔지니어링 · 프롬프트 허브 소개 & 프롬프트 응용 · 생성형 AI 활용 시장 조사와 데이터 수집, 기획 · 생성형 AI 활용 PPT 제작 등