#๋ชจ๋๋ ํฐ #ImageBind #F-VLM ํจ๊ป ๊ณต์ ํ๊ณ ์ฑ์ฅํ๋ ์ฐ๊ตฌ ๋ฌธํ๋ฅผ ์ ํํด์ |
|
|
2023๋
5์ 22์ผ ๋ชจ๋๋ ํฐ |
|
|
Happy Birthday!
๋ชจ๋๋ ํฐ๊ฐ ํ ์ด์ด ๋์์ด์๐ฅณ.
๊ฐ์น๋ฅผ ํจ๊ป ๋๋๊ธฐ ์ํด ํ์ํ ๋ชจ๋๋ ํฐ.
์์ผ๋ก ๋ ์ด, ์ธ ์ด์ด ๋ ๋๊น์ง ํจ๊ปํด ์ค ๊ฑฐ์ฃ ? :) |
|
|
๋, ๐ฎ๋ชจ๋๋ ํฐ ์ ๋ณด๊ณ ์๋์? |
|
|
๋๊ณผ ๊ฐ์ด ์ค๋ ์ฑ์ฅํ๊ณ ์ถ์ด์.
์ง์ํ ์๊ฒฌ๊ณผ ๋ฐ๋ปํ ์์ ๊ธฐ๋ค๋ฆด๊ฒ์! |
|
|
๐๊ณต์ง_๋ค์์ฃผ ๋ชจ๋๋ ํฐ๋ ๊ฐ๊ฟ์ด์ ํด๊ฐ๋ก ํ ์ฃผ ์ฌ์ด๊ฐ๋๋ค๐ด. |
|
|
- ๋ฉํ, ์ฌ๋์ฒ๋ผ ํ์ตํ๋ AI ๋ชจ๋ธ '์ด๋ฏธ์ง๋ฐ์ธ๋(ImageBind)' ๊ณต๊ฐ
- ๊ตฌ๊ธ, ์์ด ๋ฐ์ดํฐ ์ธ์ ๋ํ ๊ฐ์ต
- ์์ฆ ํซํ LLM์ ๋ฐฐ์๋ณด๊ณ ์ถ๋ค๋ฉด?
- ๊ตฌ๊ธ์ ๊ฐ๋ฐฉํ ์ดํ ๊ฐ์ฒด ํ์ง ๋ชจ๋ธ 'F-VLM'
|
|
|
์ด๋ฆฐ ์ธ๋ฏธ๋: AI ์ฐ๊ตฌ์์ผ๋ก ์ผํ๋ ๋ฒ, ์๋ก์ด AI ์๋ฃจ์
<๋๋ง์AI> |
|
|
๋ฉํ, ์ฌ๋์ฒ๋ผ ํ์ตํ๋ AI ๋ชจ๋ธ '์ด๋ฏธ์ง๋ฐ์ธ๋(ImageBind)' ๊ณต๊ฐ |
|
|
์ฌ๋์ ์ธ๋ถ ํ๊ฒฝ์์ ์ ๋ณด๋ฅผ ์ป์ ๋, ์๊ฐ ๋ฟ๋ง ์๋๋ผ ์ฌ๋ฌ ๊ฐ๊ฐ๋ค์ ์ฌ์ฉํ์ฃ ? ๋ฅ๋ฌ๋ ๋ถ์ผ์์๋ ๋ค์ํ ๋ชจ๋ฌ๋ฆฌํฐ(Modality)๋ฅผ ๊ฒฐํฉํ๋ ์ฐ๊ตฌ๊ฐ ํ๋ฐํ๊ฒ ์งํ๋๊ณ ์์ต๋๋ค. ์ต๊ทผ ๋ฉํ๊ฐ ๊ณต๊ฐํ ์๋ก์ด AI ๋ชจ๋ธ โ์ด๋ฏธ์ง๋ฐ์ธ๋(ImageBind)โ๋ ์ด๋ฏธ์งยท๋น๋์ค, ํ
์คํธ, ์ค๋์ค, ์ดํ์(์ ์ธ์ ์ด๋ฏธ์ง) ๋ฑ 6๊ฐ์ง ์ ํ์ ๋ฐ์ดํฐ๋ฅผ ํ๋์ ์๋ฒ ๋ฉ ๊ณต๊ฐ์ ๊ฒฐํฉํ๋ ๋ชจ๋ธ์ธ๋ฐ์. ๊ณต๊ฐ๋ ์ฝ๋, ๋ฐ๋ชจ๊ฐ ํฌํจ๋ ์์ธํ ๋ด์ฉ์ ํ์ธํด ๋ณด์ธ์! |
|
|
๊ตฌ๊ธ, ์์ด ๋ฐ์ดํฐ ์ธ์ ๋ํ ๊ฐ์ต(~8.10) |
|
|
๊ตฌ๊ธ์ด ์์ด ๋ฐ์ดํฐ๋ฅผ ์ธ์ํ๋ ์บ๊ธ ๋ํ๋ฅผ ๊ฐ์ตํ์์ต๋๋ค. ์์ฑ ์ธ์ ๊ธฐ์ ์ ์ฌ๋ฌ ์ ์ ๊ธฐ๊ธฐ์์ ์๊ฐ ์ฅ์ ์ธ๋ค์ ์ ๊ทผ์ฑ์ ๋์์ง๋ง, ์ฒญ๊ฐ ์ฅ์ ์ธ๋ค๊ณผ ๋์ฒญ์ด ์๋ ์ฌ๋๋ค์ ์ด๋ฐ ๊ธฐ๋ฅ์ ์ ๊ทผํ ์ ์์์ด์. ๊ทธ๋์ ๊ตฌ๊ธ์ ๋ณด๋ค ๋ง์ ์ฌ๋๋ค์ด ๊ธฐ์ ์ ๋๋ฆด ์ ์๋๋ก ์์ด ์ธ์ ๊ธฐ์ ๊ฐ๋ฐ์ ์ง์ํ๊ธฐ๋ก ํ๊ณ , ์ด๋ฒ ๋ํ๋ ์ด๋ฌํ ๋งฅ๋ฝ์์ ์ด๋ ธ๋ค๊ณ ํด์. 5๋ฑ ์ด๋ด ์ง์
์ ๊ธฐ๋กํ ํ์๊ฒ๋ ์๊ธ๋ ์ฃผ์ด์ง๋, ๋๋ ๊ด์ฌ์ด ์๋ค๋ฉด ๋์ ํด ๋ณด์ธ์๐. |
|
|
์์ฆ ํซํ LLM์ ๋ฐฐ์๋ณด๊ณ ์ถ๋ค๋ฉด? |
|
|
์์ฆ AI ๋ถ์ผ์์ ๊ฐ์ฅ ์ธ๊ธฐ ์๋ ํค์๋ ์ค ํ๋๊ฐ ๋๊ท๋ชจ ์ธ์ด ๋ชจ๋ธ(LLM)์ด์ฃ ? ๋งค๋
ํ์คํ ๋ฅ๋ฌ๋ ๊ฐ์๋ฅผ ์งํํ๊ณ ์๋ โThe Full Stackโ์์ ์ง๋ ๋ฌ ๊ฐ์ตํ <LLM ๋ถํธ์บ ํ>์ ๊ฐ์ ์๋ฃ์ ์์์ด ๊ณต๊ฐ๋์์ต๋๋ค. ํ๋กฌํํธ ์์ง๋์ด๋ง, LLM์ ์ด์ฉํ ์๋น์ค ๋ฐฐํฌ, ์ฆ๊ฐ ์ธ์ด ๋ชจ๋ธ ๋ฑ์ ์ฝํ
์ธ ๋ค์ด ์ด๋ ค ์์ผ๋, ํด๋น ๋ถ์ผ์ ๊ด์ฌ ์๋ค๋ฉด ์ฐธ๊ณ ํด ์ฃผ์ธ์! |
|
|
๊ตฌ๊ธ์ ๊ฐ๋ฐฉํ ์ดํ ๊ฐ์ฒด ํ์ง ๋ชจ๋ธ 'F-VLM' |
|
|
๊ตฌ๊ธ์ ๊ฐ์ฒด ํ์ง(Object detection) ๋ชจ๋ธ โF-VLMโ์ด ICLR 2023์์ ๋ฐํ๋์์ต๋๋ค. ๊ฐ์ฒด ํ์ง ๋ชจ๋ธ์ด ์ผ๋ฐ์ ์ผ๋ก ์ธ์ํ ์ ์๋ ๋ฌผ์ฒด์ ์ข
๋ฅ๋ 1,000๊ฐ์ง ์ ๋ ๋ฐ์ ์ ๋๋ค๊ณ ํ๋๋ฐ์. ๊ตฌ๊ธ์ ์ด๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํด โCLIPโ๊ณผ ๊ฐ์ VLM(Vision and Language Model)์์ ์์ด๋์ด๋ฅผ ์ป์์ต๋๋ค. ์ด๋ฏธ ํ์ต๋(Pretrained) VLM์ ์ด๋ฏธ์ง ์ธ์ฝ๋์ ํ
์คํธ ์ธ์ฝ๋๋ฅผ ๊ทธ๋๋ก ์ฌ์ฉํ์์๋ LVIS, Object365 ๋ฑ์ ๋ฐ์ดํฐ์
์ผ๋ก ์งํ๋ ํ์คํฌ์์ ์๋ก์ด ์นดํ
๊ณ ๋ฆฌ์ ๋ฌผ์ฒด๋ฅผ ์ ๋๋ก ์ธ์ํ ์ ์์๋ค๊ณ ํด์. |
|
|
_์์ดํ ์ 6๊ฐ์ ์ ์ผ์ ์ธ ์จ๋ผ์ธ AIํ๊ต์
๋๋ค๐๏ธ |
|
|
๋ชจ๋์ฐ ์ปค๋ฎค๋ํฐ ์์ |
|
|
๐ฑํ์์ค์ฟจ ์ฐ๊ตฌ์ ์ฐพ์์ |
|
|
๋, ํน์ ํด์ผํ ๊ณต๋ถ๊ฐ ์ฐจ๊ณก์ฐจ๊ณก ์์ด๊ณ ์์ง ์๋์?๐
๊ณต๋ถํ๊ณ ์ถ์ ๋ถ์ผ๋ง ์ ํํ๋ฉด ํ์์ค์ฟจ์์ ๊ฐ์ ๊ด์ฌ์ฌ๋ฅผ ๊ฐ์ง ๋๋ฃ๋ฅผ ์ฐพ์์ค๋๋ค! ์๋ ๋งํฌ์์ ํ์์ค์ฟจ๋ง์ ํํ๋ ์ดํด๋ณด๊ณ , ์๋ฒ ์ด๋ ๋น ๋ฅด๊ฒ ์์ฑํด ๋ณด์ธ์ :-) _by ์ ์์ฌ ํํด์ฐ |
|
|
๐พLAB ์ฐ๊ตฌ์ ์ฐพ์์ |
|
|
- LLM(Large Language Model) LAB _6์ 3์ผ๊น์ง #ํ์ดํผ์ต(๋
ผ๋ฌธ)
- AI AgTech LAB _6์ 5์ผ๊น์ง #ํ์ดํผ์ต(๋
ผ๋ฌธ)
- SDPB(Stable Diffusion for Paper and Business) _6์ 5์ผ๊น์ง #ํ์ดํผ์ต(๋
ผ๋ฌธ)
- Speech Recognition LAB _6์ 6์ผ๊น์ง #ํ์ดํผ์ต(๋
ผ๋ฌธ)
|
|
|
- SSHAB(Small and Side Hustle Advancement Business) LAB _โณ5์ 27์ผ๊น์ง
- Medical AI LAB _โณ5์ 30์ผ๊น์ง
|
|
|
๋ชจ๋ํ_AI ์ฐ๊ตฌ์์ผ๋ก ์ผํ๋ ๋ฒ: ์ด๋ป๊ฒ ๋น์ ๊ณต์๊ฐ ์ฅ์ ์ด ๋ ์ ์์๊น? |
|
|
- ์ผ์: 5์ 23์ผ ํ์์ผ I 7:30PM - 9PM
- ์ฅ์: ๋ชจ๋์์ฐ๊ตฌ์ ๊ฐ๋จ์บ ํผ์ค
- ์ฐ์ฌ:์ดํ์ธ(์์จ์ํํธ)
- ์ฝํ
์ธ : ๊ฐ์ธ ์ปค๋ฆฌ์ด ์ด์ผ๊ธฐ I AI ์ฑ์ฉ ์์ฅ์ ๊ตฌ์กฐ I ์ด๋ป๊ฒ ๋น์ ๊ณต์๊ฐ ์ฅ์ ์ด ๋ ์ ์์๊น ๋ฑ
|
|
|
๋ชจ๋ํ_์๋ก์ด AI ์๋ฃจ์
, ๋๋ง์ AI |
|
|
- ์ผ์: 5์ 30์ผ ํ์์ผ I 7:30PM - 8:30PM
- ์ฅ์: ๋ชจ๋์์ฐ๊ตฌ์ ๊ฐ๋จ์บ ํผ์ค
- ์ฐ์ฌ:์๋ณํฌ(๋ง์AI)
- ์ฝํ
์ธ : ๋ง์AI ํ์ฌ ์๊ฐ I ๋ง์AI์ ๋ฏธ๋ ์ฌ์
์ ๋ต
|
|
|
๋ ์ค๋๋ ๊ณ ๋ง์์. ๋ค์์ฃผ์ ๋ ๋ง๋์๐ค |
|
|
์, ๋ ํฐ๊ฐ ๋ฉ์ผํจ์์ ์ ๋ณด์ด๋์?
- ์คํธ๋ฉ์ผํจ์์ ์ธ๊ณ ์์์ง๋ ๋ชฐ๋ผ์. ์ฐพ์๊ฐ ํ์ธํด ๋ณด์ธ์!
- ์ฃผ์๋ก์ ๋ชจ๋์์ฐ๊ตฌ์ ์ด๋ฉ์ผ ์ฃผ์(modulabs01@gmail.com)๋ฅผ ์ถ๊ฐํด ์ฃผ์ธ์.
|
|
|
(์ฃผ)๋ชจ๋์์ฐ๊ตฌ์
์์ธ์ ๊ฐ๋จ๊ตฌ ๊ฐ๋จ๋๋ก 324(์ญ์ผ๋์ค์ํ๋ฆฌ์) 2F
|
|
|
|
|