์ธํ ๋ฆฌ์ด๋ฅผ ๋ฌ์ฌํ ํ ์คํธ ํ๋กฌํํธ๋ก๋ถํฐ 3์ฐจ์ ๋ฉ์(Mesh) ๋ฐ์ดํฐ๋ฅผ ์์ฑํ๋ ๋ชจ๋ธ โText2Roomโ์ด ๋ฐํ๋์์ต๋๋ค. โText2Roomโ์ Text-to-Image ๋ชจ๋ธ์ด ์์ฑํ 2์ฐจ์ ์ด๋ฏธ์ง์ ๊ทธ ์ด๋ฏธ์ง๋ก๋ถํฐ ์์ธก๋ ๊น์ด(Depth) ์ ๋ณด๋ฅผ ๊ฒฐํฉํด 3์ฐจ์์ ์ด๋ฏธ์ง๋ฅผ ์์ฑํฉ๋๋ค. โA living room with a lit furnace, couch, and cozy curtains, bright lamps that make the room look well-lit.โ๋ผ๋ ํ๋กฌํํธ๋ก ์ด๋ค 3D ์ธํ ๋ฆฌ์ด๊ฐ ์์ฑ๋๋์ง ์๋ ๋งํฌ์์ ํ์ธํด ๋ณด์ธ์!
Text2Room: Extracting Textured 3D Meshes from 2D Text-to-Image Models
'์ฑGPT ํ๋ฌ๊ทธ์ธ'์ด ๊ณต๊ฐ๋์์ต๋๋ค. ์ฒซ ํ๋ฌ๊ทธ์ธ์ ์ฌ๋(Slack), ์ต์คํผ๋์(Expedia), ์คํฝ(Speak) ๋ฑ์ 12๊ฐ ๊ธฐ์ ์์ ๊ฐ๋ฐ๋์๋๋ฐ์. ์ด ๊ฐ์ ์ธ๋ถ ํ๋ฌ๊ทธ์ธ์ ์ฑGPT์ ์ต์ ์ ๋ณด๋ฅผ ์ ๊ณตํ์ฌ, ๋ ์ ํํ๊ณ ์์ ํ ๋ต๋ณ์ ๋ง๋ค๋๋ก ๋์ต๋๋ค. ์ผํ ๋ฐ ๊ฒฐ์ ์ ์ฒด์ธ ํด๋ผ๋(Klarna)์ ํ๋ฌ๊ทธ์ธ์์๋ โ์ผํ GPTโ ๊ธฐ๋ฅ์ ์ด์ฉํ ์ ์๋ ๊ฑฐ์ฃ . ๋ํ, ์คํAI๋ ์ฑGPT์ ์ธํฐ๋ท ๊ฒ์ ๊ธฐ๋ฅ์ ์ถ๊ฐํ๊ณ ์๋ค๊ณ ํ๋๋ฐ์. ํ์ฌ ์ง๋ฉดํ ์ค๋ต์ ์ ๋ต์ฒ๋ผ ์ ์ํ๋ ํ ๋ฃจ์๋ค์ด์ (Hallucination, ํ๊ฐ) ๋ฌธ์ ๊ฐ ํด๊ฒฐ๋ ์ง ๊ธฐ๋๊ฐ ๋ฉ๋๋ค!
ChatGPT Plugins
์ฃผํผํฐ ๋ ธํธ๋ถ(Jupyter notebook)์ ์ฝ๋๋ฅผ ์์ฐจ์ ์ผ๋ก ์คํํ๋ฉด์ ๊ฒฐ๊ณผ๋ฅผ ์ฆ์ ํ์ธํ ์ ์๊ธฐ ๋๋ฌธ์, ๋จธ์ ๋ฌ๋ ๋ถ์ผ์ ๋ง์ ์ฌ๋๋ค์ด ์ ์ฉํ๊ณ ์์ฃ . ๊ธฐ์กด ์ฃผํผํฐ ๋ ธํธ๋ถ ํ์ผ(ipynb)์ ์ ์ด์จ(JSON) ํ์์ผ๋ก ๊ฐ๋ ์ฑ์ด ๋จ์ด์ก์๋๋ฐ์. ์ด์ ๋ ํ๊น ํ์ด์ค ํ๋ธ(Hugging Face Hub)์์๋ ์ฃผํผํฐ ๋ ธํธ๋ถ๊ณผ ๊ตฌ๊ธ ์ฝ๋ฉ ํ๊ฒฝ์ฒ๋ผ ๊น๋ํ๊ฒ ๋ ๋๋ง(Rendering)๋ ipynb ํ์ผ์ ํ์ธํ ์ ์์ต๋๋ค.
Jupyter X Hugging Face
๋ชจ๋์์ฐ๊ตฌ์ JAX/Flax LAB์์ ๊ตฌ๊ธ์ ๋จธ์ ๋ฌ๋ ๋ผ์ด๋ธ๋ฌ๋ฆฌ์ธ โJAXโ์ ๊ณต์ ๋ฌธ์๋ฅผ ํ๊ตญ์ด๋ก ๋ฒ์ญํ๋ ํ๋ก์ ํธ๋ฅผ ์งํ ์ค์ ๋๋ค. โJAXโ๋ ํ์ฌ ๋ฅ๋ฌ๋ ํ๋ ์์ํฌ์์ ๋ง์ด ์ฌ์ฉ๋๋ ๊ธฐ๋ฅ์ธ ์๋ ๋ฏธ๋ถ(Autograd)๊ณผ ๊ฐ์ ์ ํ ๋์(XLA)๋ฅผ ๊ฒฐํฉํด ๊ณ ์ฑ๋ฅ ์ฐ์ฐ ์์ ์ ์ง์ํ๋๋ฐ์. JAX/Flax LAB์์๋ ๊ฐ์ฅ ์ฌ์ด ํํ ๋ฆฌ์ผ์ธ 'Tutorial: JAX 101'์ ๋ฒ์ญํ์ต๋๋ค.
JAX KR ๋ฌธ์ ๋ฒ์ญ ํ๋ก์ ํธ
๋ชจ๋์์ฐ๊ตฌ์ ๊ณต์ SW/AI ๋ด์ค๋ ํฐ