#Keras3.0 #AndrejKarpathy #LLM ํจ๊ป ๊ณต์ ํ๊ณ ์ฑ์ฅํ๋ ์ฐ๊ตฌ ๋ฌธํ๋ฅผ ์ ํํด์ |
|
|
2023๋
12์ 4์ผ ๋ชจ๋๋ ํฐ |
|
|
๋, ๋ชจ๋๋ ํฐ๊ฐ ์์ด์! |
|
|
๊ตฐ๊ณ ๊ตฌ๋ง์ ๊ณ์ ์ด ๋์์๋ค์๐ .
ํํด์ ๋ 12์์ ๋ชจ๋์ฝ์ ๊ณ์ ์ด๊ธฐ๋ ํ๋ฐ์.
์ด๋๋ง ์ด๋ฒ์ฃผ ํ ์์ผ์ ์ด๋ฆฝ๋๋ค!~๐
์๋
์ ํจ๋ฐ๋์ด ํํ, ์ฌํธ ์ด๋ค ํ๊ฒฝ์ผ๊น์? |
|
|
- ๋ง์นจ๋ด, Keras 3.0 ์ ์ ์ถ์
- Andrej Karpathy์ LLM ํน๊ฐ
- Django vs Flask, ์ต๊ณ ์ ํ์ด์ฌ ์น ํ๋ ์์ํฌ๋?
|
|
|
์ด๋ฆฐ ์ธ๋ฏธ๋&์ฝํผ๋ฐ์ค: MODUCON 2023 |
|
|
๋ง์นจ๋ด, Keras 3.0 ์ ์ ์ถ์ |
|
|
์ง๋ 7์, ์ผ๋ผ์ค ์ฝ์ด(Keras Core) ๋ผ์ด๋ธ๋ฌ๋ฆฌ ๊ณต๊ฐ์ ํจ๊ป ์ผ๋ผ์ค 3.0์ด ์ฌํด ๊ฐ์ ๋ฐํ๋ ์์ ์ด๋ผ๋ ์์์ ์ ํ๋๋ฐ์. ๊ทธ ์ผ๋ผ์ค 3.0์ด ๋ง์นจ๋ด ์ ์ ์ถ์๋์ต๋๋ค. ์ผ๋ผ์ค ์ฝ์ด์ ๊ฐ์ด ์ผ๋ผ์ค 3.0๋ ๋ฉํฐ ๋ฐฑ์๋๋ฅผ ์ง์ํ๊ธฐ ๋๋ฌธ์ ์ผ๋ผ์ค๋ก ์์ฑํ ์ฝ๋๋ ํ
์ํ๋ก(TensorFlow), ํ์ดํ ์น(PyTorch), JAX ํ๊ฒฝ์์ ๋ฐ๋ก ์คํ๋ ์ ์์ด์. ๋ํ ๋ํ์ด(Numpy) ํจ์๋ค๊ณผ ํจ๊ป ์ ๊ฒฝ๋ง ๊ตฌํ์ ์์ฃผ ์ฌ์ฉ๋๋ ํจ์๋ค์ 'keras.ops' ๋ชจ๋๋ก ์ ๊ณตํ์ฌ, ๋ํ์ด์ ํน์ ๋ฐฑ์๋ ํจ์๋ก ๊ตฌํ๋๋ ๊ธฐ๋ฅ๋ค๋ 'keras.ops'๋ก ๊ตฌํํ ์ ์์ต๋๋ค. ์ผ๋ผ์ค ํจ์๋ง์ ์ฌ์ฉํด์ ๋ชจ๋ธ ํ์ต์ ํ๋ ๊ฒ๋ณด๋ค๋, ๊ธฐ์กด ๋ฐฑ์๋ ์ฝ๋์ ํ๋ฆ์ ์ํฅ์ ์ฃผ์ง ์๋๋ก ํ๋ ๋ฐ ์ง์คํ๋ค๊ณ ํ๋ค์. ํ
์ํ๋ก 2.0 ๋ฒ์ ์ดํ๋ก ์์ ๊ฐ์ง ์๋ ์ผ๋ผ์ค์ ์ธ๊ธฐ, ์ด๋ฒ ๋ฐํ๋ก ๋ค์ ๋ ์ค๋ฅผ ์ ์์๊น์? |
|
|
Andrej Karpathy์ LLM ํน๊ฐ |
|
|
์คํAI์ ์๋๋ ์นดํ์(Andrej Karpathy)๊ฐ 1์๊ฐ ๋ถ๋์ LLM(Large Language Model) ๊ฐ์๋ฅผ ์ ํ๋ธ์ ๊ณต๊ฐํ์ต๋๋ค. ํํธ 1์์๋ LLM์ ์ ์ฒด์ ์ธ ๊ฐ๋
์ ์ค๋ช
ํ๊ณ , ํํธ 2์์๋ 'LLM์ ๋ฏธ๋'๋ฅผ ์ฃผ์ ๋ก Scaling Law(๋ชจ๋ธ์ ์ฑ๋ฅ๊ณผ ๋ชจ๋ธ์ ํฌ๊ธฐ, ๋ฐ์ดํฐ์
์ ํฌ๊ธฐ ์ฌ์ด์ ๊ด๊ณ)์ ๋ฉํฐ๋ชจ๋ฌ๋ฆฌํฐ(Multimodality), ๊ทธ๋ฆฌ๊ณ ์ต๊ทผ์ ํ์ ๊ฐ ๋๋ GPT ์คํ ์ด(Store), LLM OS ๋ฑ์ ์๊ฐํฉ๋๋ค. ๋ง์ง๋ง ํํธ 3์์๋ ํ์ฅ(Jailbreak), ํ๋กฌํํธ ์ธ์ ์
(Prompt injection) ๋ฑ LLM์ ๋ณด์ ์ด์์ ๊ด๋ จ๋ ์ฃผ์ ๋ฅผ ์ด์ผ๊ธฐํฉ๋๋ค. '๋ฐ์ ์ฌ๋์ ์ํ LLM ์๊ฐ(The busy person's intro to LLMs)'๋ผ๋ ์ ๋ชฉ์ ๋ง๊ฒ 1์๊ฐ ์์ ๋ง์ ๋ด์ฉ์ ๋ด์๋๋ฐ์. ๋ ๋ง ์ ์ ๊ฐ ์ ๋ฆฌํ ์ฐธ๊ณ ๋
ผ๋ฌธ ๋ฆฌ์คํธ๋ ์์ผ๋ ํจ๊ป ๋ณด๋ฉด ์ข์ ๊ฒ ๊ฐ์ต๋๋ค. |
|
|
Django vs Flask, ์ต๊ณ ์ ํ์ด์ฌ ์น ํ๋ ์์ํฌ๋? |
|
|
์ฅ๊ณ (Django)์ ํ๋ผ์คํฌ(Flask)๋ ๋ชจ๋ ์น ๊ฐ๋ฐ์ ๋๋ฆฌ ์ฐ์ด๋ ํ์ด์ฌ ํ๋ ์์ํฌ์
๋๋ค. ์น ๊ฐ๋ฐ ๊ณต๋ถ๋ฅผ ์์ํ ๋, ๋ ์ค ๋ฌด์์ ๋ฐฐ์์ผ ํ ์ง ๊ถ๊ธํด ํ ์ ์์ด์. ๋ง์น ๋ฅ๋ฌ๋์์ ํ
์ํ๋ก์ ํ์ดํ ์น ์ฌ์ด์์ ๊ณ ๋ฏผํ๋ ๊ฒ์ฒ๋ผ์. ์ด๋ค ํ๋ ์์ํฌ์ ํน์ง์ ๋น๊ตํ ๊ธ์ด ์ ฏ๋ธ๋ ์ธ(JetBrains) ๋ธ๋ก๊ทธ์ ์ฌ๋ผ์์ต๋๋ค. ์ฅ๊ณ ๋ '๋ชจ๋ ๊ฒ์ ํฌํจํ๋(All-inclusive)' ํ๋ ์์ํฌ์ธ๋ฐ์. ๊ฐ๋จํ ์น์ฌ์ดํธ๋ฅผ ๋ง๋๋ ๋ฐ์๋ ๋ผ์ฐํ
(Routing) ํ์ผ ๋ฑ ์ฌ๋ฌ ๊ฐ์ง๊ฐ ํ์ํ์ง๋ง, ๋ณต์กํ ๊ธฐ๋ฅ๋ ์ฅ๊ณ ๋ง์ผ๋ก ๊ตฌํ์ด ๊ฐ๋ฅํฉ๋๋ค. ๋ฐ๋ฉด์ ํ๋ผ์คํฌ๋ ๊ฐ๋จํ ํ๋ก์ ํธ๋ฅผ ์์ฃผ ์ฝ๊ฒ ๋ง๋ค ์ ์์ง๋ง, ํจํค์ง์ ํ์ฅ ํ๋ก๊ทธ๋จ๋ค์ ์ถ๊ฐ์ ์ผ๋ก ์ฌ์ฉํ๊ฒ ๋๋ค๋ฉด ์ฅ๊ณ ๋ณด๋ค ์ด๋ ค์์ง ์ ์์ด์. ์ด์ธ์๋ URL ์ฒ๋ฆฌ์ ๋ฐ์ดํฐ๋ฒ ์ด์ค ์ฌ์ฉ, ์ฌ์ฉ์ ์ธ์ฆ ๋ฑ ๋ค์ํ ์ธก๋ฉด์์ ๋ ํ๋ ์์ํฌ๋ฅผ ๋น๊ตํฉ๋๋ค. |
|
|
๋ชจ๋์์ฐ๊ตฌ์ ์์
์ปค๋ฎค๋ํฐ & SW/AI ๊ต์ก |
|
|
SW/AI ๊ต์ก์ ์ฐพ์์ |
|
|
<์ธ๊ณต์ง๋ฅ ๋ชจ๋ธ ํ์ฉ ๋ฐฑ์๋ ๊ฐ๋ฐ ๊ณผ์ >
Daum ๊ฒ์์ฌ๋ง, KB ๊ตญ๋ฏผ์ํ, Django ๋์ ์ ์ ์ถ์ ์ ๊ฐ์ฌ์ง์ด ์์ ํ๊ณ ๋ง๋ ๋ฐฑ์๋ ๋ถํธ์บ ํ
|
<AIํ๊ต ์์ดํ ๋ฐ์ดํฐ ์ฌ์ด์ธํฐ์คํธ ๊ณผ์ >
๋ฐ์ดํฐ โ์ฌ์ด์ธํฐ์คํธโ ํ์ ์ญ๋์ ๋ง์ถฐ ์์ฑํ ์ ์ผํ ๊ต์ก ํ๋ก๊ทธ๋จ ๋ง์นจ๋ด ํ์
|
|
|
MODUCON 2023
D-5, ์ฝํผ๋ฐ์ค๊ฐ ๊ณง ์ด๋ ค์! |
|
|
๋ชจ๋์ฝ 2023์ด ์ด๋๋ง ์ฝ์์ผ๋ก ๋ค๊ฐ์๋ค์. ์ง์, ๊ฒฝํ, ๋ง์์ ๋๋๋ ๋ชจ๋์์ฐ๊ตฌ์๋ง์ AI ์ฝํผ๋ฐ์ค ์ถ์ ๋ฅผ ๋๋ ๋ง๊ป ์ฆ๊ฒจ์ฃผ์ธ์. ์ง๊ธ ๋ฐ๋ก ์ ์ฒญํ๊ณ , ๋ค์ฑ๋ก์ด ์ ๋ฌผ ์ด๋ฒคํธ๋ ํจ๊ปํด์! |
|
|
๐์ฌ์ ์ด๋ฒคํธ - ์ฐธ์ฌ ์ ์ฒญ ์ธ์ฆํ๊ณ , ์นํ ์ฌ์ธ ๋์ ๋ฐ์! |
|
|
์ค๋๋ ๋์ ์ฑ์ฅ์ ์์ํ ๊ฒ์! |
|
|
์, ๋ ํฐ๊ฐ ๋ฉ์ผํจ์์ ์ ๋ณด์ด๋์?
- ์คํธ๋ฉ์ผํจ์์ ์ธ๊ณ ์์์ง๋ ๋ชฐ๋ผ์. ์ฐพ์๊ฐ ํ์ธํด ๋ณด์ธ์!
- ์ฃผ์๋ก์ ๋ชจ๋์์ฐ๊ตฌ์ ์ด๋ฉ์ผ ์ฃผ์(modulabs01@gmail.com)๋ฅผ ์ถ๊ฐํด ์ฃผ์ธ์.
|
|
|
์์ธ์ ๊ฐ๋จ๊ตฌ ๊ฐ๋จ๋๋ก 324(์ญ์ผ๋์ค์ํ๋ฆฌ์) 2F
|
|
|
|
|