LLaVA

Microsoft์˜ ์˜คํ”ˆ์†Œ์Šค ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI๋กœ ์ด๋ฏธ์ง€์™€ ํ…์ŠคํŠธ๋ฅผ ํ•จ๊ป˜ ์ฒ˜๋ฆฌํ•˜๋Š” ๋Œ€ํ™”ํ˜• AI

8.0
์ „๋ฌธ์„ฑ
ํ‰๊ท  ํ‰์ 
6.5
ํ•™์Šต๋‚œ์ด๋„
ํ‰๊ท  ํ‰์ 
7.0
์‚ฌ์šฉํŽธ์˜์„ฑ
ํ‰๊ท  ํ‰์ 
7.5
ํ™œ์šฉ๋„
ํ‰๊ท  ํ‰์ 

์ฃผ์š” ๊ธฐ๋Šฅ

  • ์ด๋ฏธ์ง€์™€ ํ…์ŠคํŠธ๋ฅผ ํ•จ๊ป˜ ์ฒ˜๋ฆฌํ•˜๋Š” ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI
  • ์˜คํ”ˆ์†Œ์Šค๋กœ ์ž์œ ๋กœ์šด ์ปค์Šคํ„ฐ๋งˆ์ด์ง• ๊ฐ€๋Šฅ
  • Microsoft์—์„œ ๊ฐœ๋ฐœํ•œ ์•ˆ์ •์ ์ธ AI ๋ชจ๋ธ
  • ๋Œ€ํ™”ํ˜• ์ธํ„ฐํŽ˜์ด์Šค๋กœ ์ž์—ฐ์Šค๋Ÿฌ์šด ์ƒํ˜ธ์ž‘์šฉ
  • ์—ฐ๊ตฌ ๋ฐ ๊ฐœ๋ฐœ ๋ชฉ์ ์œผ๋กœ ํ™œ์šฉ ๊ฐ€๋Šฅ

ํ™œ์šฉ ๋ถ„์•ผ

  • AI ์—ฐ๊ตฌ ๋ฐ ๊ฐœ๋ฐœ
  • ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ๊ฐœ๋ฐœ
  • ์ด๋ฏธ์ง€ ๋ถ„์„ ๋ฐ ์„ค๋ช…
  • ๊ต์œก ๋ฐ ํ•™์Šต ๋„๊ตฌ
  • ์ปค์Šคํ…€ AI ์†”๋ฃจ์…˜ ๊ตฌ์ถ•

๊ธฐ์ˆ  ์ •๋ณด

๊ฐœ๋ฐœ์‚ฌ: Microsoft
๋ผ์ด์„ ์Šค: ์˜คํ”ˆ์†Œ์Šค
๋ชจ๋ธ ์œ ํ˜•: ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI
์ง€์› ์–ธ์–ด: ๋‹ค๊ตญ์–ด
๋ฐฐํฌ ๋ฐฉ์‹: GitHub

์ƒ์„ธ ์„ค๋ช…

LLaVA(Large Language and Vision Assistant)๋Š” Microsoft์—์„œ ๊ฐœ๋ฐœํ•œ ์˜คํ”ˆ์†Œ์Šค ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ AI ๋ชจ๋ธ์ž…๋‹ˆ๋‹ค. ์ด ๋ชจ๋ธ์€ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ(LLM)๊ณผ ์ปดํ“จํ„ฐ ๋น„์ „์„ ๊ฒฐํ•ฉํ•˜์—ฌ ์ด๋ฏธ์ง€์™€ ํ…์ŠคํŠธ๋ฅผ ํ•จ๊ป˜ ์ฒ˜๋ฆฌํ•  ์ˆ˜ ์žˆ๋Š” ํ˜์‹ ์ ์ธ AI ์‹œ์Šคํ…œ์ž…๋‹ˆ๋‹ค.

LLaVA์˜ ๊ฐ€์žฅ ํฐ ํŠน์ง•์€ ์˜คํ”ˆ์†Œ์Šค๋ผ๋Š” ์ ์ž…๋‹ˆ๋‹ค. ์—ฐ๊ตฌ์ž์™€ ๊ฐœ๋ฐœ์ž๋“ค์ด ์ž์œ ๋กญ๊ฒŒ ๋ชจ๋ธ์„ ๋‹ค์šด๋กœ๋“œํ•˜๊ณ  ์ˆ˜์ •ํ•  ์ˆ˜ ์žˆ์–ด, ๋‹ค์–‘ํ•œ ๋ถ„์•ผ์—์„œ ํ™œ์šฉํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ AI ์—ฐ๊ตฌ ๋ถ„์•ผ์—์„œ ๋„๋ฆฌ ์‚ฌ์šฉ๋˜๊ณ  ์žˆ์œผ๋ฉฐ, ์ปค์Šคํ…€ AI ์†”๋ฃจ์…˜์„ ๊ตฌ์ถ•ํ•˜๋Š” ๋ฐ ์œ ์šฉํ•ฉ๋‹ˆ๋‹ค.

์ด ๋ชจ๋ธ์€ ์ด๋ฏธ์ง€ ๋ถ„์„, ์ด๋ฏธ์ง€ ์„ค๋ช…, ์‹œ๊ฐ์  ์งˆ์˜์‘๋‹ต ๋“ฑ ๋‹ค์–‘ํ•œ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ์ž‘์—…์„ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ž์—ฐ์–ด๋กœ ์ด๋ฏธ์ง€์— ๋Œ€ํ•ด ์งˆ๋ฌธํ•˜๋ฉด AI๊ฐ€ ์ด๋ฏธ์ง€๋ฅผ ๋ถ„์„ํ•˜๊ณ  ์ ์ ˆํ•œ ๋‹ต๋ณ€์„ ์ œ๊ณตํ•˜๋Š” ๋ฐฉ์‹์œผ๋กœ ์ž‘๋™ํ•ฉ๋‹ˆ๋‹ค.

LLaVA๋Š” GitHub๋ฅผ ํ†ตํ•ด ๊ณต๊ฐœ๋˜์–ด ์žˆ์œผ๋ฉฐ, Python๊ณผ PyTorch๋ฅผ ์‚ฌ์šฉํ•˜์—ฌ ๊ตฌํ˜„๋˜์–ด ์žˆ์Šต๋‹ˆ๋‹ค. ๊ฐœ๋ฐœ์ž๋“ค์€ ์ž์‹ ์˜ ํ™˜๊ฒฝ์— ๋งž๊ฒŒ ๋ชจ๋ธ์„ ์„ค์น˜ํ•˜๊ณ  ์‹คํ–‰ํ•  ์ˆ˜ ์žˆ์œผ๋ฉฐ, ํ•„์š”์— ๋”ฐ๋ผ ๋ชจ๋ธ์„ ์ˆ˜์ •ํ•˜๊ฑฐ๋‚˜ ์ƒˆ๋กœ์šด ๊ธฐ๋Šฅ์„ ์ถ”๊ฐ€ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

๊ด€๋ จ ๋งํฌ