๋ชฉ๋ก
Vol.122025.11.10

๐Ÿ“‘Microsoft: "แ„‹แ…ตแ„†แ…ตแ„Œแ…ตแ„…แ…ณแ†ฏ แ„แ…ฉแ„ƒแ…ณแ„…แ…ฉ แ„‡แ…กแ„แ…ฏแ„Œแ…ฎแ†ฏแ„€แ…ฆ!"

25.11. 2แ„Œแ…ฎแ„Žแ…ก | Google DeepMind, Tencent, ByteDance, NYU, Stanford, Oxford, Edison Scientific

1,140๋ช… ์ˆ˜์‹ ์˜คํ”ˆ์œจ 56.85%ํด๋ฆญ๋ฅ  8.19%

๐Ÿ“‘Microsoft: "แ„‹แ…ตแ„†แ…ตแ„Œแ…ตแ„…แ…ณแ†ฏ แ„แ…ฉแ„ƒแ…ณแ„…แ…ฉ แ„‡แ…กแ„แ…ฏแ„Œแ…ฎแ†ฏแ„€แ…ฆ!"

25.11. 2แ„Œแ…ฎแ„Žแ…ก | Google DeepMind, Tencent, ByteDance, NYU, Stanford, Oxford, Edison Scientific

๊ธˆ์ฃผ ์บ์น˜ํŽ˜์ดํผ๋Š” Google DeepMind, Tencent, ByteDance, NYU, Stanford, Oxford, Edison Scientific๊ณผ ํ•จ๊ป˜ํ•ฉ๋‹ˆ๋‹ค. 3๋ถ„๋งŒ ํˆฌ์žํ•ด ์“ฑ ๋‘˜๋Ÿฌ๋ณด๊ณ , ๋น ๋ฅด๊ฒŒ ๋ฐ”๋€Œ๋Š” ๊ธฐ์ˆ ์˜ ๋ฐฉํ–ฅ์„ฑ์„ ๋†“์น˜์ง€ ๋งˆ์„ธ์š”!

๐Ÿ“ˆ ์ตœ์‹  AI ํŠธ๋ Œ๋“œ 2์ค„ ์š”์•ฝ

๐ŸŒŸ ์ตœ๊ทผ AI ์—ฐ๊ตฌ์—์„œ๋Š” ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ์ถ”๋ก , ์ˆ˜ํ•™์  ์‚ฌ๊ณ , ๊ทธ๋ฆฌ๊ณ  ์ž์œจ ์—์ด์ „ํŠธ ํ•™์Šต ์‹œ์Šคํ…œ์˜ ๋น„์•ฝ์ ์ธ ๋ฐœ์ „์ด ๋‘๋“œ๋Ÿฌ์ง€๊ณ  ์žˆ์œผ๋ฉฐ, ํŠนํžˆ ์‹œ๊ฐ-์–ธ์–ด ํ†ตํ•ฉ ๋ชจ๋ธ์˜ ์„ฑ๋Šฅ ํ–ฅ์ƒ์ด ์ฃผ๋ชฉ๋ฐ›๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

๐Ÿš€ ๋น„๋””์˜ค ์ƒ์„ฑ, ๋กœ๋ณดํ‹ฑ์Šค, ๊ณผํ•™์  ๋ฐœ๊ฒฌ ๋“ฑ ๋‹ค์–‘ํ•œ ๋ถ„์•ผ์—์„œ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ๊ณผ ๊ฐ•ํ™”ํ•™์Šต์„ ๊ฒฐํ•ฉํ•œ ์ž์œจ ์‹œ์Šคํ…œ์ด ๊ธ‰์†๋„๋กœ ๋ฐœ์ „ํ•˜๊ณ  ์žˆ์œผ๋ฉฐ, ์‹ค์„ธ๊ณ„ ์‘์šฉ ๊ฐ€๋Šฅ์„ฑ์ด ํฌ๊ฒŒ ํ™•๋Œ€๋˜๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค.

๐Ÿ–ผ๏ธ ์ด๋ฏธ์ง€์™€ ๋Œ€ํ™”ํ•˜๋ฉฐ ์ƒ๊ฐํ•˜๋Š” AI์˜ ๋“ฑ์žฅ

V-Thinker: Interactive Thinking with Images

๐Ÿ›๏ธ ์†Œ์†: Beijing University of Posts and Telecommunications, Tencent Inc.

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: Interactive Reasoning, Vision-Centric, Code-Driven Tools

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "AI๊ฐ€ ์ด๋ฏธ์ง€๋ฅผ ๋ณด๋ฉด์„œ ์Šค์Šค๋กœ ์ˆ˜์ •ํ•˜๊ณ  ๋‹ค์‹œ ์ƒ๊ฐํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์‹œ๊ฐ์  ์ถ”๋ก  ๊ณผ์ •์—์„œ AI๊ฐ€ ๋Šฅ๋™์ ์œผ๋กœ ์‹คํ—˜ํ•  ์ˆ˜ ์žˆ๋‹ค๋ฉด ์–ด๋–จ๊นŒ?"

  • "์ด๋ฏธ์ง€๋ฅผ ๋‹จ์ˆœํžˆ ๋ณด๋Š” ๊ฒƒ์„ ๋„˜์–ด, ์กฐ์ž‘ํ•˜๋ฉฐ ์ดํ•ดํ•˜๋Š” AI๊ฐ€ ๊ฐ€๋Šฅํ• ๊นŒ?"

ํ™”๊ฐ€๊ฐ€ ์บ”๋ฒ„์Šค๋ฅผ ๊ณ„์† ์ˆ˜์ •ํ•˜๋ฉฐ ์™„๋ฒฝํ•œ ์ž‘ํ’ˆ์„ ๋งŒ๋“ค์–ด๊ฐ€๋“ฏ, V-Thinker๋Š” ๋Œ€๊ทœ๋ชจ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ๋ชจ๋ธ์— ์ด๋ฏธ์ง€๋ฅผ ์ง์ ‘ ์ˆ˜์ •ํ•˜๊ณ  ๋ฐ˜์„ฑํ•˜๋Š” ๋Šฅ๋ ฅ์„ ๋ถ€์—ฌํ•ฉ๋‹ˆ๋‹ค. ์ฝ”๋“œ ๊ธฐ๋ฐ˜ ๋„๊ตฌ๋ฅผ ํ†ตํ•ด ์ด๋ฏธ์ง€์˜ ์‹œ๊ฐ์  ์ƒํƒœ๋ฅผ ์ž์œจ์ ์œผ๋กœ ๋ณ€๊ฒฝํ•˜๋ฉฐ, ์ƒˆ๋กœ์šด VTBench ๋ฒค์น˜๋งˆํฌ์—์„œ ๊ธฐ์กด ๋ชจ๋ธ ๋Œ€๋น„ ํ‰๊ท  14.6%์˜ ์ •ํ™•๋„ ํ–ฅ์ƒ์„ ๋‹ฌ์„ฑํ–ˆ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ์ •์  ์ด๋ฏธ์ง€ ๋ถ„์„์„ ๋„˜์–ด ๋™์  ์‹œ๊ฐ์  ์ถ”๋ก  ๊ตฌํ˜„

  • ์ฝ”๋“œ ๊ธฐ๋ฐ˜ ์ƒํ˜ธ์ž‘์šฉ์„ ํ†ตํ•œ ๋Šฅ๋™์  ํ•™์Šต

  • ๋‹ค์–‘ํ•œ ๋น„์ „-์–ธ์–ด ๊ณผ์ œ์— ์ ์šฉ ๊ฐ€๋Šฅํ•œ ํ”„๋ ˆ์ž„์›Œํฌ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ์ˆ˜๋™์  ์ด๋ฏธ์ง€ ์ธ์‹ โ†’ ๋Šฅ๋™์  ์‹œ๊ฐ์  ์ถ”๋ก ๊ณผ ์กฐ์ž‘์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐Ÿ… ์˜ฌ๋ฆผํ”ผ์•„๋“œ ๊ธˆ๋ฉ”๋‹ฌ ์ˆ˜์ค€์˜ ์ˆ˜ํ•™ ์ถ”๋ก  AI

Towards Robust Mathematical Reasoning

๐Ÿ›๏ธ ์†Œ์†: Google DeepMind, Georgia Institute of Technology, Microsoft, Seoul National University, Brown University, MIT

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: IMO-Bench, Mathematical Reasoning, Proof Writing

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "AI๊ฐ€ ๊ตญ์ œ ์ˆ˜ํ•™ ์˜ฌ๋ฆผํ”ผ์•„๋“œ ๋ฌธ์ œ๋ฅผ ํ’€ ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์ฆ๋ช… ์ž‘์„ฑ๊นŒ์ง€ ๊ฐ€๋Šฅํ•œ ๊ณ ๊ธ‰ ์ˆ˜ํ•™ ์ถ”๋ก ์ด AI์—๊ฒŒ ๊ฐ€๋Šฅํ• ๊นŒ?"

  • "์ˆ˜ํ•™์  ์—„๋ฐ€์„ฑ์„ ์–ด๋–ป๊ฒŒ AI๋กœ ํ‰๊ฐ€ํ•˜๊ณ  ์ธก์ •ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

์ฒด์Šค ๊ทธ๋žœ๋“œ๋งˆ์Šคํ„ฐ๊ฐ€ ๋ณต์žกํ•œ ์ „๋žต์„ ํŽผ์น˜๋“ฏ, Google DeepMind์˜ Gemini Deep Think (IMO Gold) ๋ชจ๋ธ์€ ๊ฐ•๊ฑดํ™”๋œ ๋ฌธ์ œ์—์„œ 80.0%์˜ ์ •ํ™•๋„, ๋„์ „์ ์ธ ์ฆ๋ช… ์ž‘์„ฑ ๊ณผ์ œ์—์„œ 65.7%์˜ ์ •ํ™•๋„๋ฅผ ๋‹ฌ์„ฑํ–ˆ์Šต๋‹ˆ๋‹ค. IMO-Bench๋ผ๋Š” ์ƒˆ๋กœ์šด ๋ฒค์น˜๋งˆํฌ ์Šค์œ„ํŠธ๋ฅผ ํ†ตํ•ด ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์˜ ๊ณ ๊ธ‰ ์ˆ˜ํ•™์  ์ถ”๋ก  ๋Šฅ๋ ฅ์„ ๋ฌธ์ œ ํ•ด๊ฒฐ, ์ฆ๋ช… ์ž‘์„ฑ, ์ฆ๋ช… ์ฑ„์  ๊ณผ์ œ๋กœ ์ข…ํ•ฉ์ ์œผ๋กœ ํ‰๊ฐ€ํ•ฉ๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ์˜ฌ๋ฆผํ”ผ์•„๋“œ ์ˆ˜์ค€์˜ ๋ณต์žกํ•œ ์ˆ˜ํ•™ ๋ฌธ์ œ ํ•ด๊ฒฐ

  • ์ฆ๋ช… ์ž‘์„ฑ๊ณผ ์ฑ„์ ๊นŒ์ง€ ํฌํ•จํ•œ ์ข…ํ•ฉ์  ํ‰๊ฐ€

  • ๋‹ค์–‘ํ•œ ์ˆ˜ํ•™ ๋ถ„์•ผ์— ๊ฑธ์นœ ๊ฐ•๊ฑดํ•œ ์„ฑ๋Šฅ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ๊ธฐ์ดˆ ์—ฐ์‚ฐ โ†’ ๊ณ ๊ธ‰ ์ˆ˜ํ•™ ์ฆ๋ช… ๋Šฅ๋ ฅ์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐Ÿ” ๋น„๋””์˜ค ์ดํ•ด๋ฅผ ์œ„ํ•œ ์ƒˆ๋กœ์šด ํƒ๊ตฌ ๋ฐฉ๋ฒ•

Dynamic Reflections: Probing Video Representations with Text Alignment

๐Ÿ›๏ธ ์†Œ์†: Google DeepMind, Princeton University

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: Video Representations, Cross-Modal Alignment, Predictive Scaling Laws

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "์ •์  ์ด๋ฏธ์ง€์˜ ์›๋ฆฌ๋ฅผ ๋™์  ๋น„๋””์˜ค์—๋„ ์ ์šฉํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "๋” ๋งŽ์€ ๋ฐ์ดํ„ฐ๊ฐ€ ๋น„๋””์˜ค-ํ…์ŠคํŠธ ์ •๋ ฌ์— ์–ด๋–ค ์˜ํ–ฅ์„ ๋ฏธ์น ๊นŒ?"

  • "๋น„๋””์˜ค ํ‘œํ˜„์˜ ํ’ˆ์งˆ์„ ์–ด๋–ป๊ฒŒ ์ •๋Ÿ‰์ ์œผ๋กœ ์ธก์ •ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

ํƒํ—˜๊ฐ€๊ฐ€ ์ƒˆ๋กœ์šด ์˜์—ญ์„ ๋ฐœ๊ฒฌํ•˜๋“ฏ, ์ด ์—ฐ๊ตฌ๋Š” ๊ต์ฐจ ๋ชจ๋‹ฌ ์ •๋ ฌ ์กฐ์‚ฌ๋ฅผ ์ •์  ์ด๋ฏธ์ง€์—์„œ ๋™์  ๋น„๋””์˜ค๋กœ ํ™•์žฅํ–ˆ์Šต๋‹ˆ๋‹ค. ๋” ํ’๋ถ€ํ•œ ํ…Œ์ŠคํŠธ ์‹œ์ ์˜ ์‹œ๊ฐ์ ยทํ…์ŠคํŠธ ๋ฐ์ดํ„ฐ๊ฐ€ ์ •๋ ฌ ์ ์ˆ˜๋ฅผ ์‹ค์งˆ์ ์œผ๋กœ ํ–ฅ์ƒ์‹œํ‚ค๋ฉฐ, ๋‹ค์–‘ํ•œ ๋น„๋””์˜ค ์ดํ•ด ๊ณผ์ œ์˜ ์„ฑ๋Šฅ๊ณผ ๊ฐ•ํ•œ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ๋ณด์ž…๋‹ˆ๋‹ค. ์˜ˆ์ธก์  ์Šค์ผ€์ผ๋ง ๋ฒ•์น™์„ ๋„์ž…ํ•˜์—ฌ ์ด๋Ÿฌํ•œ ํ–‰๋™์„ ์ •๋Ÿ‰ํ™”ํ•˜๊ณ , ๋น„๋””์˜ค ํ‘œํ˜„์„ ํƒ๊ตฌํ•˜๋Š” ์ƒˆ๋กœ์šด ๋ฐฉ๋ฒ•์„ ์ œ์‹œํ•ฉ๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ์ด๋ฏธ์ง€์—์„œ ๋น„๋””์˜ค๋กœ์˜ ์„ฑ๊ณต์ ์ธ ๋ฐฉ๋ฒ•๋ก  ํ™•์žฅ

  • ์˜ˆ์ธก ๊ฐ€๋Šฅํ•œ ์Šค์ผ€์ผ๋ง ๋ฒ•์น™ ์ œ์‹œ

  • ๋‹ค์–‘ํ•œ ๋น„๋””์˜ค ์ดํ•ด ๊ณผ์ œ์— ์ ์šฉ ๊ฐ€๋Šฅ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ๊ฒฝํ—˜์  ํ‰๊ฐ€ โ†’ ์˜ˆ์ธก ๊ฐ€๋Šฅํ•œ ๊ณผํ•™์  ๋ฐฉ๋ฒ•๋ก ์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐ŸŽจ ์ด๋ฏธ์ง€๋ฅผ ์ฝ”๋“œ๋กœ ๋ฒˆ์—ญํ•˜๋Š” AI

VCode: a Multimodal Coding Benchmark with SVG as Symbolic Visual Representation

๐Ÿ›๏ธ ์†Œ์†: University of Oxford, University of Science and Technology of China, Central South University, Microsoft

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: SVG Generation, Multimodal Coding, VCoder Framework

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "์ž์—ฐ ์ด๋ฏธ์ง€๋ฅผ ์‹คํ–‰ ๊ฐ€๋Šฅํ•œ ์ฝ”๋“œ๋กœ ๋ณ€ํ™˜ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "๋น„์ „-์–ธ์–ด ๋ชจ๋ธ์˜ ์ฝ”๋”ฉ ๋Šฅ๋ ฅ์„ ์–ด๋–ป๊ฒŒ ํ‰๊ฐ€ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "SVG์™€ ๊ฐ™์€ ์ƒ์ง•์  ํ‘œํ˜„์ด AI์—๊ฒŒ ์ƒˆ๋กœ์šด ๊ฐ€๋Šฅ์„ฑ์„ ์—ด์–ด์ค„๊นŒ?"

๊ฑด์ถ•๊ฐ€๊ฐ€ ์ฒญ์‚ฌ์ง„์„ ๊ทธ๋ฆฌ๋“ฏ, VCode ํ”„๋กœ์ ํŠธ๋Š” ๋น„์ „-์–ธ์–ด ๋ชจ๋ธ์ด ์ž์—ฐ ์ด๋ฏธ์ง€๋ฅผ ํ™•์žฅ ๊ฐ€๋Šฅํ•œ ๋ฒกํ„ฐ ๊ทธ๋ž˜ํ”ฝ(SVG) ์ฝ”๋“œ๋กœ ๋ฒˆ์—ญํ•˜๋„๋ก ์š”๊ตฌํ•˜๋Š” ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ์ฝ”๋”ฉ ๋ฒค์น˜๋งˆํฌ๋ฅผ ๋„์ž…ํ•ฉ๋‹ˆ๋‹ค. ์ œ์•ˆ๋œ VCoder ํ”„๋ ˆ์ž„์›Œํฌ๋Š” ๋ฐ˜๋ณต์  ์ˆ˜์ •๊ณผ ์™ธ๋ถ€ ์‹œ๊ฐ ๋„๊ตฌ๋ฅผ ํ™œ์šฉํ•˜์—ฌ, ์ด ๋„์ „์ ์ธ ๊ณผ์ œ์—์„œ ์ตœ์ฒจ๋‹จ ๋น„์ „-์–ธ์–ด ๋ชจ๋ธ์„ 12.3 CodeVQA ํฌ์ธํŠธ ํ–ฅ์ƒ์‹œ์ผฐ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ํ”ฝ์…€์ด ์•„๋‹Œ ์ƒ์ง•์ , ์‹คํ–‰ ๊ฐ€๋Šฅํ•œ ํ‘œํ˜„ ์ƒ์„ฑ

  • ๋ฐ˜๋ณต์  ๊ฐœ์„  ๋ฉ”์ปค๋‹ˆ์ฆ˜์„ ํ†ตํ•œ ํ’ˆ์งˆ ํ–ฅ์ƒ

  • ๋‹ค์–‘ํ•œ ๋””์ž์ธ ๋ฐ ์ฝ”๋”ฉ ์ž‘์—…์— ์ ์šฉ ๊ฐ€๋Šฅ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ํ”ฝ์…€ ๊ธฐ๋ฐ˜ ํ‘œํ˜„ โ†’ ์ƒ์ง•์ , ์‹คํ–‰ ๊ฐ€๋Šฅํ•œ ์ฝ”๋“œ ํ‘œํ˜„์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐Ÿค– ๋กœ๋ด‡์ด ๋ช‡ ์‹œ๊ฐ„์˜ ๋†€์ด๋กœ ์„ธ์ƒ์„ ๋ฐฐ์šด๋‹ค

WorldPlanner: Monte Carlo Tree Search and MPC with Action-Conditioned Visual World Models

๐Ÿ›๏ธ ์†Œ์†: New York University, Meta

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: Model-Based Control, Visual World Models, Robotic Manipulation

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "๋กœ๋ด‡์ด ์ž์œ ๋กœ์šด ๋†€์ด๋งŒ์œผ๋กœ ๋ณต์žกํ•œ ์ž‘์—…์„ ๋ฐฐ์šธ ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์‹œ๊ฐ์  ์„ธ๊ณ„ ๋ชจ๋ธ๊ณผ ๊ณ„ํš ์•Œ๊ณ ๋ฆฌ์ฆ˜์„ ์–ด๋–ป๊ฒŒ ํ†ตํ•ฉํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์†Œ๋Ÿ‰์˜ ๋น„๊ตฌ์กฐํ™” ๋ฐ์ดํ„ฐ๋กœ ์‹ค์„ธ๊ณ„ ๋กœ๋ด‡ ์ œ์–ด๊ฐ€ ๊ฐ€๋Šฅํ• ๊นŒ?"

์•„์ด๊ฐ€ ๋†€์ด๋ฅผ ํ†ตํ•ด ์„ธ์ƒ์„ ๋ฐฐ์šฐ๋“ฏ, WorldPlanner๋Š” ํ–‰๋™ ์กฐ๊ฑด๋ถ€ ์‹œ๊ฐ์  ์„ธ๊ณ„ ๋ชจ๋ธ์„ ๋ชฌํ…Œ์นด๋ฅผ๋กœ ํŠธ๋ฆฌ ํƒ์ƒ‰ ๋ฐ ๋ชจ๋ธ ์˜ˆ์ธก ์ œ์–ด์™€ ํ†ตํ•ฉํ•œ ๋ชจ๋ธ ๊ธฐ๋ฐ˜ ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ๋„์ž…ํ•ฉ๋‹ˆ๋‹ค. ๋ถˆ๊ณผ ๋ช‡ ์‹œ๊ฐ„์˜ ๋น„๊ตฌ์กฐํ™”๋œ ๋†€์ด ๋ฐ์ดํ„ฐ๋งŒ์œผ๋กœ ํ•™์Šตํ•˜์—ฌ, ์‹ค์„ธ๊ณ„ ์กฐ์ž‘ ์ž‘์—…์—์„œ ํ–‰๋™ ๋ณต์ œ ๋ฐฉ๋ฒ•์„ ๋Šฅ๊ฐ€ํ•˜๋Š” ์šฐ์ˆ˜ํ•œ ์„ฑ๋Šฅ์„ ๋ณด์—ฌ์ค๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ๋Œ€๋Ÿ‰์˜ ๋ผ๋ฒจ๋ง๋œ ๋ฐ์ดํ„ฐ ์—†์ด ํšจ์œจ์  ํ•™์Šต

  • ํ–‰๋™ ๋ณต์ œ ๋Œ€๋น„ ๋” ๋‚˜์€ ์‹ค์„ธ๊ณ„ ์„ฑ๋Šฅ

  • ๋‹ค์–‘ํ•œ ๋กœ๋ด‡ ์กฐ์ž‘ ์ž‘์—…์— ์ ์šฉ ๊ฐ€๋Šฅ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ๋Œ€๋Ÿ‰ ๋ฐ์ดํ„ฐ ์˜์กด โ†’ ์†Œ๋Ÿ‰ ๋†€์ด ๋ฐ์ดํ„ฐ ๊ธฐ๋ฐ˜ ํ•™์Šต์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐Ÿ”ฌ 6๊ฐœ์›”์น˜ ์—ฐ๊ตฌ๋ฅผ ์ž๋™์œผ๋กœ ์ˆ˜ํ–‰ํ•˜๋Š” AI ๊ณผํ•™์ž์˜ ์ถœํ˜„

Kosmos: An AI Scientist for Autonomous Discovery

๐Ÿ›๏ธ ์†Œ์†: Edison Scientific Inc.

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: AI Scientist, Multi-Agent Architecture, Autonomous Discovery

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "AI๊ฐ€ ์Šค์Šค๋กœ ๊ณผํ•™์  ๋ฐœ๊ฒฌ์„ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "๋‹ค์ค‘ ์—์ด์ „ํŠธ ์‹œ์Šคํ…œ์ด ๋ณต์žกํ•œ ์—ฐ๊ตฌ ๊ณผ์ •์„ ์ž๋™ํ™”ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "AI ๊ณผํ•™์ž๊ฐ€ ์–ผ๋งˆ๋‚˜ ์‹ ๋ขฐํ•  ์ˆ˜ ์žˆ๋Š” ์—ฐ๊ตฌ ๊ฒฐ๊ณผ๋ฅผ ๋‚ผ ์ˆ˜ ์žˆ์„๊นŒ?"

ํƒํ—˜๋Œ€๊ฐ€ ๋ฏธ์ง€์˜ ๋•…์„ ๋ฐœ๊ฒฌํ•˜๋“ฏ, Edison Scientific์˜ Kosmos๋Š” ๋‹ค์ค‘ ์—์ด์ „ํŠธ ์•„ํ‚คํ…์ฒ˜์™€ ๊ตฌ์กฐํ™”๋œ ์„ธ๊ณ„ ๋ชจ๋ธ์„ ํ™œ์šฉํ•˜์—ฌ ๋‹ค์–‘ํ•œ ๋ถ„์•ผ์—์„œ ์ž์œจ์ , ๋ฐ์ดํ„ฐ ์ฃผ๋„์  ๊ณผํ•™์  ๋ฐœ๊ฒฌ์„ ์ˆ˜ํ–‰ํ•˜๋Š” AI ๊ณผํ•™์ž์ž…๋‹ˆ๋‹ค. ๊ณผํ•™์  ์ฃผ์žฅ์—์„œ ์ตœ๋Œ€ 79.4%์˜ ์ •ํ™•๋„๋ฅผ ๋‹ฌ์„ฑํ•˜๋ฉฐ, ํ•œ ๋ฒˆ์˜ ์‹คํ–‰์œผ๋กœ 6๊ฐœ์›” ์ด์ƒ์˜ ์ธ๊ฐ„ ๋…ธ๋ ฅ์— ํ•ด๋‹นํ•˜๋Š” ์—ฐ๊ตฌ๋ฅผ ์ˆ˜ํ–‰ํ•˜๊ณ , ๊ฒ€์ฆ๋œ ํ†ต์ฐฐ๋ ฅ๊ณผ ์ƒˆ๋กœ์šด ๋ถ„์„ ๋ฐฉ๋ฒ•์„ ์ƒ์„ฑํ•  ์ˆ˜ ์žˆ์Œ์„ ์ž…์ฆํ–ˆ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ์™„์ „ ์ž์œจ์ ์ธ ๊ณผํ•™์  ์—ฐ๊ตฌ ์ˆ˜ํ–‰

  • ๋†’์€ ์ •ํ™•๋„์™€ ๋ฐฉ๋Œ€ํ•œ ์—ฐ๊ตฌ๋Ÿ‰

  • ๋‹ค์–‘ํ•œ ๊ณผํ•™ ๋ถ„์•ผ์— ์ ์šฉ ๊ฐ€๋Šฅ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ์ธ๊ฐ„ ์ฃผ๋„ ์—ฐ๊ตฌ โ†’ AI ์ž์œจ ๊ณผํ•™ ๋ฐœ๊ฒฌ์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐ŸŽฌ 720p ์˜์ƒ์„ 10๋ฐฐ ๋น ๋ฅด๊ฒŒ ์ƒ์„ฑํ•˜๋Š” ํ†ตํ•ฉ ๋ชจ๋ธ

InfinityStar: Unified Spacetime AutoRegressive Modeling for Visual Generation

๐Ÿ›๏ธ ์†Œ์†: ByteDance

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: Spacetime Autoregressive, Video Generation, Text-to-Image

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "์ด๋ฏธ์ง€์™€ ๋น„๋””์˜ค๋ฅผ ํ•˜๋‚˜์˜ ๋ชจ๋ธ๋กœ ์ƒ์„ฑํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์‚ฐ์—… ์ˆ˜์ค€์˜ ๊ณ ํ•ด์ƒ๋„ ๋น„๋””์˜ค๋ฅผ ๋” ๋น ๋ฅด๊ฒŒ ๋งŒ๋“ค ์ˆ˜ ์žˆ์„๊นŒ?"

  • "๊ธด ์ƒํ˜ธ์ž‘์šฉํ˜• ๋น„๋””์˜ค ํ•ฉ์„ฑ์ด ๊ฐ€๋Šฅํ• ๊นŒ?"

๋งˆ๋ฒ•์‚ฌ๊ฐ€ ์‹œ๊ฐ„๊ณผ ๊ณต๊ฐ„์„ ์ž์œ ์ž์žฌ๋กœ ๋‹ค๋ฃจ๋“ฏ, ByteDance์˜ InfinityStar๋Š” ์‚ฐ์—… ์ˆ˜์ค€์˜ 720p ๋น„๋””์˜ค์™€ ๊ณ ํ’ˆ์งˆ ์ด๋ฏธ์ง€๋ฅผ ์ƒ์„ฑํ•  ์ˆ˜ ์žˆ๋Š” ํ†ตํ•ฉ ์‹œ๊ณต๊ฐ„ ์ž๊ธฐํšŒ๊ท€ ๋ชจ๋ธ์ž…๋‹ˆ๋‹ค. ํ…์ŠคํŠธ-์ด๋ฏธ์ง€ ๋ฐ ํ…์ŠคํŠธ-๋น„๋””์˜ค ์ž‘์—…์—์„œ ์ƒˆ๋กœ์šด ์ตœ์ฒจ๋‹จ ์„ฑ๋Šฅ์„ ๋‹ฌ์„ฑํ•˜๋ฉฐ, 720p ๋น„๋””์˜ค ์ƒ์„ฑ์˜ ๊ฒฝ์šฐ ์ฃผ์š” ํ™•์‚ฐ ๋ชจ๋ธ ๋Œ€๋น„ ์ตœ๋Œ€ 10๋ฐฐ ๋น ๋ฅธ ์ถ”๋ก  ์†๋„๋ฅผ ๋ณด์ด๊ณ , ๊ธด ์ƒํ˜ธ์ž‘์šฉํ˜• ๋น„๋””์˜ค ํ•ฉ์„ฑ๋„ ์ง€์›ํ•ฉ๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ์ด๋ฏธ์ง€์™€ ๋น„๋””์˜ค๋ฅผ ํ†ตํ•ฉํ•œ ๋‹จ์ผ ํ”„๋ ˆ์ž„์›Œํฌ

  • 10๋ฐฐ ๋น ๋ฅธ ์ถ”๋ก  ์†๋„

  • ๋‹ค์–‘ํ•œ ํ•ด์ƒ๋„์™€ ๊ธธ์ด์˜ ์ฝ˜ํ…์ธ  ์ƒ์„ฑ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ๋ถ„๋ฆฌ๋œ ์ƒ์„ฑ ๋ชจ๋ธ โ†’ ํ†ตํ•ฉ ์‹œ๊ณต๊ฐ„ ๋ชจ๋ธ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐Ÿ“š ๋ฐ์ดํ„ฐ๊ฐ€ ๋ถ€์กฑํ•  ๋•Œ ๋” ๋น›๋‚˜๋Š” ํ™•์‚ฐ ์–ธ์–ด ๋ชจ๋ธ

Diffusion Language Models are Super Data Learners

๐Ÿ›๏ธ ์†Œ์†: ์—ฌ๋Ÿฌ ์—ฐ๊ตฌ ๊ธฐ๊ด€

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: Diffusion Language Models, Data-Constrained Learning, Intelligence Crossover

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "๋ฐ์ดํ„ฐ๊ฐ€ ์ œํ•œ์ ์ผ ๋•Œ ์–ด๋–ค ๋ชจ๋ธ์ด ๊ฐ€์žฅ ํšจ์œจ์ ์ผ๊นŒ?"

  • "ํ™•์‚ฐ ๋ชจ๋ธ์ด ์–ธ์–ด ์ƒ์„ฑ์—์„œ๋„ ์šฐ์œ„๋ฅผ ์ ํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์ ์€ ๋ฐ์ดํ„ฐ์—์„œ ๋” ๋งŽ์€ ์‹ ํ˜ธ๋ฅผ ์ถ”์ถœํ•˜๋Š” ๊ฒƒ์ด ๊ฐ€๋Šฅํ• ๊นŒ?"

์‚ฌ๋ง‰์˜ ์„ ์ธ์žฅ์ด ์ตœ์†Œํ•œ์˜ ๋ฌผ๋กœ ์ƒ์กดํ•˜๋“ฏ, ํ™•์‚ฐ ์–ธ์–ด ๋ชจ๋ธ(DLM)์€ ๋ฐ์ดํ„ฐ ์ œ์•ฝ ํ™˜๊ฒฝ์—์„œ ์ž๊ธฐํšŒ๊ท€ ๋ชจ๋ธ์„ ์ผ๊ด€๋˜๊ฒŒ ๋Šฅ๊ฐ€ํ•ฉ๋‹ˆ๋‹ค. DLM์ด ์ œํ•œ๋œ ๊ณ ์œ  ๋ฐ์ดํ„ฐ์—์„œ 3๋ฐฐ ์ด์ƒ ๋งŽ์€ ์‹ ํ˜ธ๋ฅผ ์ถ”์ถœํ•˜๋Š” "Intelligence Crossover" ํ˜„์ƒ์„ ๋ณด์ด๋ฉฐ, ์ด๋Ÿฌํ•œ ์„ฑ๋Šฅ ์šฐ์œ„๋Š” ๋Œ€๊ทœ๋ชจ์—์„œ๋„ ์ง€์†๋˜์–ด DLM ์ฝ”๋”๊ฐ€ ํ›จ์”ฌ ๋” ๋งŽ์€ ๊ณ ์œ  ํ† ํฐ์œผ๋กœ ํ›ˆ๋ จ๋œ ์ž๊ธฐํšŒ๊ท€ ๋ชจ๋ธ๊ณผ ๋™๋“ฑํ•œ ์„ฑ๋Šฅ์„ ๋‹ฌ์„ฑํ•ฉ๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ์ œํ•œ๋œ ๋ฐ์ดํ„ฐ์—์„œ 3๋ฐฐ ์ด์ƒ ๋†’์€ ํ•™์Šต ํšจ์œจ

  • ์ž๊ธฐํšŒ๊ท€ ๋ชจ๋ธ ๋Œ€๋น„ ๋ฐ์ดํ„ฐ ํšจ์œจ์„ฑ

  • ๋Œ€๊ทœ๋ชจ์—์„œ๋„ ์ง€์†๋˜๋Š” ์„ฑ๋Šฅ ์šฐ์œ„

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ๋Œ€์šฉ๋Ÿ‰ ๋ฐ์ดํ„ฐ ์˜์กด โ†’ ์†Œ๋Ÿ‰ ๋ฐ์ดํ„ฐ ๊ณ ํšจ์œจ ํ•™์Šต์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๐Ÿ”ฎ ๋ฌดํ•œํžˆ ๊ธด ๋น„๋””์˜ค์—์„œ๋„ ์ค‘์š”ํ•œ ์ˆœ๊ฐ„์„ ํฌ์ฐฉํ•˜๋‹ค

Cambrian-S: Towards Spatial Supersensing in Video

๐Ÿ›๏ธ ์†Œ์†: New York University, Stanford University

๐Ÿท๏ธ ํ•ต์‹ฌ ํ‚ค์›Œ๋“œ: Spatial Supersensing, VSI-SUPER Benchmarks, Predictive Sensing

๐Ÿ’ญ ์ด๋Ÿฐ ์งˆ๋ฌธ์„ ํ•ด๋ณธ ์  ์žˆ๋‚˜์š”?

  • "๋น„๋””์˜ค์—์„œ ์ง„์ •ํ•œ ๊ณต๊ฐ„์ , ์‹œ๊ฐ„์  ์ถ”๋ก ์ด ๊ฐ€๋Šฅํ• ๊นŒ?"

  • "๋ฌดํ•œํžˆ ๊ธด ๋น„๋””์˜ค์—์„œ ์ค‘์š”ํ•œ ์ด๋ฒคํŠธ๋ฅผ ์ž๋™์œผ๋กœ ์ฐพ์•„๋‚ผ ์ˆ˜ ์žˆ์„๊นŒ?"

  • "์˜ˆ์ธก ์˜ค๋ฅ˜๋ฅผ ํ™œ์šฉํ•ด ๋ฉ”๋ชจ๋ฆฌ๋ฅผ ๋” ํšจ์œจ์ ์œผ๋กœ ๊ด€๋ฆฌํ•  ์ˆ˜ ์žˆ์„๊นŒ?"

ํ˜„๋ฏธ๊ฒฝ์œผ๋กœ ์„ธํฌ์˜ ๋ฏธ์„ธํ•œ ๋ณ€ํ™”๋ฅผ ๊ด€์ฐฐํ•˜๋“ฏ, NYU์™€ Stanford์˜ ์—ฐ๊ตฌ์ž๋“ค์€ ๋น„๋””์˜ค ๊ธฐ๋ฐ˜ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์„ ์œ„ํ•œ "๊ณต๊ฐ„์  ์ดˆ๊ฐ๊ฐ(spatial supersensing)" ๊ณ„์ธต ๊ตฌ์กฐ์™€ ์ƒˆ๋กœ์šด VSI-SUPER ๋ฒค์น˜๋งˆํฌ๋ฅผ ๋„์ž…ํ•˜์—ฌ ํ˜„์žฌ ๋ชจ๋ธ์˜ ์ง„์ •ํ•œ ๊ณต๊ฐ„์ , ์‹œ๊ฐ„์  ์ถ”๋ก  ํ•œ๊ณ„๋ฅผ ๋“œ๋Ÿฌ๋ƒ…๋‹ˆ๋‹ค. ๋Œ€๊ทœ๋ชจ ๊ณต๊ฐ„ ๋ฐ์ดํ„ฐ์…‹์œผ๋กœ ํ›ˆ๋ จ๋œ ํŠนํ™”๋œ ๋ฉ€ํ‹ฐ๋ชจ๋‹ฌ ๋Œ€๊ทœ๋ชจ ์–ธ์–ด ๋ชจ๋ธ์ธ Cambrian-S๋ฅผ ๊ฐœ๋ฐœํ•˜์—ฌ VSI-Bench์—์„œ ์ตœ์ฒจ๋‹จ ์„ฑ๋Šฅ์„ ๋‹ฌ์„ฑํ–ˆ์œผ๋ฉฐ, ์˜ˆ์ธก ์˜ค๋ฅ˜("๋†€๋ผ์›€")๋ฅผ ํ™œ์šฉํ•˜์—ฌ ์ž„์˜๋กœ ๊ธด ๋น„๋””์˜ค์—์„œ ๋ฉ”๋ชจ๋ฆฌ ๊ด€๋ฆฌ์™€ ์ด๋ฒคํŠธ ๋ถ„ํ• ์„ ๊ฐ•๊ฑดํ•˜๊ฒŒ ๊ฐœ์„ ํ•˜๋Š” "์˜ˆ์ธก์  ๊ฐ์ง€" ํŒจ๋Ÿฌ๋‹ค์ž„์„ ํ”„๋กœํ† ํƒ€์ž…์œผ๋กœ ์ œ์‹œํ•ฉ๋‹ˆ๋‹ค. ํŠนํžˆ ์ฃผ๋ชฉํ•  ์ :

  • ๊ณต๊ฐ„์  ์ดˆ๊ฐ๊ฐ์„ ํ†ตํ•œ ๋ฏธ์„ธํ•œ ๋””ํ…Œ์ผ ํฌ์ฐฉ

  • VSI-Bench์—์„œ ์ตœ์ฒจ๋‹จ ์„ฑ๋Šฅ

  • ์ž„์˜ ๊ธธ์ด์˜ ๋น„๋””์˜ค์— ์ ์šฉ ๊ฐ€๋Šฅ

๐ŸŽฏ ์™œ ์ด๊ฒƒ์ด ๊ฒŒ์ž„ ์ฒด์ธ์ €์ธ๊ฐ€? : ํ‘œ๋ฉด์  ๋น„๋””์˜ค ์ดํ•ด โ†’ ๊นŠ์ด ์žˆ๋Š” ๊ณต๊ฐ„-์‹œ๊ฐ„ ์ถ”๋ก ์œผ๋กœ์˜ ์ „ํ™˜์  ๊ฐ•์กฐ

๐Ÿ”— ๋” ์ž์„ธํ•œ ๋‚ด์šฉ์ด ๊ถ๊ธˆํ•˜๋‹ค๋ฉด : ๋…ผ๋ฌธ ๋งํฌ

๋งค์ผ ํ™”์š”์ผ ์˜ค์ „ 8์‹œ,

๋ฐ”์œ ๋‹น์‹ ์„ ๊ธฐ์ˆ  ๋ฐœ์ „์— ๋’ค์ณ์ง€์ง€ ์•Š๊ฒŒ ๋งŒ๋“ค์–ด์ค„ ์ตœ์‹  AI ํŠธ๋ Œ๋“œ๊ฐ€

์š”์•ฝ ์ •๋ฆฌ๋ณธ์œผ๋กœ ์ „๋‹ฌ๋ฉ๋‹ˆ๋‹ค!