ÀϺ» ¾ß¸¶Åä °ÔÀÓ 16.rnd229.top ¹Ù·Î°¡±â ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 0.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 54.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 48.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 55.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 62.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 96.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 63.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 96.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 79.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
ÀϺ» ¾ß¸¶Åä °ÔÀÓ 30.rnd229.top ¿À¼ÇÆÄ¶ó´ÙÀ̽º¸±°ÔÀÓ
¿À¸® Áö³¯È²±Ý¼º9°ÔÀÓ ¹é°æ°ÔÀÓ ¹Ù´ÙÀÌ¾ß±â ¸ÔÆ¢ ½Å°í Ȳ±Ý¼º °ÔÀÓ ´Ù¿î·Îµå ¹«·á½½·Ô¸Ó½Å777 Ä«Áö³ë¸±°ÔÀÓ ¹Ù´ÙÀ̾߱â±â°è°¡°Ý ÀϺ»ºü¡°í ½ÅõÁö´Ù¿î·Îµå ¾ß¸¶Åä°ÔÀÓ Çϱ⠹ٴÙÀÌ¾ß±â ÆÄÀÏ À¯´ÏƼ ½½·Ô ¸Ó½Å ¾Ë¶óµò¸± ÀÎÅͳݾ߸¶Åä°ÔÀÓ ½Åõ±â¸±°ÔÀÓ ¸±°ÔÀÓ ¸ÔÆ¢º¸Áõ ¾ø½À´Ï´Ù. ¸±°ÔÀÓÃÑÆÇ ¿À¸®Áö³¯ ¾ß¸¶Åä ü¸®¸¶½ºÅÍ ÆÇ¸Å ¾ß¸¶Åä°ÔÀÓÇϱ⠹ٴÙÀ̾߱â³ë¹«Çö ¿Â¶óÀÎ ½½·Ô °ÔÀÓ Ãßõ ¸±°ÔÀÓ 5¸¸ ¿Â¶óÀοÀ¼ÇÆÄ¶ó´ÙÀ̽º ¹Ù´ÙÀ̾߱â ÇÁ·Î±×·¥ ºüÂôÄÚ 777 ¹«·á ½½·Ô ¸Ó½Å ¸±°ÔÀÓº¸¹°¼¶ ¹«·á ¾ß¸¶Åä°ÔÀÓ ¸±°ÔÀÓ ¼Õ¿À°ø ¾Ë¶óµò¸±°ÔÀÓ ¹Ù´ÙÀ̾߱â¿À¸®Áö³Î ¸±°ÔÀÓ ½ÅõÁö Ä«Áö³ë ½½·Ô °ÔÀÓ Ãßõ Ȳ±Ý¼º°ÔÀÓ´Ù¿î·Îµå ÆÄĪÄÚ ¸±°ÔÀÓ ´Ù¿î·Îµå ¸Þ°¡½½·Ô ¾ß¸¶Åä3°ÔÀÓ´Ù¿î·ÎµåÈı⠸ÅÀåÆÇ ÆÄ¶ó´ÙÀ̽º¿À¼Ç ¹Ù´ÙÀ̾߱â¾Û ¹èÅ͸®°ÔÀÓ ¹Ù´Ù½Å °ÔÀÓ ¿À¸®Áö³ÎȲ±Ý¼º ¸±°ÔÀÓ¾ÈÀü»çÀÌÆ® ¹Ù´ÙÀ̾߱⠱âÇÁÆ® Àüȯ ¾ß¸¶Åä°ÔÀÓµ¿¿µ»ó ½Å±Ô¸±°ÔÀÓ ¹Ù´ÙÀ̾߱â°ÔÀÓÇϴ°÷ ¹«·áȲ±Ý¼º°ÔÀÓ ¾Ë¶óµòüÇè¸Ó´Ï ÀϺ»ºüĪÄÚ°ÔÀÓ ½½·ÔÄ¿¹Â´ÏƼ Á¾ÇÕ ¸±°ÔÀÓ ¸±°ÔÀÓ°« ¹Ù´ÙÀ̾߱⠸±°ÔÀÓ ¾ß¸¶Åä»çÀÌÆ® pc ¹Ù´Ù ÀÌ¾ß±â ´Ù¿î ¿À¼ÇÆÄ¶ó ´ÙÀ̽º »çÀÌÆ® ¹Ù´ÙÀ̾߱â ÇÁ·Î±×·¥ ¿Ã½Ó¹Ù ¹Ù´ÙÀ̾߱⠹«·á ¾ß¸¶Åä °ÔÀÓ¹æ¹ý ½½·Ô¸Ó½Å ÄÚµù Ȳ±Ý¼º¿ë°¡¸® ½Å±Ô½½·Ô»çÀÌÆ® ÇÁ¶ó±×¸¶Æ½ ½½·Ô ¹Ù´ÙÀ̾߱âpc¹öÀü´Ù¿î ¹Ù´ÙÀ̾߱⠹«·á ¾ß¸¶Åä°ÔÀÓ¹«·á´Ù¿î¹Þ±â ÇÁ¶ó±×¸¶Æ½ ¼øÀ§ ¹Ù´ÙÀ̾߱â apk ¸ð¹ÙÀÏ °ÔÀÓ °ø·« ÀèÆÌ°ÔÀÓ ¹Ù´ÙÀ̾߱â¹è´ç ¼Õ¿À°ø´Ù¿î·Îµå Ȳ±Ý¼º ¿À¸®Áö³Î »ç¼³°æÁ¤ ¾ß¸¶Åä°ÔÀÓ Çϱ⠿À¼ÇÆÄ¶ó´ÙÀ̽º ¸ÔÆ¢ pc°ÔÀÓ »çÀÌ´ÙÄð°ÔÀÓ ¸ÅÀåÆÇ ¸ð¹ÙÀϽÅõÁö ¹«·áÃæÀü ¹Ù´ÙÀ̾߱⠴ٺóÄ¡¸±°ÔÀÓ¸ÔÆ¢ Ȳ±Ý¼º¿À¶ô½Ç ¹«·áÀÎÅͳݰÔÀÓ ¹é°æ°ÔÀÓ·£µå ¿À¼ÇÆÄ¶ó´ÙÀ̽º ¿¹½Ã ÇØ¹°¾î ¿À¼ÇÆÄ¶ó´ÙÀ̽º´Ù¿î ÆÄ¶ó´ÙÀ̽º¿À¼Ç ¹Ù´ÙÀ̾߱â ȯÀü pc¿ë Ȳ±Ý¼º °ÔÀÓ ¸ð¹ÙÀϸ±°ÔÀÓ Á¾·ù ÇØ¿ÜÃ౸ÀÏÁ¤ ¿Â¶óÀΰÔÀÓ ½ÅõÁö°ÔÀÓÇϴ¹æ¹ý ¹Ù´ÙÀ̾߱âÆÄÀÏ Ã¼¸®¸¶½ºÅÍ ¿À¸®Áö³Î ¹Ù´ÙÀ̾߱⠹ٴÙÀ̾߱â Ȳ±Ý°í·¡ ¾Ë¶óµò °ÔÀÓ ´Ù¿î Ȳ±Ý¼º¿Â¶óÀÎÁÖ¼Ò ¸ð¹ÙÀϰÔÀÓ ÃֽЏ±°ÔÀÓ Ã¼¸®¸¶½ºÅÍ ¾îÇà Ȳ±Ý¼º »çÀÌÆ® ¾ß¸¶Åä°ÔÀÓÇϱ⠹ٴÙÀ̾߱⠽½·Ô ¸ð¹Ù¾Ë¹Ù´ÙÀ̾߱⠼տÀ°ø´Ù¿î·Îµå ¹é°æ°ÔÀÓ°ø·«¹æ¹ý ¿À¼ÇÆÄ¶ó ´ÙÀ̽ºÇϴ¹æ¹ý ½½·Ô¸Ó½Å Çϴ¹ý ¿À¸®Áö³¯ ¾ß¸¶Åä ¾ß¸¶Åä°ÔÀÓ ¹«·á ´Ù¿î ¹Þ±â ¹«·áÃæÀüÇö±Ý°ÔÀÓ ¾ß¸¶Åä5°ÔÀӱ⠸±°ÔÀÓȲ±Ý¼º¿À¼Ç¹Ù´Ù °½Ã ¹Ù´ÙÀ̾߱â¸ÔÆ¢»çÀÌÆ® [¾ÆÀÌ´º½º24 Á¤Á¾¿À ±âÀÚ] ÀΰøÁö´É(AI)Àº ´ë±Ô¸ð¾ð¾î¸ðµ¨À» ÇнÀ½ÃŰ´Â °Ô ±âº»ÀÌ´Ù. ÀÌ ¶§¹®¿¡ ¸¹Àº ¸Þ¸ð¸® ¿ë·®°ú ¼ö¸¸ °³ÀÇ GPU°¡ ÇÊ¿äÇÏ´Ù. À̸¦ À¯ÁöÇϱâ À§ÇØ ¸·´ëÇÑ ¿¡³ÊÁö¸¦ »ç¿ëÇÑ´Ù. AI¸¦ ¡®¿¡³ÊÁö ¸Ô´Â Çϸ¶¡¯¶ó°í ºÎ¸£´Â ÀÌÀ¯´Ù.
±¹³» ¿¬±¸ÆÀÀÌ ÀúÀü·ÂÀ¸·Î °í¼º´ÉÀ» À¯ÁöÇÒ ¼ö ÀÖ´Â NPU(½Å°æ¸Áó¸®ÀåÄ¡) ÇÙ½É ±â¼úÀ» °³¹ßÇß´Ù.
¿ÀÇÂAI êGPT4, ±¸±Û Gemini 2.5 µî ÃֽŠ»ý¼ºÇüAI ¸ðµ¨µéÀº ³ôÀº ¸Þ¸ð¸® ´ë¿ªÆø(Bandwidth)»Ó ¾Æ´Ï¶ó ¸¹Àº ¸Þ¸ð¸® ¿ë·®(Capacity)¸¦ ÇÊ¿ä·Î ÇÑ´Ù. ¸¶ÀÌÅ©·Î¼ÒÇÁÆ®, ±¸±Û µî »ý¼ºÇüAI Ŭ¶ó¿ìµå ¿î¿µ ±â¾÷µéÀÌ ¿£ºñµð¾Æ GPU¸¦ ¼ö½Ê¸¸ À徿 ±¸¸ÅÇÏ´Â ÀÌÀ¯´Ù.
°ËÁõ¿Ï·á¸±°ÔÀÓ
AI´Â ´ë¿ë·® ¸Þ¸ð¸®¿Í ¸¹Àº GPU¸¦ ±âº»À¸·Î ÇÑ´Ù. ¸¹Àº ¿¡³ÊÁö°¡ ÇÊ¿äÇÏ´Ù. ±¹³» ¿¬±¸ÆÀÀÌ ÀúÀü·ÂÀ¸·Î ³ôÀº ¼º´ÉÀ» º¸¿©ÁÖ´Â ÇÙ½É ±â¼úÀ» °³¹ßÇß´Ù. [»çÁø=gemini]
ÀÌ·± °í¼º´É AI ÀÎÇÁ¶ó ±¸ÃàÀÇ ÇÙ½É ³Á¦¸¦ ÇØ¼ÒÇÒ ¹æ¾ÈÀ¸·Î ±¹³» ¿¬±¸ÆÀÀÌ ÃֽŠGPU¿Í ºñ±³ÇßÀ» ¶§ 30¸¸¿øÀçÅ×Å©
¾à 44% ³·Àº Àü·Â ¼Ò¸ð¿¡µµ Æò±Õ 60% ÀÌ»ó »ý¼ºÇü AI ¸ðµ¨ÀÇ Ãß·Ð ¼º´ÉÀ» Çâ»óÇÒ NPU(½Å°æ¸Áó¸®ÀåÄ¡) ÇÙ½É ±â¼úÀ» °³¹ßÇϴµ¥ ¼º°øÇß´Ù.
Çѱ¹°úÇбâ¼ú¿ø(KAIST, ÃÑÀå À̱¤Çü)Àº Àü»êÇкΠ¹ÚÁ¾¼¼ ±³¼ö ¿¬±¸ÆÀ°ú ÇÏÀÌÆÛ¿¢¼¿(Àü±â¹×ÀüÀÚ°øÇкΠ±èÁÖ¿µ ±³¼ö â¾÷±â¾÷)ÀÌ ¿¬±¸ Çù·ÂÀ» ÅëÇØ êGPT¿Í °°Àº »ý¼ºÇüAI Ŭ¶ó¿ìµå¿¡ Æ¯ÈµÈ °í¼º´É¡¤¹Ù´ÙÀ̾߱⠰ÔÀÓ¹æ¹ý
ÀúÀü·ÂÀÇ NPU(½Å°æ¸Áó¸®ÀåÄ¡) Çٽɱâ¼úÀ» °³¹ßÇß´Ù°í 4ÀÏ ¹ßÇ¥Çß´Ù.
¿¬±¸ÆÀÀÌ Á¦¾ÈÇÑ ±â¼úÀº ÄÄÇ»ÅÍ ¾ÆÅ°ÅØÃ³ ºÐ¾ß¿¡¼ ÃÖ°í ±ÇÀ§¸¦ ÀÚ¶ûÇÏ´Â ±¹Á¦ ÇÐȸÀÎ ¡®2025 ±¹Á¦ ÄÄÇ»Åͱ¸Á¶ ½ÉÆ÷Áö¾ö(International Symposium on Computer Architecture, ISCA 2025)¡¯¿¡ äÅõƴÙ.
À̹ø ¿¬±¸ÀÇ¾ç¼ø¸ð´ëÇ¥
ÇÙ½ÉÀº Ãß·Ð °úÁ¤¿¡¼ °æ·®È¸¦ ÅëÇØ Á¤È®µµ ¼Õ½ÇÀ» ÃÖ¼ÒÈÇϸ鼵µ ¸Þ¸ð¸® º´¸ñ ¹®Á¦¸¦ ÇØ°áÇØ ´ë±Ô¸ð »ý¼ºÇüAI ¼ºñ½ºÀÇ ¼º´ÉÀ» °³¼±ÇÏ´Â °ÍÀÌ´Ù. À̹ø ¿¬±¸´Â AIÀÎÇÁ¶óÀÇ ÇÙ½É ±¸¼º¿ä¼ÒÀÎ AI¹ÝµµÃ¼¿Í AI½Ã½ºÅÛSW¸¦ ÅëÇÕ ¼³°èÇß´Ù´Â Á¡¿¡¼ ±× °¡Ä¡¸¦ ³ô°Ô ÀÎÁ¤¹Þ¾Ò´Ù.
±âÁ¸ GPU ±â¹Ý AI ÀÎÇÁ¶ó´Â ³ôÀº ¸Þ¸ð¸® ´ë¿ªÆø°ú ¸Þ¸ð¸® ¿ë·® ¿ä±¸¸¦ º¸±¤Æ¼¿¡½º ÁÖ½Ä
ÃæÁ·Çϱâ À§ÇØ ¸¹Àº GPU µð¹ÙÀ̽º°¡ ÇÊ¿äÇÏ´Ù. À̹ø ±â¼úÀº ¸Þ¸ð¸® »ç¿ëÀÇ ´ëºÎºÐÀ» Â÷ÁöÇÏ´Â KV ij½ÃÀÇ ¾çÀÚȸ¦ ÅëÇØ ÀûÀº ¼öÀÇ NPU µð¹ÙÀ̽º¸¸À¸·Î µ¿ÀÏ ¼öÁØÀÇ AI ÀÎÇÁ¶ó¸¦ ±¸¼ºÇÒ ¼ö ÀÖ´Ù. »ý¼ºÇü AI Ŭ¶ó¿ìµå ±¸Ãà ºñ¿ëÀ» Å©°Ô Àý°¨ÇÒ ¼ö ÀÖ´Ù.
¿¬±¸ÆÀÀº ±âÁ¸ NPU ¾ÆÅ°ÅØÃ³ÀÇ ¿¬»ê ·ÎÁ÷À» º¯°æÇÏÁö ¾ÊÀ¸¸é¼ ¸Þ¸ð¸® ÀÎÅÍÆäÀ̽º¿Í ÅëÇÕµÉ ¼ö ÀÖµµ·Ï ¼³°èÇß´Ù. À̹ø Çϵå¿þ¾î ¾ÆÅ°ÅØÃ³ ±â¼úÀº Á¦¾ÈµÈ ¾çÀÚÈ ¾Ë°í¸®ÁòÀ» ±¸ÇöÇÒ »Ó¸¸ ¾Æ´Ï¶ó Á¦ÇÑµÈ ¸Þ¸ð¸® ´ë¿ªÆø°ú ¿ë·®À» È¿À²ÀûÀ¸·Î Ȱ¿ëÇϱâ À§ÇÑ ÆäÀÌÁö ´ÜÀ§ ¸Þ¸ð¸® °ü¸® ±â¹ý, ¾çÀÚÈµÈ KV ij½Ã¿¡ ÃÖÀûÈµÈ »õ·Î¿î ÀÎÄÚµù ±â¹ý µîÀ» °³¹ßÇß´Ù.
ÃֽŠGPU ´ëºñ ºñ¿ë¡¤Àü·Â È¿À²¼ºÀÌ ¿ì¼öÇÑ NPU ±â¹Ý AI Ŭ¶ó¿ìµå¸¦ ±¸¼ºÇÒ °æ¿ì NPUÀÇ °í¼º´É, ÀúÀü·Â Ư¼ºÀ» Ȱ¿ëÇØ ¿î¿µ ºñ¿ë ¿ª½Ã Å©°Ô Àý°¨ÇÒ ¼ö ÀÖÀ» °ÍÀ¸·Î ±â´ëµÈ´Ù.
¹ÚÁ¾¼¼ ±³¼ö´Â ¡°ÇÏÀÌÆÛ¿¢¼¿°ú °øµ¿¿¬±¸¸¦ ÅëÇØ »ý¼ºÇüAI Ãß·Ð °æ·®È ¾Ë°í¸®Áò¿¡¼ ±× ÇØ¹ýÀ» ã¾Ò°í ¡®¸Þ¸ð¸® ¹®Á¦¡¯¸¦ ÇØ°áÇÒ ¼ö ÀÖ´Â NPU Çٽɱâ¼ú °³¹ß¿¡ ¼º°øÇß´Ù¡±¸ç ¡°À̹ø ±â¼úÀ» ÅëÇØ Ãß·ÐÀÇ Á¤È®µµ¸¦ À¯ÁöÇÏ¸é¼ ¸Þ¸ð¸® ¿ä±¸·®À» ÁÙÀÌ´Â °æ·®È ±â¹ý°ú ÀÌ¿¡ ÃÖÀûÈµÈ Çϵå¿þ¾î ¼³°è¸¦ °áÇÕÇØ ÃֽŠGPU ´ëºñ Æò±Õ 60% ÀÌ»ó ¼º´ÉÀÌ Çâ»óµÈ NPU¸¦ ±¸ÇöÇß´Ù¡± °í ¸»Çß´Ù.
À̹ø ¿¬±¸(³í¹®¸í: Oaken: Fast and Efficient LLM Serving with Online-Offline Hybrid KV Cache Quantization)´Â KAIST ±è¹Î¼ö ¹Ú»ç°úÁ¤ Çлý°ú ÇÏÀÌÆÛ¿¢¼¿ È«¼º¹Î ¹Ú»ç°¡ °øµ¿ Á¦1 ÀúÀÚ·Î Áö³ 6¿ù 21ÀϺÎÅÍ 6¿ù 25ÀϱîÁö ÀϺ» µµÄì¿¡¼ ¿¸° ¡®2025 ±¹Á¦ ÄÄÇ»Åͱ¸Á¶ ½ÉÆ÷Áö¾ö(ISCA)¡¯¿¡ ¹ßÇ¥µÆ´Ù.
/Á¤Á¾¿À ±âÀÚ(ikokid@inews24.com)