MY.UAНовини
ШІ Chain-of-Zoom збільшує фото у 256 разів без втрати деталей
ШІ Chain-of-Zoom збільшує фото у 256 разів без втрати деталей

ШІ Chain-of-Zoom збільшує фото у 256 разів без втрати деталей

KAIST AI

Дослідники з Південної Кореї розробили інструмент Chain-of-Zoom на основі штучного інтелекту, здатний у 256 разів збільшити фото із низькою роздільною здатністю, згенерувавши реалістичну деталізацію.

Науковці з KAIST AI під керівництвом Кіма Джечула прагнули вирішити проблему покращення якості фото з низькою роздільною здатністю, зберігаючи чітку та реалістичну деталізацію. Традиційні системи надвисокої роздільної здатності для окремого зображення працюють за принципом вгадування відсутніх деталей у запитах щодо збільшення масштабу зображення. 

Генеративні моделі навчені створювати реалістичні версії фото з низькою роздільною здатністю, передбачаючи ті деталі, яких не вистачає на зображенні. Однак ефективність таких моделей залежить від того, за якою технологією вони навчались. Вони часто стають неефективними за необхідності виходу за звичні межі.

«Сучасні моделі чудові відносно масштабних коефіцієнтів, на яких вони були навчені, але зазнають невдачі, коли їх просять збільшити зображення, що виходить за цей діапазон», — пояснюють розробники з KAIST AI. 

Chain-of-Zoom ефективно долає обмеження, використовуючи покроковий процес масштабування. Цей ШІ не розтягує зображення у 256 разів за один підхід, адже тоді картинка була б розмитою, а деталі вигаданими. Замість цього Chain-of-Zoom покроково масштабує зображення, спирачись на кожен попередній крок, використовуючи модель надвисокої роздільної здатності – наприклад, добре навчену модель дифузії – для уточнення зображення.

До того ж, мовна модель Vision-Language також бере участь, генеруючи мовні підказки, які допомагають Chain-of-Zoom уявити, що має з’явитись у зображенні на наступному етапі. Vision-Language підбирає кілька точних словосполучень, на кшталт: «прожилки листа», «текстура хутра», «цегляна стіна» і тому подібне, які спрямовують ШІ до подальшої деталізації зображення. 

У той час як масштаб збільшується, початкове зображення втрачає чіткість і візуально стає важко розпізнати контекст. У цей момент мовні підказки відіграють вирішальне значення. Однак генерування правильних мовних підказок непроста справа. Стандартні мовні моделі можуть повторюватись, генерувати дивні словосполучення і невірно інтерпретувати вхидні дані.

KAIST AI

Для оптимізації цього процесу дослідники використали навчання з підкріпленням і зворотнім зв’язком з людиною. Вони навчили свою модель генерації підказок відповідати перевагам людини, використовуючи техніку, яка називається узагальненою оптимізацією політики винагороди. 

Навчання відбувалось з використанням трьох видів зворотнього зв’язку:

  • Людина-критик оцінювала підказки, згенеровані мовною моделлю, на відповідність зображенню;
  • Мовна модель отримувала покарання за заплутані та некоректні фрази;
  •  Спеціальний фільтр відсіював текст, який повторювався.

У процесі навчання підказки ставали більш чіткими, конкретними і корисними. Результати Chain-of-Zoom оцінювалися з використанням кількох безреферентних метрик якості, таких як NIQE та CLIPIQA. На чотирьох рівнях збільшення (4×, 16×, 64×, 256×) CoZ послідовно перевершував альтернативи, особливо у вищих масштабах.

Інші переваги цього інструменту полягають у тому, що базова модель надвисокої роздільної здатності не потребує перенавчання. Chain-of-Zoom буде дуже зручним для застосунків, що потребують швидкого, високоточного масштабування без використання складних обчислювальних потужностей.

Chain-of-Zoom може найти застосування у медицині, де покращена деталізація може розширити можливості діагностики, у сфері відеоспостереження з камер, де необхідна висока деталізація об’єктів, у відновленні старих фото, науковій візуалізації, у сферах мікроскопії та астрономії.

Спецпроєкти

Вагомим недоліком цієї технології є те, що після значного збільшення розміру фото оригінал фактично зникне, а залишиться лише його штучна копія, згенерована ШІ. Отже технологія може використовуватись із метою маніпулювання візуальними даними для створення фейкових зображень.

«Високоякісна генерація на основі вхідних даних з низьким дозволом може спричинити побоювання щодо дезінформації або несанкціонованої реконструкції конфіденційних візуальних даних», — визнають розробники. 

Результати були опубліковані на сервері препринтів arXiv

Джерело: ZMEScience

Поділитися
Поділитися сюжетом
Джерело матеріала
Воевать отправят всех: в Украине жестко взялись за уклонистов – к чему готовиться
Знай
2025-06-28T02:30:53Z
"Большая часть ляжет в могилы": Арестович шокировал новым прогнозом будущего Украины
Comments UA
2025-06-17T20:00:36Z
Путин готовится значительно усилить ракетный террор Украины: названы 5 наиболее опасных городов
Comments UA
2025-06-24T14:00:47Z
"Целых двое суток", - Путин "поддал" и проговорился о проблемах со здоровьем. ВИДЕО
Новости Украины
2025-06-15T15:36:59Z
Рада продлила возможность возвращения после СЗЧ: как это сделать в "Армия+"
Знай
2025-06-28T04:21:34Z
Итоги 27.06: уничтожение самолетов и расходы РФ
Корреспондент
2025-06-28T04:18:40Z
Зеленский ответил Путину о встрече
Comments UA
2025-06-19T21:00:24Z
Суд избрал меру пресечения вице-премьеру Чернышеву: озвучено решение
Хвиля
2025-06-27T16:09:57Z
Хороших новостей ждать не стоит: эксперты назвали три сценария завершения войны в Украине
Знай
2025-06-22T20:30:05Z
Опасное заболевание: как уберечься от дифтерии
ZN UA
2025-06-27T22:24:41Z
Почему нельзя спать с открытыми окнами: неожиданный ответ
Gazeta UA
2025-06-28T02:21:22Z
Как узнать, что у человека порча: основные признаки и советы
Comments UA
2025-06-24T06:15:10Z
Эффективный способ выспаться: ученые назвали лучшую позу для сна
Фокус
2025-06-21T07:15:50Z
Все медосмотры перед мобилизацией хотят снимать на видео, - Екатерина Котенкова
Знай
2025-06-27T20:42:29Z
Секрет стройности: как сбросить полкило в неделю без подсчета калорий
TSN
2025-06-27T20:33:55Z
Завтрак, который контролирует уровень холестерина: о каких продуктах идет речь
Gazeta UA
2025-06-27T08:27:43Z
На чем жарить: диетолог назвала масла, которые подходят для этого и которых надо избегать
UAToday
2025-06-23T09:00:41Z
Важная поддержка: как помочь человеку, у которого истерика
ZN UA
2025-06-17T17:33:54Z
Опасная окрошка: 3 признака, при которых ее нельзя есть, даже если вы ее утром приготовили
Знай
2025-06-17T16:51:59Z
Зачем эксперты советуют брать с собой салфетку, когда идете покупать клубнику на рынок: хитрый трюк
TSN
2025-06-26T15:36:49Z
Как американцы моют посуду: почему в США не используют губку
UAToday
2025-06-27T10:06:26Z
Куриные яйца могут вас убить: 8 бытовых ошибок с ними, которые вредят здоровью
Знай
2025-06-26T02:51:38Z
Не отдавайте эту землю сорнякам. Что посадить после выкапывания чеснока
Telegraf
2025-06-28T03:57:48Z
Гороскоп на сегодня 28 июня: неожиданные вызовы и скрытые разочарования – прогноз для всех знаков Зодиака
Знай
2025-06-28T01:33:11Z
Попрощайтесь с живучим пыреем: какие способы уничтожат сорняк из огорода
Telegraf
2025-06-27T18:18:58Z
Популярный курорт Украины атаковали насекомые. В сети показали впечатляющие кадры
Telegraf
2025-06-24T10:36:53Z
Популярная закуска перед сном оказалась "провокатором ночных кошмаров"
TSN
2025-06-27T17:06:41Z
Дополнительные 2000 грн к пенсии: кто может получить
Знай
2025-06-27T18:36:38Z
Россия захватила второе из четырех месторождений лития в Украине – Le Figaro
ZN UA
2025-06-27T11:24:21Z
Не будет ни света, ни газа: украинцы могут остаться без благ цивилизации
Знай
2025-06-15T15:36:16Z
Готовьте до 2000 грн: "Нафтогаз" призвал украинцев установить важный прибор
Знай
2025-06-15T16:21:57Z
В Пенсионном фонде призывают украинцев отложить выход на пенсию – в чем причина
Знай
2025-06-28T04:06:56Z
В Україні знизились ціни на молоко
AgroNews
2025-06-28T04:06:53Z
Минимальная пенсия: может ли вырасти с 1 июля
ZN UA
2025-06-27T03:43:14Z
Производители предупредили украинцев о значительном росте цен на хлеб
UAToday
2025-06-23T19:45:16Z
Цены приятно удивляют: сколько стоят фрукты на рынке в Одессе
Telegraf
2025-06-14T12:54:59Z
Светлана Павелецкая рассказала, нашла ли общий язык с детьми Дмитрия Кулебы
Комсомольская правда
2025-06-23T06:52:55Z
24 июня большой церковный праздник: что можно и нельзя делать сегодня
Comments UA
2025-06-24T05:33:57Z
"Здесь должны были спать дети": появились кадры разрушенной комнаты детей Тополи
GlavRed
2025-06-23T06:40:50Z
ВСУ лишили россиян уникальной РСЗО М1991 из Северной Кореи: момент подрыва попал на видео
Фокус
2025-06-27T18:57:20Z
Возвращение детей из-за границы: хватит ли мест в украинских школах - МОН
Знай
2025-06-28T03:51:16Z
Пенсионный возраст: когда женщины могут выйти на пенсию
ZN UA
2025-06-28T03:43:53Z
Конец европейского гостеприимства: мигрантов за границей начнут фильтровать по новым правилам – кого развернут домой
Знай
2025-06-15T16:06:20Z
Почему нельзя отказываться купаться 23 июня и что нужно выпрашивать сегодня: приметы и запреты на Агрипины
Знай
2025-06-23T04:03:11Z
Квартира-гроб: как выглядит жилье в Гонконге за $250 в месяц
Фокус
2025-06-23T17:06:07Z
Льготы аннулируют: для кого проезд в общественном транспорте станет платным
Знай
2025-06-28T02:12:25Z
В Одессе БПЛА атаковал многоэтажный дом – соцсети
Корреспондент
2025-06-27T21:36:42Z
Еще один китаец попал в плен ВСУ: что рассказывает наемник об армии РФ
TSN
2025-06-27T16:33:46Z
Не хватит ни техники, ни людей: Коваленко оценил "размах" российского наступления
Новости Украины
2025-06-15T17:33:39Z
Киевлянам выплатят по 20 тысяч гривен: названы условия получения
Хвиля
2025-06-28T04:30:01Z
В ISW назвали единственный участок фронта, где ВСУ имели успех
ZN UA
2025-06-28T00:40:02Z
Жительница Славянска корректировала огонь по ВСУ - она задержана
Новости Украины
2025-06-27T20:54:28Z
В Киеве на месте разрушенного подъезда многоэтажки произошло повторное разрушение
ZN UA
2025-06-23T09:57:04Z
Движение в центре Киева ограничат на День Конституции - что нужно знать
Новости Украины
2025-06-27T21:00:46Z
На Закарпатье пограничник сбежал в Словакию, где попросил убежище
Корреспондент
2025-06-28T02:48:46Z
В Харькове задержанного оставили умирать в камере - ГБР расследует. ВИДЕО
Новости Украины
2025-06-27T10:18:49Z
ОГП: В Одессе нашли убитой 7-летнюю девочку. Задержан 31-летний сосед – видео
Лига
2025-06-19T20:18:17Z
В Ивано-Франковской области нашли в лесу 5-летнего мальчика спустя трое суток поисков
Комсомольская правда
2025-06-21T07:57:23Z
Поставлял кокаин в США: бывшему главе разведки Венесуэлы грозит пожизненное
Корреспондент
2025-06-28T04:06:54Z
В полиции назвали количество поджогов автомобилей военных
Корреспондент
2025-06-28T04:00:04Z
Атака на Киевщину: разрушен отель с клиникой, есть погибшая и пострадавшие
Корреспондент
2025-06-23T03:15:35Z
Удар по Киеву: разрушен подъезд, есть погибшие
Корреспондент
2025-06-23T04:18:26Z
Супруги из Украины хотели перевезти в Румынию 1,4 миллиона долларов США
Апостроф
2025-06-15T17:48:37Z
Фигурка рыбки на автомобиле - что означает и зачем наклеивают - Главред
Gazeta UA
2025-06-15T04:18:53Z
Штрафуют даже за листик из дерева: водителям нужно внимательнее присмотреться к номерам
Знай
2025-06-14T18:51:46Z
Франция требует от Tesla прекратить рекламировать автомобили как беспилотные и угрожает штрафом
Европейская правда
2025-06-24T15:54:56Z
BMW не планирует отказываться от двигателей внутреннего сгорания
Корреспондент
2025-06-27T17:45:07Z
Nissan представила обновленную гибридную технологию e-POWER
Корреспондент
2025-06-27T17:39:49Z
Маленький Prado: раскрыты подробности самого дешевого внедорожника Toyota
Фокус
2025-06-27T12:51:04Z
Надежные и недорогие: 5 брендов автомобилей, заставляющих надолго забыть о СТО
Знай
2025-06-27T11:51:00Z
Тест-драйв Opel Mokka: ставка на стиль и эмоции
Фокус
2025-06-27T11:45:02Z
Украинцы стали покупать меньше люксовых авто: какие марки и модели пользуются спросом
Фокус
2025-06-27T09:51:28Z
"Быстро растет и убивает": Камалия поделилась историей борьбы с раком груди
Апостроф
2025-06-27T15:51:58Z
Камалия рассекретила, что стало последней каплей в ее браке с Захуром: "Умоляла год"
TSN
2025-06-27T09:21:29Z
В России умерла звезда фильма Ирония судьбы
Корреспондент
2025-06-21T09:09:23Z
Звезда Лиги смеха вернулась после кровоизлияния в мозг
Корреспондент
2025-06-24T08:24:02Z
50 Cent сыграет Балрога в предстоящей экранизации Street Fighter
GameMag
2025-06-28T00:09:38Z
"Выдавал себя за продюсера": появились новые подробности в деле о "свадьбе" 9-летней украинки в Диснейленде
Фокус
2025-06-27T23:57:44Z
"Все как и должно быть": бывшая жена Остапчука рассказала, как поделили дом после развода
Апостроф
2025-06-27T12:00:17Z
Названы имена трех фаворитов на роль нового Джеймса Бонда — Генри Кавилла среди них нет
GameMag
2025-06-27T23:51:20Z
Камалия заподозрила Полякову в плагиате образов и публично обратилась к ней: "Хайпует на этом"
TSN
2025-06-27T16:06:17Z
Литиевая батарея будет служить рекордно долго: что придумали ученые
Фокус
2025-06-19T08:42:36Z
Лицензия на азартные игры от Мальты: преимущества и недостатки
Comments UA
2025-06-15T15:30:27Z
Клиенты "Киевстар" возмущены: вместо обещанной скидки сняли полную плату
Знай
2025-06-15T03:21:22Z
Финская армия получит спутники собственного производства для разведки в любую погоду
Gazeta UA
2025-06-28T03:24:44Z
Diablo IV готовит грандиозную "чистку" Санктуария: новый сезон "Грехи Хорадримов" уже 1 июля
Знай
2025-06-28T02:51:25Z
Если вы вдруг переживали: Grand Theft Auto VI выйдет на Xbox Series S одновременно с другими версиями — без задержек
GameMag
2025-06-28T00:09:19Z
Что будет, если забыть телефон в машине на СТО? Появилось смешное видео
Telegraf
2025-06-27T22:33:36Z
У побережья Испании нашли сотни бочек с радиоактивными отходами
Фокус
2025-06-27T20:27:34Z
Геймеры получат "накидку свободы": разработчики Helldivers 2 увековечили легендарный "ревью-бомбинг" против Sony
Знай
2025-06-27T18:51:40Z
Пакьяо возвращается: легенда бокса объяснил мотивацию
Корреспондент
2025-06-27T08:18:01Z
Паркер прокомментировал спорный удар Дюбуа, нанесенный Усику в их поединке
Корреспондент
2025-06-14T10:33:36Z
Саудовский гранд предлагает Эрнандесу феноменальный контракт
Корреспондент
2025-06-23T15:45:30Z
Внимание к Симеоне: новый клуб Серии А присматривает игрока атаки
Корреспондент
2025-06-15T17:42:27Z
"Шахтер" продал легионера в нидерландский клуб
ZN UA
2025-06-27T21:42:59Z
Белорусские футзалисты прошли на Евро-2026: УЕФА меняет хозяев
Корреспондент
2025-06-27T18:48:32Z
Украинские теннисистки узнали свои пары и соперниц на Уимблдоне-2025
Корреспондент
2025-06-27T18:18:47Z
18-летний вратарь сборной Украины по хоккею приглашен для развития в Кэнакс
Корреспондент
2025-06-27T17:45:31Z
В России киберспортсменов заставят отжиматься и быстро бегать
Telegraf
2025-06-27T16:58:54Z