NVIDIA збирається створити більш точну систему для генерації зображень за допомогою ШІ. Зокрема планує розповісти про результати своєї роботи під назвою Perfusion AI, яка має допомогти користувачам створювати саме той тип зображень, який вони мають на увазі. Результатами розробки планують поділитись на SIGGRAPH, великій конференції з комп’ютерної графіки, яка відбудеться в Лос-Анджелесі з 6 по 10 серпня.Більшість популярних генераторів зображень, такі DALLE, Imagen або Midjourney працюють за єдиним механізмом. Це так звані дифузійні моделі. Якщо спробувати пояснити принцип роботи у двох словах, то алгоритму спершу показують мільйони зображень, повідомляючи, що на них (наприклад, собака). Згодом, до них додають випадковий шум (пікселі, які заважають повністю зчитувати зображення). Однак в процесі навчання, нейромережа стає здатною “прибрати” шум і домалювати необхідні деталі, а згодом і створити зображення самостійно отримавши лише текстовий запит. Однак у цих систем є певні недоліки. Наприклад, алгоритм рідко зможе надати вам правильну кількість предметів на картинці або розташувати їх саме там,
де ви хочете. Розробка Nvidia базується на подібній моделі, але з додатковими механізмами для одночасного блокування або створення кількох «концепцій» у нових зображеннях. Окрім того, модель нібито матиме розмір всього 100 КБ. Поки що дослідники не оприлюднили код та результати своєї роботи. Відомо, що розробкою алгоритму NVIDIA займалась у співпраці з вченими з університету Тель-Авіва. На порталі arxiv з’явилась публікація «Key-Locked Rank One Editing for Text-to-Image Personalization» на якій базується Perfusion AI. Також white paper опублікувала команда Nvidia Graphics Research, де є кілька результатів роботи. Нагадаємо, що NVIDIA випустила графічний драйвер GeForce Game Ready Driver. У ньому компанія додала підтримку нової технології, яка покращує старі відео за допомогою ШІ.
