Inpainting і Outpainting
Inpainting заповнює або замінює замасковану область всередині зображення, тоді як outpainting розширює зображення за його вихідні межі.
Огляд
Together they let you erase objects, fix flaws, and expand scenes seamlessly using generative AI.
Глибоке занурення
Зафарбовування та замальовування — це завдання редагування зображень із маскованою областю. За допомогою inpainting ви малюєте маску поверх частини фотографії — скажімо, небажаного туриста чи подряпини — і модель відновлює лише цю область відповідно до навколишнього вмісту. Зафарбовування робить навпаки: воно розглядає область *за межами* оригінального кадру як область для заповнення, винаходячи правдоподібні нові пейзажі, щоб портрет став повноцінним ландшафтом. Дифузійні моделі виділяються тут, оскільки вони генеруються за допомогою усунення шумів і можуть бути налаштовані на те, щоб утримувати незамасковані пікселі фіксованими під час синтезу замаскованих, необов’язково керуючись текстовою підказкою. У результаті поєднується освітлення, текстура та перспектива, тому редагування виглядають рідними. Ці інструменти забезпечують такі повсякденні функції, як «чарівна гумка» на телефонах і «генеративна розгортання» в професійних редакторах.
Технічне розуміння
Під час малювання на основі дифузії замаскована область починається як шум і поступово зменшується, тоді як на кожному кроці відомі (немасковані) пікселі повторно вводяться, тому модель лише «малює» всередині маски. Текстова підказка може керувати тим, що з’являється. Outpainting повторно використовує той самий механізм, розширюючи полотно, маскуючи нову порожню межу та обумовлюючи наявний крайовий вміст, щоб кольори, освітлення та перспектива продовжувалися природним чином за вихідним кадром.
Стратегічний вплив
Швидкість і масштаб
Візуальний штучний інтелект може автоматизувати масштабні завдання перевірки, виявлення та позначення тегами.
Створіть вибір
Творчі групи можуть створювати прототипи концепцій швидше з меншою кількістю переглядів вручну.
Команда та робочий процес
Операції можуть використовувати зображення та відеосигнали, які раніше було важко обробити.
Майбутнє Inpainting і Outpainting
Редагування стає швидшим, з вищою роздільною здатністю та більш керованим. Очікуйте, що оперативні редагування («прибрати машину, додати лавку») стануть надійними діями в один клік із кращим збереженням тонких текстур, відображень і тіней. Outpainting буде регулярно змінювати кадри та змінювати співвідношення сторін фотографій і відеокадрів для різних екранів. Ті самі методи переміщуються у відео — послідовне видалення або розширення вмісту між кадрами — що підвищує як творчі можливості, так і занепокоєння щодо невиявлених маніпуляцій із фотографіями та необхідності тегів походження.
Реалізація в реальному світі
Видалення фотобомбера з фотографії відпустки, щоб фон заповнився природним чином.
Розгортання вертикального портрета в широкий банер шляхом створення нових пейзажів з боків.
Видалення дротів, плям або логотипів із фотографій продуктів для отримання чистих зображень каталогу.
Відновлення старих або розірваних фотографій шляхом реконструкції відсутніх або пошкоджених ділянок.
Ризики та огорожі
Права на зображення та згода можуть стати юридичними ризиками, якщо походження невідоме.
Продуктивність моделі може відрізнятися залежно від освітлення, демографічних показників і середовища.
Помилкові спрацьовування можуть залишитися непоміченими, якщо не відстежувати пороги довіри.
Дорожня карта впровадження
Визначте критерії прийнятності для точності, відкликання та вартості помилок.
Тестуйте з даними, які відповідають реальним умовам виробництва.
Додайте перевірку людиною для прогнозів із низьким рівнем достовірності або високого впливу.
Відстежуйте дрейф моделі та повторно перевіряйте після зміни камери або набору даних.
Продовжуйте досліджувати
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Inpainting and Outpainting quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Наступний посібник
Роздільна здатність LaMa - надійне малювання
Часті запитання
What is Inpainting and Outpainting?
Inpainting заповнює або замінює замасковану область всередині зображення, тоді як outpainting розширює зображення за його вихідні межі. Разом вони дозволяють стирати об’єкти, виправляти недоліки та безперешкодно розширювати сцени за допомогою генеративного штучного інтелекту.
Що робить inpainting?
Inpainting заповнює або замінює вибрану область всередині наявного зображення відповідно до його оточення.
Що робить замальовування?
Замальовування розширює полотно, винаходячи правдоподібні декорації поза оригінальною рамою.
Що відбувається з немаскованими пікселями під час генерації в малюванні на основі дифузії?
Відомі пікселі повторно вводяться на кожному кроці усунення шумів, тому модель синтезує лише замасковану область.
Яка повсякденна функція телефону є формою малювання?
Інструменти «Чарівної гумки» видаляють об’єкт і зафарбовують фон, щоб заповнити прогалину.
Що керує вмістом, який з’являється в замаскованій області?
Моделі залежать від сусідніх пікселів і необов’язкового текстового підказки, щоб вирішити, що генерувати.