SwinIR Amunawa pada
SwinIR kan ifojusọna-window Swin Transformer si awọn iṣẹ ṣiṣe imupadabọsipo aworan bii ipinnu-giga, denoising, ati yiyọ ohun-ọṣọ JPEG.
Akopọ
It matters because it showed transformers can beat strong CNN models on restoration with fewer parameters.
Jin Dive
SwinIR, ti a ṣe ni ọdun 2021, ṣe adaṣe Amunawa Swin, ni ipilẹṣẹ ẹda aworan ti n ṣiṣẹ giga, si iran ipele kekere. Apẹrẹ rẹ ni awọn ipele mẹta: isọdọtun isediwon ẹya aijinile, isediwon ẹya ti o jinlẹ ti a ṣe ti Awọn bulọọki Amunawa Swin tolera (RSTB), ati module atunkọ ti o ṣe agbega tabi ṣatunṣe aworan naa. Kọọkan RSTB ni orisirisi awọn Swin Transformer fẹlẹfẹlẹ ti a we pẹlu kan iṣẹku asopọ ati ki o kan ik convolution. Ẹrọ mojuto jẹ akiyesi ara ẹni ti o da lori window ti a ṣe iṣiro laarin awọn ferese agbegbe ti o yipada laarin awọn fẹlẹfẹlẹ, jẹ ki awoṣe mu awọn alaye agbegbe mejeeji ati ipo to gun-gun daradara. SwinIR ṣeto awọn abajade ipo-ti-ti-aworan kọja ipinnu Super-kilasika, ipinnu iwuwo fẹẹrẹ fẹẹrẹ, ipinnu Super-aye gidi, grẹyscale ati denoising awọ, ati idinku artifact JPEG funmorawon, nigbagbogbo pẹlu to meji-meta diẹ sile ju CNNs idije.
Imọ-imọ-ẹrọ
Awọn iwọn akiyesi ara ẹni ti o ṣe deede ni iwọn igemerin pẹlu iwọn aworan, eyiti ko wulo fun awọn fọto nla. SwinIR ṣe iṣiro akiyesi inu awọn window kekere ti o wa titi, ṣiṣe laini iye owo ni agbegbe aworan, lẹhinna yi ipin window gbogbo ipele miiran ki alaye kọja awọn aala window. Ètò fèrèsé yíyí ń pèsè pápá gbígba gbígbéṣẹ́ ńlá kan àti ìwọ̀n àkópọ̀ àkóónú, èyí tí àwọn ekuro convolution ti o wa titi aini, ti n ṣalaye deede-si-paramita rẹ to lagbara.
Ipa Ilana
Iyara ati iwọn
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Kọ awọn yiyan
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ojo iwaju ti SwinIR Amunawa atunṣe
SwinIR ṣe iranlọwọ lati fa igbi ti awọn awoṣe imupadabọ ti o da lori transformer gẹgẹbi Restormer ati HAT ti o titari awọn apẹrẹ akiyesi siwaju. Reti ifarabalẹ tẹsiwaju ti ifarabalẹ pẹlu iyipada ati itankale, awọn iyatọ akiyesi daradara diẹ sii fun ipinnu giga-giga ati fidio, ati awọn imupadabọ ẹrọ oluyipada ẹrọ. Apẹrẹ RSTB apọjuwọn rẹ tun jẹ ki o jẹ ẹhin irọrun fun awọn iṣẹ ṣiṣe imupadabọ tuntun ti o kọja awọn ipilẹ akọkọ.
Real-World imuse
Awọn fọto ipinnu-giga lakoko ti o tọju awọn awoara ti o dara ju awọn ipilẹ CNN lọ
Yiyọ JPEG funmorawon ìdènà ati onisebaye lati awọn aworan ayelujara
Kiko awọn fọto kamẹra kekere tabi ISO giga ni iwọn grẹy ati awọ
Ṣiṣẹ bi egungun isọdọtun ni awọn opo gigun ti iwadii ati diẹ ninu awọn GUI igbega igbega orisun-ìmọ
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the SwinIR Transformer Restoration quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Iran Ayirapada
Awọn ibeere ti a beere nigbagbogbo
What is SwinIR Transformer Restoration?
SwinIR kan ifojusọna-window Swin Transformer si awọn iṣẹ ṣiṣe imupadabọsipo aworan bii ipinnu-giga, denoising, ati yiyọ ohun-ọṣọ JPEG. O ṣe pataki nitori pe o fihan pe awọn oluyipada le lu awọn awoṣe CNN ti o lagbara lori imupadabọ pẹlu awọn ayeraye diẹ.
Kini faaji transformer jẹ SwinIR da lori?
SwinIR ṣe adaṣe aṣa aṣa ti Ayipada Swin, apẹrẹ ti o da lori window si imupadabọsipo aworan.
Kini ẹrọ akiyesi mojuto ni SwinIR?
SwinIR nlo akiyesi ara ẹni laarin awọn ferese agbegbe ti o yipada laarin awọn ipele lati dapọ alaye kọja awọn ferese.
Kini awọn bulọọki ẹya-ara ti SwinIR ti a pe?
Ipele isediwon ẹya ti o jinlẹ ṣe akopọ Awọn bulọọki Amunawa Swin ti o ku, ọkọọkan pẹlu awọn fẹlẹfẹlẹ Swin, convolution, ati asopọ to ku.
Kini idi ti ifarabalẹ ti o da lori window daradara diẹ sii ju akiyesi agbaye lọ nibi?
Ifojusi iširo laarin awọn ferese iwọn ti o wa titi ṣe iwọn iye owo laini pẹlu agbegbe aworan, yago fun fifun kuadiratiki ti akiyesi agbaye.
Eyi ti awọn wọnyi kii ṣe iṣẹ-ṣiṣe SwinIR ti a ṣe apẹrẹ fun?
SwinIR ṣe ifọkansi awọn iṣẹ-ṣiṣe iran-kekere bi ipinnu-giga, aitọ, ati yiyọ ohun-ọṣọ JPEG, kii ṣe itumọ ede.