Sisan Opitika
Ṣiṣan opitika ṣe iṣiro bii piksẹli kọọkan ṣe n lọ laarin awọn fireemu fidio itẹlera, ti n ṣe agbejade maapu ipon ti awọn adaṣe išipopada.
Akopọ
It is how machines perceive movement, speed, and direction in video.
Jin Dive
Ṣiṣan opitika ṣe afihan itọka išipopada kekere kan si gbogbo ẹbun, ti n ṣalaye ibiti o ti han lati rin irin-ajo lati fireemu kan si ekeji. Awọn ọna Ayebaye sinmi lori arosinu 'imọlẹ aitasera' - aaye kan tọju imọlẹ kanna bi o ti n lọ - ni idapo pẹlu awọn idiwọ didan, gẹgẹbi ninu Lucas-Kanade (sparse) ati Horn-Schunck (ipon) algorithms. Iwọnyi ṣiṣẹ daradara fun kekere, awọn iṣipopada onírẹlẹ ṣugbọn Ijakadi pẹlu gbigbe iyara, awọn idimu, ati awọn agbegbe ti ko ni awoara nla. Ẹkọ ti o jinlẹ yi aaye naa pada: awọn nẹtiwọọki bii FlowNet, PWC-Net, ati ni pataki RAFT kọ ẹkọ lati baamu awọn ẹya ara ẹrọ kọja awọn fireemu ki o ṣe atunṣe aaye ṣiṣan ni igbagbogbo. Awọn o wu iwakọ fidio oye nibikibi ti awọn ibeere ni ko o kan 'kini o wa ninu awọn fireemu?' ṣugbọn 'bawo ni o ṣe nlọ?'
Imọ-imọ-ẹrọ
RAFT, ọna ala-ilẹ kan, kọ iwọn didun iye owo 4D kan ti o ṣe iṣiro bawo ni gbogbo ẹbun ti o wa ninu fireemu ọkan ṣe baamu gbogbo ẹbun ni fireemu meji, lẹhinna lo oniṣẹ imudojuiwọn loorekoore (GRU) lati ṣatunṣe iṣiro sisan lori ọpọlọpọ awọn igbesẹ kekere - bii awọn itọka leralera si awọn ere-kere ti o dara julọ. Isọdọtun aṣetunṣe, kuku ju amoro nla kan, funni ni didasilẹ, ṣiṣan deede paapaa fun awọn gbigbe nla ati awọn alaye ti o dara, ati pe o ṣakopọ daradara kọja awọn iwoye oriṣiriṣi.
Ipa Ilana
Iyara ati iwọn
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Kọ awọn yiyan
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ojo iwaju ti ṣiṣan Optical
Ṣiṣan opiti n gbe lọ si akoko gidi, idiyele-giga lori awọn ẹrọ eti, isọpọ ti o pọ sii pẹlu ijinle ati ṣiṣan iwoye 3D, ati ikẹkọ ti iṣakoso ti ara ẹni ti o kọ ẹkọ lati fidio aise laisi awọn ami-ilẹ ti o gbowolori gbowolori. Bii awọn eto adase ati awọn roboti beere oye išipopada ti o pọ sii, nireti sisan lati dapọ pẹlu ipasẹ ohun ati asọtẹlẹ nitorinaa awọn ẹrọ kii ṣe rii išipopada lọwọlọwọ nikan ṣugbọn nireti ibi ti awọn nkan yoo lọ atẹle, paapaa nipasẹ awọn occlusions ati gbigbe kamẹra iyara.
Real-World imuse
Imuduro fidio ninu awọn foonu ati awọn kamẹra iṣe ti o fagile išipopada amusowo gbigbọn
Interpolation fireemu ti o ṣe agbejade laarin-laarin awọn fireemu lati jẹ ki fidio dabi didan tabi ṣiṣe ni išipopada o lọra
Iranlọwọ awakọ ati awọn ọkọ ayọkẹlẹ adase iṣiro iyara ati itọsọna ti awọn ọkọ ayọkẹlẹ to wa nitosi ati awọn ẹlẹsẹ
Awọn kodẹki funmorawon fidio ti n sọ asọtẹlẹ išipopada laarin awọn fireemu lati fi fidio pamọ daradara siwaju sii
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Optical Flow quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Ibamu ṣiṣan
Awọn ibeere ti a beere nigbagbogbo
What is Optical Flow?
Ṣiṣan opitika ṣe iṣiro bii piksẹli kọọkan ṣe n lọ laarin awọn fireemu fidio itẹlera, ti n ṣe agbejade maapu ipon ti awọn adaṣe išipopada. O jẹ bii awọn ẹrọ ṣe rii gbigbe, iyara, ati itọsọna ninu fidio.
Kí ni opitika sisan kosi ti siro?
Ṣiṣan opiti ṣe agbejade awọn iṣipopada iṣipopada ti n ṣapejuwe bii piksẹli kọọkan ṣe n gbe lati fireemu kan si ekeji.
Kini arosinu 'imọlẹ nigbagbogbo' ti a lo ninu ṣiṣan opiti Ayebaye?
Awọn ọna Ayebaye ro pe imọlẹ aaye ti ara kan duro nigbagbogbo bi o ti nlọ, eyiti o jẹ ki wọn baamu laarin awọn fireemu.
Ọna ikẹkọ jinlẹ ode oni wo ni a mọ fun isọdọtun sisan aṣetunṣe nipa lilo iwọn idiyele ati awọn imudojuiwọn loorekoore?
RAFT kọ iwọn iye owo 4D kan ati pe o lo oniṣẹ ẹrọ loorekoore lati ṣatunṣe ṣiṣan lori ọpọlọpọ awọn igbesẹ kekere, iyọrisi deede-ti-ti-aworan.
Kini idi ti awọn ọna ṣiṣan oju-aye Ayebaye ṣe n tiraka pẹlu nla, awọn išipopada iyara?
Awọn ọna ti a ṣe lori awọn ero inu iṣipopada kekere padanu orin nigbati piksẹli ba fo jina laarin awọn fireemu, nfa awọn aṣiṣe.
Ohun elo wo ni o gbẹkẹle iṣiro iṣiro laarin awọn fireemu?
Idapọmọra fireemu n ṣepọ awọn fireemu agbedemeji nipa lilo išipopada piksẹli ifoju, ti njade ni irọrun tabi fidio ti o lọra.