Up tókànItọsọna atẹle
Iṣatunṣe Aworan ibaraẹnisọrọ pẹlu Awọn awoṣe Multimodal
AI wiwo
Visual AI Itọsọna
Wiwa Multimodal
Wiwa multimodal gba alaye kọja awọn fọọmu bii ọrọ, awọn aworan, ohun, ati fidio.
Gbọ si itọsọna yiiAI-ṣe afihan · ~2 min
Lori iwe yi2 min ka
Akopọ
Ibeere ọrọ le gba aworan kan, tabi aworan kan le wa awọn iwe aṣẹ ti o ni ibatan. Awọn modalities gbọdọ wa ni ipoduduro ni awọn ọna ibaramu, ati pe ibajọra tun nilo igbelewọn lodi si iṣẹ olumulo.
Awọn gbigba bọtini
- Ṣalaye ẹri ti o nilo nipasẹ modality.
- Lo awọn aṣoju ibaramu.
- Tọju orisun ati awọn igbanilaaye kọja awọn ohun-ini ti o gba.
Jin Dive
Yan ohun ti ibeere kọọkan ati abajade yẹ ki o tumọ si. Wiwa fun ọja ti o jọra yatọ si wiwa fidio ti o ni gbolohun ọrọ ti a sọ. Awoṣe ti o ni ikẹkọ lati ṣe deede awọn akọle ati awọn aworan le ma ṣe atilẹyin gbogbo ohun tabi iṣẹ-ṣiṣe. Tọju metadata ati awọn ohun-ini atilẹba. Orisun, ibiti akoko, awọn igbanilaaye, ati ọrọ apejuwe le ṣe iranlọwọ fun ipo ati ijerisi. Ifibọ nikan le padanu awọn idanimọ gangan, aiṣedeede, tabi awọn alaye ti o ṣe pataki si ibeere naa. Darapọ awọn ifihan agbara nibiti o yẹ. Ṣe ayẹwo idapọ ati ipo lori awọn apẹẹrẹ ti o daju dipo ki o ro pe fifi awọn ọna kun ibaramu. Ṣe idanwo awọn iyatọ ti o nira: awọn nkan ti o jọra ṣugbọn awọn ohun oriṣiriṣi, awọn aworan pẹlu ọrọ pataki, awọn fidio ti o baamu ṣugbọn ohun ko ṣe, ati awọn ibeere ti o ni isansa tabi awọn ibatan aaye. Jeki awọn iṣakoso wiwọle ni ibamu kọja awọn embeddings, awọn eekanna atanpako, awọn iwe afọwọkọ, ati awọn faili atilẹba.
04Apẹẹrẹ ṣiṣẹ
Ṣayẹwo iru ọna wo ni o ṣe atilẹyin ibeere naa
Îá ýòîì ñîîáùàåò "Ñëàâà Áîãó" â Ìîñêâå.
A visual matcher le pada a ipalọlọ agekuru fifi a aja. Jẹrisi boya awọn iṣẹ-ṣiṣe nilo awọn ohun, awọn han igbese, tabi boya.
Ṣe ayẹwo awọn abajade nipa lilo ẹri ti a beere dipo gbigba ibaramu aworan ti o ni ibatan gbooro.
Ohun ti o fihan
Apẹẹrẹ ti a kọ ṣe iyatọ ibajọra koko-ọrọ lati itẹlọrun ibeere multimodal kan.
Real-World imuse
Wá àwòrán ọjà tí a fún ni àṣẹ láti inú ìbéèrè ọ̀rọ̀ àpèjúwe.
Wa gbigba fidio kan nipa lilo ọrọ transcription mejeeji ati ẹri wiwo.
Fifi o sinu iwa
Kini idi ti o ṣe pataki
- Iyara ati iwọn. Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
- Kọ awọn yiyan. Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
- Ẹgbẹ ati ṣiṣan iṣẹ. Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ṣọra fun
- Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
- Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
- Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Next awọn igbesẹ
- Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
- Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
- Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
- Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Awọn orisun ati siwaju kika
- Radford and colleaguesKọ ẹkọ awọn awoṣe wiwo gbigbe lati abojuto ede adayeba
Tesiwaju Ṣiṣawari
Ìwé ìròyìn ọfẹ
Gba ìkànìyàn AI ojoojúmọ́
Ìtàn AI mẹta tó jẹ́rìí ní gbogbo owurọ́ ọjọ́ iṣẹ́, kọ́wé ní Gẹ̀ẹ́sì tó rọrùn. Ọfẹ́ fún gbogbo àkókò, kò sí ìpolówó.
Ìmeèlì kan ní gbogbo ọjọ́ iṣẹ́. Yọkúrò ní ìkànìyàn ní ìkànìyàn kan. A kò ta tàbí pín àdírẹ́sì rẹ.
Ṣe idanwo fun ara rẹ
Take the Multimodal Search quiz
Ìdáhùn lẹ́sẹ̀kẹsẹ̀ lórí gbogbo ìdáhùn, àti iwe-ẹ̀rí tó lè pin pẹ̀lú ID tó lè jẹ́rìí lẹ́yìn tí o bá kọ́ ẹ̀kọ́.
Ṣe àtìlẹ́yìn ẹ̀kọ́ AI ọfẹ́. AI Understanding jẹ́ àjọ àìní èrè 501(c)(3) — kò sí ìpolówó, kò sí àkúnya owó, ní gbogbo àkókò. Ṣe ẹbun kan
Awọn ibeere ti a beere nigbagbogbo
Njẹ a le ṣe afiwe awọn aworan ati awọn ọrọ taara?
Ko lailewu nipasẹ iṣaro. Wọn nilo awọn aṣoju ibaramu tabi ọna iṣọkan agbelebu-modal ti o yẹ.
Tesiwaju kikọ
Jẹmọ awọn itọsọna
Awọn itọsọna diẹ sii ti a yan fun koko yii