Apa Ohunkohun Awoṣe
Apakan Ohunkohun Awoṣe (SAM) jẹ Meta Awoṣe ipilẹ AI fun ipin aworan: ti a fun ni aaye kan, apoti, tabi ofiri ti o ni inira, o ṣe ilana ohun ti o baamu lẹsẹkẹsẹ.
Akopọ
It was built to generalize to objects and images it never saw during training, making segmentation a promptable task.
Jin Dive
Ti tu silẹ nipasẹ Meta AI ni ọdun 2023, SAM ṣe atunṣe apakan bi iṣoro ti o tọ: o fun ni ni kiakia (tẹ kan, apoti kan, boju-boju kan, tabi itọka ti o niri ọrọ) ati pe o da ọkan tabi diẹ ẹ sii awọn iboju iparada ohun. Agbara rẹ wa ni apakan lati iwọn: o ti gba ikẹkọ lori SA-1B, dataset ti o ju awọn iboju iparada bilionu 1 kọja awọn aworan miliọnu 11, ti a ṣe pẹlu ẹrọ asọye awoṣe-ni-loop. Ni ayaworan ile, SAM ni koodu fifipamọ aworan ti o wuwo ṣiṣe ni ẹẹkan fun aworan kan, fifi koodu iwuwo iwuwo fẹẹrẹ kan, ati oluyipada boju-boju kan, nitorinaa aworan ifibọ ẹyọkan le jẹ tun-igbese ni ibaraenisepo ni akoko gidi. O jẹ ki gbigbe-shot odo si ọpọlọpọ awọn iṣẹ-ṣiṣe. SAM 2, ti a tu silẹ ni ọdun 2024, fa eyi si fidio, titọpa awọn nkan kọja awọn fireemu.
Imọ-imọ-ẹrọ
SAM nlo oluyipada aworan Ayipada Vision (ViT), nigbagbogbo ti a ti kọkọ tẹlẹ pẹlu fifi koodu boju-boju, lati gbejade ifibọ aworan ipon. Awọn ibeere ti wa ni koodu sinu awọn ami-ami, ati oluyipada-orisun iyipada pẹlu ifarabalẹ-agbelebu fiusi awọn ami itọsẹ pẹlu ifisi aworan si awọn iboju iparada pẹlu awọn ikun igbekele. Lati yanju aibikita (titẹ kan le tumọ si bọtini kan, seeti kan, tabi eniyan kan), SAM sọ asọtẹlẹ ọpọlọpọ awọn iboju iparada ni ẹẹkan ati ṣe ipo wọn, jẹ ki lilo isale tabi awọn itọka afikun disambiguate.
Ipa Ilana
Iyara ati iwọn
Visual AI le ṣe adaṣe adaṣe, wiwa, ati awọn iṣẹ ṣiṣe taagi ni iwọn.
Kọ awọn yiyan
Awọn ẹgbẹ ẹda le ṣe apẹrẹ awọn imọran yiyara pẹlu awọn atunyẹwo afọwọṣe diẹ.
Ẹgbẹ ati ṣiṣan iṣẹ
Awọn iṣẹ ṣiṣe le lo aworan ati awọn ifihan agbara fidio ti o nira tẹlẹ lati ṣiṣẹ.
Ojo iwaju ti Apa Ohunkohun Awoṣe
SAM ti di eegun ẹhin aiyipada fun awọn irinṣẹ asọye, aworan iṣoogun, awọn roboti, ati awọn opo gigun ti AR, nigbagbogbo so pọ pẹlu awọn aṣawari tabi awọn awoṣe ọrọ fun ṣiṣi-fokabulari 'apakan nipasẹ orukọ' ṣiṣan iṣẹ. Reti fẹẹrẹfẹ, awọn iyatọ ti o yara (MobileSAM, EfficientSAM) fun lilo ẹrọ, isọpọ jinle pẹlu ede fun ipin ti a dari ọrọ ni kikun, ati imugboroja tẹsiwaju sinu fidio ati 3D. Bi awọn kan ipile awoṣe, awọn oniwe-ifibọ ti wa ni increasingly tun lo bi a Iro Layer ono miiran awọn ọna šiše.
Real-World imuse
Awọn iru ẹrọ asọye aworan lo SAM lati jẹ ki awọn akole tẹ ẹẹkan ati ṣẹda awọn iboju iparada to peye, akoko isamisi idinku.
Awọn oniwadi ṣe atunṣe SAM (fun apẹẹrẹ, MedSAM) lati ṣe ilana awọn ara ati awọn èèmọ ni CT ati MRI scans.
Fọto ati awọn olootu fidio ṣepọ SAM lati ge awọn koko-ọrọ kuro tabi yọ awọn abẹlẹ kuro lati tẹ ẹyọkan.
Awọn orin SAM 2 ati awọn nkan apakan kọja awọn fireemu fidio fun awọn ipa AR ati iwoye roboti.
Awọn ewu & Awọn ọna iṣọ
Awọn ẹtọ aworan ati igbanilaaye le di awọn eewu labẹ ofin ti o ba jẹ afihan.
Iṣe awoṣe le yatọ kọja ina, awọn ẹda eniyan, ati awọn agbegbe.
Awọn idaniloju eke le ma ṣe akiyesi ayafi ti a ba ṣe abojuto awọn ala igbẹkẹle.
Ilana Ilana imuse
Ṣetumo awọn ibeere gbigba fun pipe, iranti, ati awọn idiyele aṣiṣe.
Ṣe idanwo pẹlu data ti o baamu awọn ipo iṣelọpọ gidi.
Ṣafikun atunyẹwo eniyan fun igbẹkẹle kekere tabi awọn asọtẹlẹ ipa-giga.
Tọpinpin awoṣe ki o ṣe tunṣe lẹhin kamẹra tabi awọn ayipada datasetto.
Tesiwaju Ṣiṣawari
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Segment Anything Model quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Itọsọna atẹle
Awọn awoṣe Iduroṣinṣin
Awọn ibeere ti a beere nigbagbogbo
What is Segment Anything Model?
Apakan Ohunkohun Awoṣe (SAM) jẹ Meta Awoṣe ipilẹ AI fun ipin aworan: ti a fun ni aaye kan, apoti, tabi ofiri ti o ni inira, o ṣe ilana ohun ti o baamu lẹsẹkẹsẹ. A ṣe itumọ rẹ lati ṣakopọ si awọn nkan ati awọn aworan ti ko rii lakoko ikẹkọ, ṣiṣe ipin jẹ iṣẹ ṣiṣe kiakia.
Ero pataki wo ni o jẹ ki SAM jẹ 'awoṣe ipilẹ' fun ipin?
SAM reframes ipin bi kiakia ati pe a ṣe apẹrẹ fun gbigbe-shot si awọn nkan ati awọn aworan ni ita eto ikẹkọ rẹ.
Ni aijọju bawo ni o ṣe tobi dataset SA-1B ti a lo lati ṣe ikẹkọ SAM?
SA-1B ni awọn iboju iparada ti o ju bilionu 1 lọ lori awọn aworan miliọnu 11, ti a ṣe pẹlu ẹrọ asọye awoṣe-ni-loop.
Kini idi ti SAM ṣe pin faaji rẹ si koodu koodu ti o wuwo ati koodu aiyipada kiakia kan?
Awọn gbowolori image fifi koodu nṣiṣẹ ni kete ti; lẹhinna fifi koodu kiakia olowo poku ati iyipada iboju boju gba yara laaye, atunṣe ibaraenisepo ti aworan kanna.
Bawo ni SAM ṣe mu itọsi aibikita kan, bii titẹ ẹyọkan ti o le tumọ si awọn nkan pupọ?
SAM ṣe agbejade ọpọlọpọ awọn iboju iparada oludije pẹlu awọn ikun nitorina aibikita le jẹ ipinnu nipasẹ ipo tabi awọn itọka afikun.
Iru egungun ẹhin wo ni SAM nlo lati fi koodu sii aworan titẹ sii?
Ayipada aworan SAM jẹ Ayipada Iran kan, nigbagbogbo ni ikẹkọ pẹlu adaṣe adaṣe ti o boju, ti n ṣe ifilọlẹ aworan ipon.