SeterusnyaPanduan seterusnya
Rangkaian Transformer Spatial
AI Visual
PANDUAN AI Visual
Rangkaian Piramid Ciri (FPN) membenarkan pengesan mengesan objek pada saiz yang sangat berbeza dengan membina 'piramid' berbilang skala ciri dengan murah.
Dengar panduan iniAI-diceritakan · ~2 min
They are the reason modern detectors find both a tiny faraway pedestrian and a huge nearby truck in the same image.
Objek dalam imej muncul pada banyak skala, dan satu peta ciri bergelut untuk mengendalikan kesemuanya. Pendekatan lama membina piramid imej dengan mengubah saiz foto berkali-kali dan menjalankan rangkaian pada setiap salinan, yang perlahan. FPN, yang diperkenalkan oleh Lin et al. pada 2017, sebaliknya menggunakan semula piramid semula jadi yang sudah berada di dalam rangkaian konvolusi. Tulang belakang seperti ResNet menghasilkan peta ciri yang menjadi lebih kecil dan lebih semantik dalam rangkaian. FPN menambah laluan atas ke bawah: ia menambah sampel ciri yang mendalam, kaya semantik dan menggabungkannya melalui sambungan sisi dengan ciri cetek, resolusi tinggi. Hasilnya ialah satu set peta ciri yang semuanya kukuh dari segi semantik namun mengekalkan perincian spatial yang halus, meningkatkan secara mendadak pengesanan objek kecil tanpa kos tambahan.
Mengesan pejalan kaki kecil, jauh dan kenderaan besar berdekatan secara serentak dalam timbunan persepsi kereta pandu sendiri
Memperkasakan pembahagian contoh dalam Mask R-CNN, di mana FPN menyuapkan ciri berskala ke cadangan rantau dan kepala topeng
Mengesan tumor kecil di samping organ besar dalam saluran paip pengesanan pengimejan perubatan
Mencari objek dengan saiz yang berbeza-beza dalam imej satelit dan udara, daripada bot kecil hingga bangunan besar
Reka bentuk atas ke bawah FPN telah melahirkan ramai pengganti: PANet menambah laluan bawah ke atas, BiFPN (digunakan dalam EfficientDet) menjadikan gabungan boleh dipelajari dan dwiarah dengan sambungan berwajaran, dan NAS-FPN mencari topologi gabungan secara automatik. Pengesan pengubah seperti DETR mengetepikan piramid eksplisit, tetapi gabungan berbilang skala kekal sebagai pusat. Jangkakan idea-idea gaya FPN untuk berterusan di dalam pengubah penglihatan dan pengesan pada peranti yang cekap, semakin meningkat dengan pemberat skala penyesuaian yang dipelajari dan bukannya sambungan tetap.
Newsletter percuma
Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.
Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.
Uji diri anda
Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.
Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma
Rangkaian Piramid Ciri (FPN) membenarkan pengesan mengesan objek pada saiz yang sangat berbeza dengan membina 'piramid' berbilang skala ciri dengan murah. Ini adalah sebab pengesan moden menemui kedua-dua pejalan kaki yang kecil dan trak berdekatan yang besar dalam imej yang sama.
FPN membina perwakilan ciri berbilang skala supaya pengesan boleh mengendalikan objek daripada kecil hingga sangat besar dalam satu laluan.
Laluan atas ke bawah menambah contoh ciri semantik yang mendalam dan menggabungkannya dengan peta beresolusi tinggi yang lebih cetek supaya setiap peringkat adalah terperinci dan kukuh dari segi semantik.
Konvolusi 1x1 melaraskan kiraan saluran peta ciri sisi, yang kemudiannya ditambah mengikut elemen pada ciri atas-bawah 2x-upsampel.
Selepas penambahan mengikut unsur, lilitan 3x3 mengurangkan artifak pengalian yang diperkenalkan melalui pensampelan tinggi, menghasilkan tahap piramid yang lebih bersih.
BiFPN, yang diperkenalkan dengan EfficientDet, menjadikan gabungan ciri dua arah dan mempelajari pemberat untuk seberapa kuat setiap input menyumbang.
Teruskan belajar
Lebih banyak panduan dipilih untuk topik ini
SeterusnyaPanduan seterusnya
Rangkaian Transformer Spatial
AI Visual