Görsel Yapay Zeka KILAVUZU

DINO Kendi Kendine Damıtma

DINO, ağın kendi kendine öğretmesini sağlayarak görüntü transformatörünü hiçbir etiket içermeyen görüntüleri anlayacak şekilde eğiten, kendi kendini denetleyen bir yöntemdir.

2 min readSon güncelleme

Genel Bakış

It produces features so clean that object boundaries emerge for free in the attention maps.

Derin Dalış

Etiketsiz kendi kendine damıtmanın kısaltması olan DINO, Meta AI (daha sonra Facebook AI) tarafından 2021'de yayınlandı. Aynı ağın iki kopyasını (bir öğrenci ve bir öğretmen) kullanıyor ve onları bir görüntünün farklı artırılmış ürünleriyle besliyor. Öğretmen yalnızca farklı bir görüş görse bile öğrenci, öğretmenin çıktı dağılımını eşleştirmeye çalışır. En önemlisi, öğretmen doğrudan eğitilmiyor; ağırlıkları öğrencinin üstel hareketli ortalamasıdır ve yavaş yavaş geride kalır. Ağın tek bir sabit cevaba dönüşmesini önlemek için DINO, öğretmenin çıktılarını merkeze alır ve keskinleştirir. Çarpıcı bir sonuç, bir nesnenin ne olduğu söylenmeden ortaya çıkan görüş transformatörü segment nesnelerinin öz-dikkat haritalarının ortaya çıkmasıdır.

Teknik Bilgi

Her iki ağ da softmax'tan sonra yüksek boyutlu bir olasılık dağılımı üretir. Öğrenci küçük yerel mahsulleri artı küresel görünümleri görürken, öğretmen yalnızca küresel görünümleri görür; bu, yerelden küresele tutarlılığı zorlayan bir çoklu ürün stratejisidir. Kayıp, öğretmen ve öğrenci dağılımları arasındaki çapraz entropidir ve gradyanlar yalnızca öğrenci üzerinden akar. Çökmeyi önleyen iki püf noktası vardır: merkezleme, öğretmen logitlerinden devam eden ortalamayı çıkarır ve düşük sıcaklık bunları keskinleştirerek çıktıların çeşitli kalmasını sağlayacak şekilde birbirini dengeler.

Stratejik Etki

Speed and scale

Visual AI, inceleme, algılama ve etiketleme görevlerini geniş ölçekte otomatikleştirebilir.

Build choices

Yaratıcı ekipler, daha az manuel revizyonla konseptleri daha hızlı prototipleyebilir.

Ekip ve iş akışı

Operasyonlar, daha önce işlenmesi zor olan görüntü ve video sinyallerini kullanabilir.

DINO Kendi Kendine Damıtmanın Geleceği

DINO büyük bir çalışma hattını başlattı. DINOv2 (2023), tarifi bir milyardan fazla seçilmiş görüntüye ölçeklendirerek, derinlik tahmini, segmentasyon ve erişim konusunda denetlenen modellerle rekabet edebilecek çok amaçlı görsel özellikler sağladı; bu özellikler hiçbir ince ayar gerektirmeden kullanılabilir. Alan, açıklama eklemenin pahalı olduğu görsel denetim, robotik ve çok modlu sistemler için etiketsiz temel modelleri peşinde koşarken, kendi kendine damıtmanın merkezi kalmasını bekleyin. Ortaya çıkan bölümleme özelliği aynı zamanda yorumlanabilir, açık kelime dağarcığı algısına yönelik araştırmaları beslemeye devam ediyor.

Gerçek Dünya Uygulaması

DINO'nun dikkat haritalarının, herhangi bir maske etiketi olmadan nesnelerin ana hatlarını çizdiği denetimsiz nesne bölümlendirmesi

Neredeyse kopya veya görsel olarak benzer görüntüleri bulmak için DINO özelliklerini kullanarak görüntü alma ve kopya algılama

DINOv2, derinlik tahmini ve yoğun tahmin görevleri için donmuş bir omurga işlevi görür

Etiketli verilerin az veya maliyetli olduğu durumlarda tıbbi veya uydu görüş modellerinin ön eğitimi

Riskler ve Korkuluklar

Kaynağın belirsiz olması durumunda görüntü hakları ve rıza yasal risk haline gelebilir.

Model performansı aydınlatma, demografik özellikler ve ortamlara göre değişiklik gösterebilir.

Güven eşikleri izlenmediği sürece yanlış pozitifler fark edilmeyebilir.

Uygulama Yol Haritası

1

Kesinlik, geri çağırma ve hata maliyetlerine ilişkin kabul kriterlerini tanımlayın.

2

Gerçek üretim koşullarıyla eşleşen verilerle test edin.

3

Düşük güvenirliğe sahip veya yüksek etkili tahminler için gerçek kişi tarafından yapılan incelemeyi ekleyin.

4

Model kaymasını izleyin ve kamera veya veri kümesi değişikliklerinden sonra yeniden doğrulayın.

Keşfetmeye Devam Edin

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the DINO Self-Distillation quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Testi başlat

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Next guide

DreamFusion ve Skor Damıtma Örneklemesi

Sık sorulan sorular

What is DINO Self-Distillation?

DINO, ağın kendi kendine öğretmesini sağlayarak görüntü transformatörünü hiçbir etiket içermeyen görüntüleri anlayacak şekilde eğiten, kendi kendini denetleyen bir yöntemdir. O kadar temiz özellikler üretiyor ki, dikkat haritalarında nesne sınırları bedava ortaya çıkıyor.

DINO'daki 'HAYIR' ne anlama geliyor?

DINO, etiketsiz kendi kendine damıtma anlamına gelir; tamamen kendi kendini denetler ve hiçbir insan açıklaması gerektirmez.

Öğretmen ağının ağırlıkları DINO'da nasıl güncellenir?

Öğretmen öğrencinin EMA'sıdır, dolayısıyla doğrudan eğitilmek yerine öğrenciyi sorunsuz bir şekilde takip eder.

Öğretmen çıktılarının merkezlenmesi ve keskinleştirilmesi hangi sorunu önler?

Önemsiz sabit çözümden kaçınarak öğretmen çıktılarını çeşitli tutmak için merkezleme ve keskinleştirme birbirini dengeler.

DINO'nun çoklu ürün stratejisinde öğretmen hangi görüşleri alıyor?

Öğretmen yalnızca küresel mahsulleri görürken öğrenci de küçük yerel mahsulleri görüyor, bu da yerelden küresele tutarlılığı teşvik ediyor.

DINO eğitimi almış bir görüntü transformatörünün dikkat haritalarında hangi şaşırtıcı özellik ortaya çıkıyor?

DINO'nun öz dikkati, doğal olarak nesne sınırlarını vurgulayarak, hiçbir maske görmemesine rağmen segmentasyon gerçekleştirir.