Als nächstesNächster Leitfaden
Pix2Pix Bild-zu-Bild-Übersetzung
Visuelle KI
Visueller KI-GUIDE
CycleGAN lernt, Bilder zwischen zwei visuellen Bereichen (z. B. Pferde in Zebras oder Fotos in Gemälde) zu übersetzen, ohne dass jemals passende Vorher-Nachher-Beispielpaare erforderlich sind.
Hören Sie sich diesen Leitfaden anKI-erzählt · ~2 min
It matters because collecting paired training data is often impossible, and CycleGAN unlocks style transfer for messy real-world datasets.
CycleGAN wurde 2017 von Zhu, Park, Isola und Efros eingeführt und befasst sich mit der ungepaarten Bild-zu-Bild-Übersetzung. Die meisten früheren Methoden (wie pix2pix) benötigten exakte Paare: die gleiche Szene als Foto und als Skizze. CycleGAN beseitigt diese Anforderung mithilfe von zwei Generatoren (G wandelt Domäne A in B um, F wandelt B zurück in A um) und zwei Diskriminatoren, die den Realismus in jeder Domäne beurteilen. Der Durchbruch ist der Verlust der Zykluskonsistenz: Wenn Sie ein Pferdefoto in ein Zebra übersetzen und es zurück übersetzen, sollten Sie das ursprüngliche Pferd wiederherstellen. Diese Einschränkung hindert den Generator daran, beliebige Ausgaben zu erfinden und erzwingt sinnvolle, inhaltserhaltende Zuordnungen. Es ist bekannt, dass es Sommerlandschaften in Winterlandschaften verwandelt, Monet-Gemälde in Fotos und Äpfel in Orangen, alles aus zwei unabhängigen Bilderstapeln.
Fotografien in den Malstil von Monet, Van Gogh oder Cezanne umwandeln, ohne paarweise Fotomalerei-Beispiele
Konvertieren von Sommerlandschaftsfotos in Winterszenen (und umgekehrt) für die Erstellung von Film- und Spielinhalten
Umwandlung von MRT-Scans in CT-ähnliche Bilder in der medizinischen Forschung, wo gepaarte Patientenscans nicht verfügbar sind
Anpassung synthetischer Fahrsimulationsaufnahmen an ein fotorealistisches Aussehen, um die Wahrnehmung autonomer Fahrzeuge zu trainieren
Die Kernidee von CycleGAN, die Zykluskonsistenz, lebt in der modernen ungepaarten Übersetzungsarbeit weiter, einschließlich diffusionsbasierter Methoden, die GAN-Grundgerüste austauschen, um Modelle mit schärferen, vielfältigeren Ausgaben zu entrauschen. Forscher wenden nun ungepaarte Übersetzung auf die medizinische Bildgebung (Synthetisierung von Scan-Modalitäten), Domänenanpassung für die selbstfahrende Simulation-zu-Realität-Übertragung und Datenerweiterung an. Erwarten Sie eine strengere Kontrolle darüber, was sich ändert und was unverändert bleibt, sowie hybride Ansätze, die Zyklusbeschränkungen mit textbedingter Diffusionsbearbeitung kombinieren.
Kostenloser Newsletter
Drei verifizierte KI-Geschichten jeden Werktagmorgen, in einfachem Englisch geschrieben. Für immer kostenlos, keine Werbung.
Eine E‑Mail jeden Werktag. Abmelden mit einem Klick. Wir verkaufen oder teilen Ihre Adresse nie.
Testen Sie sich selbst
Sofortiges Feedback zu jeder Antwort und ein teilbares Zertifikat mit verifizierbarer ID, sobald Sie einen Kurs bestanden haben.
Unterstützen Sie kostenlose KI-Bildung. AI Understanding ist eine 501(c)(3) gemeinnützige Organisation – keine Werbung, keine Paywall, nie. Machen Sie eine Spende
CycleGAN lernt, Bilder zwischen zwei visuellen Bereichen (z. B. Pferde in Zebras oder Fotos in Gemälde) zu übersetzen, ohne dass jemals passende Vorher-Nachher-Beispielpaare erforderlich sind. Dies ist wichtig, da das Sammeln gepaarter Trainingsdaten oft unmöglich ist und CycleGAN die Stilübertragung für chaotische Datensätze aus der realen Welt ermöglicht.
Der Hauptbeitrag von CycleGAN ist die ungepaarte Übersetzung, das Erlernen von Zuordnungen zwischen Domänen aus zwei unabhängigen Bildsammlungen anstelle von exakten Paaren.
Zykluskonsistenz bedeutet, dass F(G(x)) gleich x sein sollte: Ein Pferd, das in ein Zebra und zurück verwandelt wird, sollte wie das ursprüngliche Pferd aussehen.
CycleGAN verwendet zwei Generatoren, einen für jede Übersetzungsrichtung (A nach B und B nach A), sowie zwei Diskriminatoren.
CycleGAN verwendet einen PatchGAN-Diskriminator, der überlappende Patches als echt oder gefälscht beurteilt und so den lokalen Realismus fördert.
Identitätsverlust bestraft unnötige Änderungen, wenn sich ein Bild bereits in der Zieldomäne befindet, und trägt dazu bei, Farben und Farbtöne zu erhalten.
Lerne weiter
Weitere Leitfäden zu diesem Thema ausgewählt
Als nächstesNächster Leitfaden
Pix2Pix Bild-zu-Bild-Übersetzung
Visuelle KI