SPADE การสังเคราะห์ภาพความหมาย

It matters because it gives artists and designers precise spatial control over what appears where in a generated scene.

SPADE นำเสนอโดยนักวิจัย NVIDIA Park, Liu, Wang และ Zhu ในปี 2019 (ด้วยแอปสาธิต GauGAN) สร้างภาพที่สมจริงจากแผนที่การแบ่งส่วนความหมาย โดยแต่ละพิกเซลจะมีสีตามหมวดหมู่ (น้ำ ถนน อาคาร ท้องฟ้า) เครื่องกำเนิดไฟฟ้ารุ่นก่อน ๆ ป้อนแผนผังการแบ่งส่วนผ่านเลเยอร์การทำให้เป็นมาตรฐานซึ่งมีแนวโน้มที่จะ 'ล้าง' ข้อมูลโครงร่างออกไป ทำให้ได้ผลลัพธ์ที่พร่ามัวหรือไม่สอดคล้องกัน ข้อมูลเชิงลึกของ SPADE คือโครงร่างควรคอยชี้นำเครือข่ายในทุกขั้นตอนของการสร้าง ไม่ใช่แค่ที่อินพุตเท่านั้น โดยจะปรับเปลี่ยนการเปิดใช้งานแบบมาตรฐานโดยใช้พารามิเตอร์ที่เรียนรู้โดยตรงจากแผนที่การแบ่งส่วนในแต่ละตำแหน่งเชิงพื้นที่ ผลลัพธ์ที่ได้คือการสังเคราะห์ที่คมชัดและควบคุมได้ ซึ่งคุณสามารถวาดแผนที่ฉลากและดูภูมิทัศน์ที่น่าเหลือเชื่อ พร้อมด้วยการสะท้อนและพื้นผิวที่เกิดขึ้นจริง