ต่อไปคำแนะนำต่อไป
การปรับแต่งหลายแนวคิดการแพร่กระจายแบบกำหนดเอง
วิชวลเอไอ
คู่มือ AI แบบเห็นภาพ
SDXL คือโมเดลการแปลงข้อความเป็นรูปภาพความละเอียดสูงของ Stability AI ที่จับคู่ตัวสร้างฐานอันทรงพลังกับตัวปรับแต่ง ในขณะที่การกระจายแบบเรียงซ้อนเชื่อมโยงหลายโมเดลเพื่อสร้างรูปภาพจากความละเอียดต่ำไปสูง
ฟังคำแนะนำนี้บรรยายโดย AI · ~2 min
Together they explain how modern open-source image generators hit photorealistic quality.
SDXL (Stable Diffusion XL) คือโมเดลการแพร่กระจายที่มีพารามิเตอร์ประมาณ 3.5 พันล้านพารามิเตอร์ ซึ่งสร้างภาพขนาด 1024x1024 โดยกำเนิด ซึ่งก้าวข้าม Stable Diffusion ดั้งเดิมที่มีขนาด 512x512 อย่างมาก ใช้ตัวเข้ารหัสข้อความสองตัว (OpenCLIP ViT-bigG และ CLIP ViT-L) เพื่อการทำความเข้าใจที่รวดเร็วยิ่งขึ้น รวมถึงขนาดและการปรับสภาพการครอบตัด เพื่อให้โมเดลทราบความละเอียดและการจัดเฟรมเป้าหมาย SDXL จัดส่งเป็นไปป์ไลน์แบบสองขั้นตอน: โมเดลพื้นฐานจะสร้างอิมเมจแฝง จากนั้นโมเดลตัวปรับแต่งเสริมจะเพิ่มรายละเอียดอย่างละเอียดในขั้นตอนการลดสัญญาณรบกวนขั้นสุดท้าย การแพร่กระจายแบบเรียงซ้อนเป็นแนวคิดที่กว้างกว่าอยู่เบื้องหลังสิ่งนี้ แทนที่จะใช้แบบจำลองเดียวที่ทำทุกอย่าง คุณจะเชื่อมโยงแบบจำลองขนาดเล็กที่สร้างภาพความละเอียดต่ำเข้ากับแบบจำลองการแพร่กระจายที่มีความละเอียดสูงพิเศษที่จะยกระดับมัน โดยแต่ละแบบจำลองได้รับการฝึกฝนมาเพื่อเวทีของมัน Imagen ของ Google ทำให้วิธีการแบบเรียงซ้อนเป็นที่นิยม
สร้างการตลาดและแนวคิดศิลปะขนาด 1024x1024 โดยตรงจากข้อความแจ้งโดยไม่ต้องมีตัวขยายขนาดแยกต่างหาก
การใช้ไปป์ไลน์ SDXL base-plus-refiner เพื่อเพิ่มรายละเอียดที่คมชัดให้กับใบหน้าและพื้นผิวในการจำลองผลิตภัณฑ์
ใช้งาน SDXL Turbo เพื่อดูตัวอย่างภาพที่แทบจะทันทีในเครื่องมือออกแบบเชิงโต้ตอบ
สร้างน้ำตกที่มีความละเอียดสูงแบบกำหนดเองเพื่อเปลี่ยนภาพร่างที่มีความละเอียดต่ำให้เป็นภาพประกอบที่มีความละเอียดสูง
แนวโน้มมีขั้นตอนน้อยลง เร็วขึ้น และสถาปัตยกรรมที่เป็นหนึ่งเดียว วิธีการกลั่น เช่น SDXL Turbo และ Latent Consistency Models ได้ลดการผลิตลงเหลือหนึ่งถึงสี่ขั้นตอนแล้ว หม้อแปลงแบบกระจาย (เช่นใน Stable Diffusion 3 และ FLUX) ส่วนใหญ่มาแทนที่ U-Net backbone และการสร้างความละเอียดสูงแบบ end-to-end กำลังลดการพึ่งพาการเรียงซ้อนที่ชัดเจน คาดหวังการผสานรวมการปรับแต่งที่เข้มงวดมากขึ้น การแสดงข้อความที่ดีขึ้น และการสังเคราะห์ภาพบนอุปกรณ์แบบเรียลไทม์ ในขณะที่ประสิทธิภาพดีขึ้นเรื่อยๆ
จดหมายข่าวฟรี
เรื่องราว AI ที่ตรวจสอบแล้ว 3 เรื่องทุกวันทำงาน เช้า, เขียนเป็นภาษาอังกฤษธรรมดา ฟรีตลอดไป ไม่มีโฆษณา
อีเมลหนึ่งฉบับทุกวันทำงาน ยกเลิกการสมัครในคลิกเดียว เราไม่เคยขายหรือแชร์ที่อยู่อีเมลของคุณ
ทดสอบตัวเอง
ข้อเสนอแนะทันทีสำหรับทุกคำตอบ และใบรับรองที่สามารถแชร์ได้พร้อม ID ที่ตรวจสอบได้เมื่อคุณผ่านหลักสูตร
สนับสนุนการศึกษา AI ฟรี AI Understanding เป็นองค์กรไม่แสวงหาผลกำไร 501(c)(3) — ไม่มีโฆษณา ไม่มีกำแพงเงิน, ตลอดไป บริจาค
SDXL คือโมเดลการแปลงข้อความเป็นรูปภาพความละเอียดสูงของ Stability AI ที่จับคู่ตัวสร้างฐานอันทรงพลังกับตัวปรับแต่ง ในขณะที่การกระจายแบบเรียงซ้อนเชื่อมโยงหลายโมเดลเพื่อสร้างรูปภาพจากความละเอียดต่ำไปสูง พวกเขาช่วยกันอธิบายว่าโปรแกรมสร้างภาพแบบโอเพ่นซอร์สสมัยใหม่ส่งผลต่อคุณภาพที่เหมือนจริงได้อย่างไร
SDXL สร้างภาพขนาด 1024x1024 โดยธรรมชาติ ซึ่งเป็นพื้นที่ที่ใหญ่กว่า 512x512 ของ Stable Diffusion ดั้งเดิมถึงสี่เท่า
ตัวกลั่นเป็นโมเดลผู้เชี่ยวชาญแยกต่างหากที่ใช้ที่ส่วนท้ายของไปป์ไลน์เพื่อปรับรายละเอียดให้คมชัดขึ้น หลังจากที่โมเดลพื้นฐานสร้างอิมเมจที่แฝงอยู่
SDXL ใช้ตัวเข้ารหัสข้อความสองตัว ได้แก่ OpenCLIP ViT-bigG และ CLIP ViT-L รวมกันเพื่อความเข้าใจที่รวดเร็วยิ่งขึ้น
การกระจายแบบเรียงซ้อนจะเชื่อมโยงตัวสร้างฐานขนาดเล็กที่มีแบบจำลองการแพร่กระจายที่มีความละเอียดสูงสุดตั้งแต่หนึ่งแบบจำลองขึ้นไป โดยแต่ละแบบจำลองจะมีเงื่อนไขตามเอาต์พุตที่มีความละเอียดต่ำกว่าก่อนหน้านี้
VAE บีบอัดภาพลงในพื้นที่แฝงที่เล็กลง ดังนั้นกระบวนการแพร่กระจายจึงมีราคาถูกกว่าการทำงานบนพิกเซลดิบที่มีความละเอียดเต็มมาก
เรียนรู้ต่อไป
คำแนะนำเพิ่มเติมที่เลือกสำหรับหัวข้อนี้
ต่อไปคำแนะนำต่อไป
การปรับแต่งหลายแนวคิดการแพร่กระจายแบบกำหนดเอง
วิชวลเอไอ