SelanjutnyaPanduan berikutnya
Generasi Gambar-ke-Video
AI visual
PANDUAN AI Visual
Model gambar autoregresif menghasilkan rangkaian token visual satu per satu, mengkondisikan setiap token berikutnya pada token sebelumnya dan perintah teks apa pun.
Dengarkan panduan iniDiceritakan oleh AI · ~2 min
This sequential procedure differs from masked parallel decoding.
PixelRNN/PixelCNN model conditional distributions over pixels in an ordered raster sequence. The original DALL·E work instead uses a discrete VAE to represent images as tokens and trains an autoregressive Transformer on text and image tokens; its paper reports a 250-million image-text-pair dataset. Such models sample tokens sequentially. MaskGIT uses a different masked-token iterative decoding approach to predict multiple tokens in parallel.
PixelCNN and PixelRNN model image pixels autoregressively in their published image-generation studies.
The original DALL·E paper tokenizes images with a discrete variational autoencoder before sequence modeling.
A causal attention mask prevents a Transformer decoder from using future image tokens during autoregressive prediction.
MaskGIT is a separate masked-token method that iteratively predicts many image tokens in parallel.
Compare autoregressive and parallel masked-image methods using matched image quality, compute and sampling conditions. Evaluate prompt alignment and artifacts on the intended domain. The cited papers establish their own architectures and experiments, not a universal winner or future deployment trend.
Buletin gratis
Tiga cerita AI terverifikasi setiap pagi hari kerja, ditulis dalam bahasa Inggris sederhana. Gratis selamanya, tanpa iklan.
Satu email setiap hari kerja. Berhenti berlangganan dalam satu klik. Kami tidak pernah menjual atau membagikan alamat Anda.
Uji diri Anda sendiri
Umpan balik instan untuk setiap jawaban, dan sertifikat yang dapat dibagikan dengan ID yang dapat diverifikasi setelah Anda lulus kursus.
Mendukung pendidikan AI gratis. AI Understanding adalah organisasi nirlaba 501(c)(3) — tanpa iklan, tanpa paywall, selamanya. Berikan sumbangan
Autoregressive image models generate a sequence of visual tokens one at a time, conditioning each next token on earlier tokens and any text prompt. This sequential procedure differs from masked parallel decoding.
Model autoregresif memfaktorkan gambar sebagai suatu urutan, memprediksi setiap token atau piksel berdasarkan semua elemen yang dihasilkan sebelumnya.
Sistem modern memampatkan gambar menjadi token terpisah (seringkali melalui encoder gaya VQ-VAE), kemudian memprediksi urutan token tersebut dengan Transformer.
PixelRNN dan PixelCNN memelopori model autoregresif yang memindai dan memprediksi gambar piksel demi piksel.
Penyembunyian kausal menghalangi setiap posisi untuk memperhatikan token masa depan, sehingga memaksakan faktorisasi kiri ke kanan.
Karena setiap token bergantung pada token sebelumnya, inferensi harus dijalankan token demi token, sehingga pembuatannya relatif lambat.
Teruslah belajar
Panduan lainnya dipilih untuk topik ini
SelanjutnyaPanduan berikutnya
Generasi Gambar-ke-Video
AI visual