SeterusnyaPanduan seterusnya
Penaakulan Rantaian Pemikiran
AI bahasa
PANDUAN AI Bahasa
Rangkaian pemikiran meminta model untuk menghasilkan penaakulan pertengahan sebelum jawapannya.
Dengar panduan iniAI-diceritakan · ~3 min
Ia boleh membantu pada beberapa tugasan berbilang langkah, tetapi penyelidikan menunjukkan kesan berbeza mengikut tugas dan model; untuk beberapa tugasan, pertimbangan tambahan boleh mengurangkan prestasi, menambah kependaman atau tidak memberi manfaat.
Rangkaian pemikiran (CoT) meminta model menulis langkah perantaraan sebelum jawapan terakhirnya. Ia menjadi teknik yang menonjol selepas penyelidikan melaporkan faedah pada penanda aras penaakulan pelbagai langkah terpilih. Tetapi "minta alasan" bukanlah peningkatan sejagat. Kertas ICML 2025 menilai enam tugasan yang diambil daripada kajian psikologi di mana pertimbangan boleh menjejaskan prestasi manusia. Para penyelidik mendapati penurunan ketara berkaitan CoT untuk model terkini pada tiga tugasan, manakala keputusan pada tugasan lain bercampur-campur. Kajian itu memberikan bukti bahawa prestasi boleh jatuh dalam tetapan tertentu; ia tidak menunjukkan bahawa CoT secara amnya merosakkan model atau mengenal pasti satu peraturan yang meramalkan setiap tugas. Langkah bertulis tambahan juga mempunyai kos praktikal: mereka menggunakan ruang keluaran dan mungkin meningkatkan kependaman. Lebih banyak teks boleh memperkenalkan andaian yang tidak disokong bahawa model itu kemudiannya membawa jawapannya. Penjelasan tidak boleh disalah anggap sebagai rekod setia proses dalaman atau bukti bahawa kesimpulan adalah betul. Untuk model penaakulan, nasihat gesaan yang sesuai mungkin berbeza. Sebagai contoh, panduan API semasa OpenAI, sebagai contoh, mengesyorkan untuk mengelakkan arahan "berfikir langkah demi langkah" untuk model penaakulannya, manakala panduan khusus modelnya untuk beberapa model bukan penaakulan mungkin membincangkan pendekatan gesaan yang lain. Ikuti dokumentasi untuk model yang diuji. Pilih berdasarkan bukti daripada tugasan. Bandingkan varian langsung dan CoT pada contoh wakil yang sama, gunakan peraturan pemarkahan yang dipratentukan dan sertakan had kependaman atau token jika ia penting kepada aplikasi. Kekalkan pendekatan hanya apabila ia meningkatkan hasil yang diperlukan tanpa kos yang tidak boleh diterima. Untuk keputusan berkepentingan tinggi, semakan bebas dan semakan pakar lebih penting daripada sama ada model memaparkan penjelasan. Elakkan menganggap bahawa rasional yang lebih panjang sememangnya lebih telus, boleh dipercayai atau selamat.
Sebuah pasukan membandingkan jawapan langsung dengan gesaan langkah demi langkah pada satu set tugas pengelasan pendeknya sendiri sebelum menerima pakai lalai.
Perkhidmatan kependaman rendah menguji sama ada penjelasan tambahan mengubah ketepatan yang cukup untuk mewajarkan masa tindak balas tambahan.
Penyelidik menggunakan penilaian yang diterbitkan untuk mengenal pasti jenis tugas yang prestasi model tertentu menurun di bawah gesaan rantaian pemikiran.
Pengarang segera menguji model penaakulan OpenAI mengikut saranan pembekal untuk tidak meminta rantaian pemikiran, kemudian menilai respons terhadap kriteria tugas.
Penyelidikan akan terus mengenal pasti gabungan tugas dan model yang mendapat manfaat daripada teks perantaraan yang jelas dan yang tidak. Produk berkemampuan penaakulan juga mungkin mendedahkan kawalan khusus model yang menjadikan resipi segera yang lebih lama kurang relevan. Pasukan harus memastikan keputusan penilaian terikat dengan versi dan data, dan menjalankan semula perbandingan apabila mana-mana perubahan. Prinsip yang stabil adalah untuk menguji teknik segera terhadap tugas dan bukannya menganggapnya sebagai lalai sejagat. Itu menjadikan penemuan terikat dengan penggunaan sebenar dan bukannya spekulasi luas.
Newsletter percuma
Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.
Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.
Uji diri anda
Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.
Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma
Rangkaian pemikiran meminta model untuk menghasilkan penaakulan pertengahan sebelum jawapannya. Ia boleh membantu pada beberapa tugasan berbilang langkah, tetapi penyelidikan menunjukkan kesan berbeza mengikut tugas dan model; untuk beberapa tugasan, pertimbangan tambahan boleh mengurangkan prestasi, menambah kependaman atau tidak memberi manfaat.
Panduan mentakrifkan CoT sebagai meminta penaakulan pertengahan sebelum jawapan akhir.
Kertas itu melaporkan penurunan ketara untuk model pada tiga daripada enam tugasan dan hasil bercampur-campur pada yang lain.
Panduan ini menekankan bahawa penemuan enam tugasan kertas itu adalah terhad dan tidak membuktikan bahaya umum.
Panduan menyatakan bahawa langkah bertulis menggunakan ruang output dan boleh meningkatkan masa tindak balas.
Panduan memberi amaran supaya tidak menganggap penjelasan sebagai bukti ketepatan atau alasan dalaman yang setia.
Teruskan belajar
Lebih banyak panduan dipilih untuk topik ini
SeterusnyaPanduan seterusnya
Penaakulan Rantaian Pemikiran
AI bahasa