PANDUAN AI Bahasa

Teks Dijana LLM Penanda Air

Penanda air teks menyembunyikan isyarat statistik dalam perkataan yang dipilih oleh model bahasa, jadi pengesan yang memegang kunci rahsia kemudiannya boleh memberitahu bahawa petikan datang daripada model itu.

Dengar panduan iniAI-diceritakan · ~8 min

Pada halaman ini9 min dibaca
  1. Gambaran keseluruhan
  2. Pengambilan utama
  3. Menyelam dalam
  4. Mengira skor pengesanan senarai hijau dengan tangan
  5. Pelaksanaan Dunia Sebenar
  6. Masa Depan Teks Dijana LLM Penanda Air
  7. Mempraktikkannya
  8. Sumber dan bacaan lanjut
  9. Teruskan Meneroka
  10. Soalan lazim

Gambaran keseluruhan

Ini penting kerana Akta AI EU kini memerlukan penandaan teks yang dijana AI yang boleh dibaca mesin, dan Google, OpenAI dan lain-lain telah menggunakan skema, namun pengulangan, terjemahan dan petikan pendek masih melemahkan pengesanan.

Pengambilan utama

  1. Tera air teks berat sebelah pilihan perkataan model bahasa dengan kunci rahsia supaya pengesan kemudian boleh menguji sama ada teks datang daripada model tersebut.
  2. Tera air senarai hijau Maryland 2023 mengesan kira-kira 98.4% daripada sampel 200 token pada ambang z-skor 4.
  3. SynthID-Text Google DeepMind, diterbitkan dalam Nature pada Oktober 2024, telah diuji pada kira-kira 20 juta respons Gemini tanpa kehilangan kualiti yang boleh diukur.
  4. Artikel 50(2) Akta AI EU memerlukan penandaan yang boleh dibaca mesin bagi teks jana AI mulai 2 Ogos 2026, jika boleh dilaksanakan secara teknikal.
  5. Parafrasa, terjemahan, petikan pendek dan jawapan entropi rendah semuanya melemahkan pengesanan, dan tera air yang hilang tidak membuktikan kepengarangan manusia.

Menyelam dalam

A text watermark is a hidden pattern placed in machine-generated writing at the moment it is produced, so that software can later recognize the text as coming from a particular model. Unlike a visible label, it is invisible to readers and survives copy and paste because it lives in the choice of words themselves. It differs from AI text detectors that guess authorship from style, which have a poor record: OpenAI shut down its own AI text classifier in 2023 because of its low accuracy, according to TechCrunch. A watermark instead gives a statistical test with a known false positive rate, but only for text from a model that used that watermark with that key.

The idea works because language models generate text one token, a word or word piece, at a time by sampling from a probability distribution over their vocabulary. Often several next tokens are almost equally good, and the model has freedom in which it picks. A watermark uses that freedom. A secret key and the preceding tokens feed a pseudorandom function, which nudges the choice toward a hidden subset of tokens or a hidden ranking. To a reader the text reads normally. To a detector with the key, the text shows far more of the favored choices than chance would predict.

The best-known public scheme came from John Kirchenbauer, Jonas Geiping, Yuxin Wen, Jonathan Katz, Ian Miers and Tom Goldstein at the University of Maryland in January 2023. At each step, the previous token seeds a random number generator that splits the vocabulary into a green list and a red list. In the soft version, the model adds a constant bias, delta, to the scores of green tokens before sampling, so green words become more likely without being forced. Detection counts green tokens and computes a z-score, a measure of how many standard deviations the count is above what unwatermarked text would show. With half the vocabulary green, a bias of 2 and a threshold of z = 4, about 98.4% of 200-token samples from the OPT-1.3B model were detected, and the paper reported no false positives in its runs. A z threshold of 4 corresponds to a false positive rate of about 3 in 100,000.

Google DeepMind's SynthID-Text, published in Nature on October 23, 2024 by Dathathri and colleagues, uses a different mechanism called tournament sampling. The model proposes several candidate tokens, which compete in a knockout tournament over 30 layers by default, with winners decided by pseudorandom g-values derived from the secret key and the previous four tokens. A non-distortionary setting preserves text quality, while a distortionary one trades some quality for stronger detection. The paper reports that the non-distortionary version beat Gumbel sampling, another published scheme, on detectability, especially at low entropy, and added only 0.57% latency per token on Gemma 7B. SynthID-Text had been rolled out to the Gemini app and web experience, as Google DeepMind announced in May 2024, and its code was open-sourced.

Adoption accelerated with regulation. Article 50(2) of the EU AI Act requires providers of AI systems that generate synthetic text, images, audio or video to mark outputs in a machine-readable format so they are detectable as artificially generated, with solutions that are effective, interoperable, robust and reliable as far as technically feasible; it applies from August 2, 2026. OpenAI had built a text watermark by 2024 but held back; in August 2024 it told TechCrunch it was taking a deliberate approach because of circumvention risks and possible unfair effects on non-English speakers. In October 2026 TechCrunch reported that OpenAI would watermark ChatGPT and Codex text in the EU, using a method its technical report calls textGrain, and that Anthropic had announced in August 2026 that it would watermark Claude's text worldwide.

Compared with alternatives, watermarking has clear strengths and limits. Post-hoc detectors need no cooperation from the model provider but are unreliable. Watermarks travel with the words but only cover providers who adopt them; the SynthID paper notes that watermarking requires coordination among providers and is hard to enforce on open-source models that anyone can run without it.

The failure modes are well documented. Low-entropy text, where only one answer is reasonable, such as the capital of France or a math result, leaves little room to embed a signal; Google's blog names factual prompts as a weak case, and TechCrunch's account of OpenAI's report names math answers. Short passages give too few tokens for a confident test. Paraphrasing and translation scramble the pattern: OpenAI's own test, reported by TechCrunch, found that replacing 10% of words with synonyms dropped detection from about 92% to 66%. The Maryland group's 2023 reliability study found watermarks remained detectable after strong human paraphrasing, but only at around 800 tokens. Attackers can also try to steal the pattern and spoof it onto human text, or scrub it out, threats the SynthID paper lists. And absence of a watermark proves nothing, as OpenAI states.

In practice, a provider adds watermarking at the sampling step, with no retraining, and must protect its keys; Google's reference code warns that its random number generator is not a vetted cryptographic primitive and offers no cryptographic security guarantees. Detection needs the key, so access is usually restricted, as with OpenAI's initial limit to approved researchers and expert organizations. Anyone using a detector result for decisions about people, such as students, should treat it as one piece of evidence with a stated false positive rate, never as proof.

04Contoh yang dikerjakan

Mengira skor pengesanan senarai hijau dengan tangan

  1. Andaikan tera air dengan gamma pecahan senarai hijau = 0.5 dan ambang pengesanan z = 4.

  2. Ambil petikan 200 token dan anggap pengesan, menggunakan kekunci, menemui 140 daripada token dalam senarai hijau mereka.

  3. Kira kiraan hijau yang dijangkakan untuk teks manusia: 0.5 kali 200 = 100.

  4. Kira sisihan piawai: punca kuasa dua 200 darab 0.5 darab 0.5, iaitu kira-kira 7.07.

  5. Hitung z = (140 - 100) / 7.07, iaitu kira-kira 5.66, di atas ambang 4.

  6. Ulangi untuk petikan 50 token dengan 35 token hijau: z = (35 - 25) / 3.54, kira-kira 2.83, di bawah ambang.

Apa yang ditunjukkan

Petikan 200 token dibenderakan sebagai tera air dan petikan 50 token tidak, walaupun kedua-duanya mempunyai kadar hijau 70% yang sama. Ini menunjukkan sebab teks yang lebih panjang memberikan pengesanan yang lebih yakin; semak dengan mengira semula z dengan kiraan anda sendiri.

Pelaksanaan Dunia Sebenar

Google DeepMind SynthID-Text tera air keluaran Gemini; makalah Nature 2024 melaporkan ujian langsung ke atas kira-kira 20 juta respons Gemini tanpa perubahan ketara dalam kadar suka atau tidak suka pengguna.

Pembangun menambahkan penanda air SynthID untuk membuka model melalui pelaksanaan rujukan Apache-2.0 Google DeepMind, yang membungkus kelas Hugging Face Gemma dan GPT-2 serta menghantar pengesan frekuensi yang mengembalikan nilai p yang tepat.

OpenAI tera air teks ChatGPT dan Codex untuk pengguna di Kesatuan Eropah mulai Oktober 2026 untuk mematuhi Akta AI EU, dengan tera air ikut serta untuk model API terpilih di seluruh dunia, setiap TechCrunch.

Penyelidik menguji kekukuhan dengan tera air senarai hijau Universiti Maryland, yang susulannya pada 2023 mendapati tera air masih dapat dikesan selepas manusia menguraikan secara kuat pada kira-kira 800 token dengan kadar positif palsu satu dalam 100,000.

Kewajipan pemetaan pasukan pematuhan di bawah Perkara 50(2) Akta AI EU, yang memerlukan penyedia sistem yang menjana teks sintetik untuk menandai output dalam format yang boleh dibaca mesin dan boleh dikesan jika boleh dilaksanakan secara teknikal.

Masa Depan Teks Dijana LLM Penanda Air

Beberapa utas boleh dilihat dalam sumber dari 2023 hingga 2026. Kekukuhan ialah masalah teknikal utama: kajian ICLR 2024 kumpulan Maryland menunjukkan pengesanan bertahan dengan menguraikan ayat hanya dengan petikan yang panjang, dan laporan OpenAI Oktober 2026 mendapati bahawa menggantikan 9% perkataan dengan perkataan yang digantikan dengan kira-kira 9% 66%. Keselamatan adalah yang kedua: pengarang SynthID menyenaraikan serangan mencuri, menipu dan menyental, dan kod rujukan Google menafikan jaminan kriptografi. Liputan adalah satu pertiga, kerana tera air hanya menandakan teks daripada pembekal yang menggunakannya; Perkara 50 Akta AI EU, yang diguna pakai mulai 2 Ogos 2026, mendorong penyedia utama untuk menandakan pengeluaran, dan TechCrunch melaporkan bahawa Anthropic, Google, Meta, Microsoft dan OpenAI komited kepada kod amalan EU-generasi kandungan. Saling kendali tidak dapat diselesaikan, kerana pengesan setiap syarikat pada masa ini hanya mengenali tera airnya sendiri. Penggunaan saksama pengesan dalam pendidikan dan pengambilan pekerja masih dipertikaikan, memandangkan kebimbangan OpenAI yang dibangkitkan pada tahun 2024 tentang kesan ke atas penutur bukan bahasa Inggeris. Sama ada standard yang dikongsi untuk tera air teks akan muncul ialah persoalan terbuka.

Mempraktikkannya

Mengapa ia penting

  • Kelajuan dan skala. Aliran kerja bahasa boleh bergerak lebih pantas tanpa mengorbankan konsistensi.
  • Akses dan capai. Ia meluaskan akses merentas bahasa dan gaya komunikasi.
  • Keputusan yang lebih jelas. Pasukan boleh menghabiskan lebih banyak masa untuk membuat pertimbangan manakala automasi mengendalikan pengulangan.

Berhati-hati untuk

  • Fakta halusinasi boleh memasukkan laporan, aliran sokongan atau hasil penyelidikan secara senyap-senyap.
  • Sensitiviti segera boleh mencipta hasil yang tidak konsisten merentas permintaan yang serupa.
  • Data teks sensitif mungkin terdedah jika kawalan akses lemah.

Langkah seterusnya

  1. Tentukan format output, nada dan standard kualiti sebelum pelancaran.
  2. Respons asas dengan sumber yang dipercayai apabila ketepatan penting.
  3. Simpan pusat pemeriksaan semakan manusia untuk output berkepentingan tinggi.
  4. Jejaki corak kegagalan dan latih semula gesaan atau aliran kerja dengan kerap.

Sumber dan bacaan lanjut

  1. arXivTera Air untuk Model Bahasa Besar
  2. arXiv (ICLR 2024)Mengenai Kebolehpercayaan Tera Air untuk Model Bahasa Besar
  3. Nature (via PubMed Central)Penanda air berskala untuk mengenal pasti output model bahasa yang besar
  4. GitHub (Google DeepMind)google-deepmind/synthid-text
  5. Google DeepMindMenanda air teks dan video yang dijana AI dengan SynthID
  6. EU Artificial Intelligence Act (Future of Life Institute)Artikel 50: Kewajipan Ketelusan untuk Penyedia dan Penyebar Sistem AI Tertentu
  7. TechCrunchOpenAI berkata ia mengambil 'pendekatan sengaja' untuk mengeluarkan alat yang boleh mengesan tulisan daripada ChatGPT
  8. TechCrunchOpenAI akan mula menanda air teks ChatGPT di EU

Teruskan Meneroka

Newsletter percuma

Dapatkan taklimat AI harian

Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.

Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.

Uji diri anda

Ambil kuiz Teks Dijana LLM Penanda Air

Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.

Mulakan kuiz

Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma

Soalan lazim

Apakah Teks Dijana LLM Penanda Air?

Penanda air teks menyembunyikan isyarat statistik dalam perkataan yang dipilih oleh model bahasa, jadi pengesan yang memegang kunci rahsia kemudiannya boleh memberitahu bahawa petikan datang daripada model itu. Ini penting kerana Akta AI EU kini memerlukan penandaan teks yang dijana AI yang boleh dibaca mesin, dan Google, OpenAI dan lain-lain telah menggunakan skema, namun pengulangan, terjemahan dan petikan pendek masih melemahkan pengesanan.

Bagaimanakah tera air senarai hijau lembut dalam skim yang disebut mempengaruhi penjanaan token?

Skim ini mempromosikan token terpilih secara lembut sambil mengekalkan kemungkinan keluaran bukan hijau.

Apakah yang mesti sepadan apabila menggunakan pengesan untuk tera air token hijau yang dikunci?

Pelaksanaan yang diuji mesti menghasilkan semula partitionnya; parameter model asal tidak semestinya diperlukan.

Mengapakah petikan yang lebih panjang boleh memberikan lebih banyak bukti untuk tera air teks statistik?

Panjang adalah satu faktor; output terhad, konteks berulang dan skema juga penting.

Tera air teks yang diterbitkan manakah menggunakan pensampelan kejohanan dan didokumenkan untuk teks Gemini?

Penyelidikan dan laporan rasmi Google menerangkan kaedah yang dinamakan, berbeza daripada setiap tera air lain.

Apakah cara yang diketahui untuk melemahkan atau mengalih keluar tera air teks?

Oleh kerana banyak tera air hidup dalam pilihan token permukaan, parafrasa, terjemahan atau pengeditan boleh mengganggu corak token hijau.