Apa itu prompt injection?

Injeksi prompt adalah ketika teks yang dibaca agen mengandung instruksi, dan agen mengikutinya.

Navid Moazzezby Navid MoazzezUpdated Sept. 12, 20261 min read
~/ai-glossary
$ glossary
3 of 10 in #when-it-goes-wrong

Halaman web, email, file. Agen tidak dapat secara andal membedakan instruksi Anda dari instruksi yang tertanam dalam sesuatu yang diminta untuk dibaca.

Ini adalah alasan sebenarnya mengapa agen dengan izin luas itu berbahaya. Bukan karena ia menjadi nakal. Tapi karena orang lain bisa memberitahunya apa yang harus dilakukan.