Prompt engineering per criminali informatici

News Recenti

Prompt engineering per criminali informatici

Gen 20, 2023 Dario Orlandi News, Opinioni, RSS, Scenario, Social engineering, Tecnologia 0

L’accesso a modelli di intelligenza artificiale capaci di generare testi verosimili in pochi secondi rappresenta un punto di svolta nella storia umana.

Ma questa tecnologia è anche una nuova arma che si aggiunge all’arsenale della criminalità informatica, come ha dimostrato la ricerca Creatively malicious prompt engineering, pubblicata da WithSecure (precedentemente nota come F-Secure Business).

La ricerca descrive una serie di esperimenti condotti utilizzando modelli di linguaggio GPT-3 per generare testo dannoso attraverso il prompt engineering.

Gli esperimenti hanno valutato come le modifiche negli input influiscano sull’output del testo sintetico e hanno riguardato phishing, molestie, truffe, appropriazione di uno stile scritto, creazione di opinioni divisive e notizie false.

L’obiettivo è identificare come la generazione del linguaggio AI possa essere utilizzata in modo improprio, per migliorare la sicurezza dei modelli linguistici futuri.

Umano oppure no?

Andy Patel, il ricercatore di WithSecure Intelligence che ha guidato la ricerca, ha dichiarato: “Il fatto che chiunque abbia una connessione Internet possa ora accedere a potenti modelli linguistici di grandi dimensioni ha una conseguenza molto pratica: ora è ragionevole supporre che qualsiasi nuova comunicazione ricevuta possa essere stata scritta con l’aiuto di un sistema automatico”.

Andy Patel, ricercatore di WithSecure

Le risposte fornite dai modelli GPT-3 hanno portato i ricercatori a individuare alcune conclusioni riguardo all’uso di queste tecnologie. WithSecure prevede innanzi tutto un aumento nello sviluppo dell’ingegneria dei prompt e nella creazione di prompt dannosi, con una maggiore abilità degli avversari nell’utilizzare modelli linguistici di grandi dimensioni in modi imprevedibili.

Per contro, i gestori delle piattaforme di comunicazione avranno più difficoltà nell’identificare contenuti offensivi e i criminali informatici potranno rendere più efficaci le loro comunicazioni mirate in un attacco.

“Abbiamo iniziato questa ricerca prima che ChatGPT rendesse la tecnologia GPT-3 disponibile a tutti. Questa novità ha aumentato i nostri sforzi e l’urgenza dell’analisi. Perché, in una certa misura, ora siamo tutti Blade Runner, che cercano di capire se l’intelligenza con cui abbiamo a che fare è reale o artificiale”, ha concluso Patel.

Condividi l'articolo