In der Studie wurden Zielgenauigkeit und Schreibweise getrennt: personalisiert oder generisch, von einem Sprachmodell oder von Menschen erstellt. Bei personalisierten KI-Mails klickten 330 von 3.177 zugestellten Empfängern. Generische KI-Mails kamen auf 65 von 1.735 zugestellten Nachrichten. Handgeschriebene Spear-Mails erreichten 24 von 99 Empfängern.
Für die Personalisierung sammelten kleine Modelle über Ollama Informationen zur Zieladresse, erstellten ein Profil, wählten eine Absenderidentität und formulierten die Mail. Die Autoren kalkulieren rund 120 Dollar für 4.010 personalisierte Nachrichten, einschließlich Suche, Rechenzeit und Erstellung. Das entspricht weniger als 0,03 Dollar je Mail.
Der kommerzielle Spamfilter und das Unified-Threat-Management-System der Universität markierten nur eine von 3.949 Nachrichten. Die Studie lief im Rahmen einer Phishing-Schulung an der TU Braunschweig; Teilnehmende wussten, dass eine Kampagne bevorstand, nicht aber wann. Die Autoren rechnen deshalb mit einer eher unterschätzten Klickrate.
Gemessen wurde eine Universität, nicht die gesamte Arbeitswelt. Der Filterhersteller wird nicht genannt, Code und Daten werden aus Missbrauchs- und Datenschutzgründen nicht veröffentlicht. Die Raten stammen aus der Studie und sind nicht an einer zweiten Einrichtung wiederholt.