Für ein Kontaktformular sollte man eine Mailadresse nehmen, die man wegschmeissen kann.

Dann stellt sich ja die Frage, hast du das Plugin gelöscht oder was hast du genau gemacht? Um den ganzen Sachverhalt ganz genau beurteilen zu können, müsste man sich das Plugin bzw. die Installation ansehen.

Damit du den Spam los wirst: Plugin ganz deinstallieren und Mailadresse wegschmeissen.