Die Lösung

In Systemeinstellungen > Allgemein > Teilen muss bei Entfernte Verwaltung und bei Entfernte Anmeldung der entsprechende Benutzer bei "Nur diese Benutzer" eingetragen werden.
Zumindest hier (macOS 13.2.1) muss ich mich dann nur noch einmal mit PW anmelden