Okay,
ich hab mal etwas rumexperimentiert - wenn ich die Java JRE direkt herunterlade und nicht die mitgelieferte Version nutze:
https://www.java.com/en/download/

"If you are running on an M series system (ARM64), download the ARM64 version of the JRE "

Bitte dringend den Hinweis beachten.

Im Anschluss hab ich dann den Standard Path für Java mit folgenden befehlen im Terminal angepasst:

echo "export JAVA_HOME=/opt/homebrew/opt/openjdk" >> ~/.zshenv

echo "export PATH="/opt/homebrew/opt/openjdk/bin:$PATH"" >> ~/.zshenv

source ~/.zshenv


und mit

java -version

die Java Version einmal überprüfen

Im Anschluss sollte man keine Probleme mehr mit den Popup Fenstern o.ä. haben. Auch am Mac mit M-Chip. :)