Soo, es ist gelöst.
Ich musste einen Benutzer für MQTT Anlegen und HA dann neu booten.
Danach konnte ich in der Integration den MQTT Broker konfigurieren, wobei sofort alle Steckdosen aufgetaucht sind.
Jetzt kann ich diese auch im Energie-Dashboard auswählen und bin genau da, wo ich hin wollte.