Nog even een heel late reactie over hoe ik het opgelost heb:
Uiteindelijk heb ik een Ziggo "extra WiFi punt" router gekocht en deze geflashed met ddwrt firmware.
Deze tweede router bedraad op de connectbox aangesloten als extra AP. En hier wilden alle ESP's wel mee verbinden.
Nu heb ik dus op de begane grond de connectbox in de meterkast en op zolder de tweede router. Beide dezelfde SSID van het 2.4GHz netwerk.
Opvallend is dat van de 3 ESP's in de woonkamer (begane grond), er twee enkel met de router op zolder willen verbinden (wat net aan lukt qua signaalsterkte -70 a -75dBi). En eentje wel de met de connectbox verbindt en -25 a -30dBi aangeeft.
Dit lijkt overeen te komen met een ander topic waar de topicstarter ook meerdere ESP's had waarvan sommigen wel en anderen niet met de connectbox verbonden.
Samengevat: Het verbindingsprobleem is nog steeds niet opgelost, maar op deze manier heb in tenminste een omweg waardoor het werkt.