Auch mein Smartphone (XIAOMI) lasst sich nicht mit dem 2,4 GHz Netzwerk verbinden.
Dann ist es zumindest ja kein Windows-Thema.
Wenn das Gastnetzwerk nur auf 5 GHz aktiv ist und das normale Netzwerk nur auf 2,4 GHz, dann ist da offenbar in den Einstellungen der Fritz!Box schon einiges verdreht worden, denn normal ist solch eine Konfiguration eher nicht.
Schau in der Fritz!Box, dass Autokanal OHNE die Kanäle 12 und 13 im 2,4 GHz Band aktiv ist.
Stell ein, dass beide Netze auf beiden Kanälen verfügbar sind, damit die Geräte, die es können, sauber zwischen 2,4 und 5 GHz wechseln können.
Bei weiteren Fragen zur Konfiguration deiner Fritz!Box schau am besten bei AVM selbst vorbei.