WLAN verbunden, aber kein Internet - woran liegt es, was tun?

Pünktlich zu den Olympischen Spielen, bei denen ich mir gerne diverse Livestreams ansehen möchte, geht das W-LAN nicht.

Meldung: "Mit Gerät verbunden. Internetverbindung nicht möglich". Angezeigt wird das W-LAN-Symbol mit guter Verbindungsstärke, aber einem Ausrufezeichen, das auf die Störung hinweist.

Es sind alle Geräte in der Wohnung, auch das Smart-TV betroffen. Ich habe zuvor nichts an meinem Router oder den Einstellungen der Geräte verändert, meine Fritzbox aber nach der Störung, wie empfohlen, von der Steckdose getrennt und neu gestartet. Nützt nichts.

Liegt das Problem also beim Internet-Anbieter und ich kann selbst nichts machen? Oder wie kann ich es selbst beheben?