Connect-Box rebootet bei Aufruf von wetter.orf.at

[gunnar]

Das Szenario ist folgendes: Connect-Box CH7465LG-LC im IPv6 DS-Lite Modus, ein Windows 10 v20H2 PC über Ethernet angeschlossen.

 

Am PC laufen unterschiedliche Webbrowser, einer davon Microsoft Edge Beta 91.0.864.27 (das ist die derzeit am 16.05.2021 aktuelle Version).

 

Fakt ist: Wenn ich https://wetter.orf.at/oes/ aufrufe bricht die Internet-Verbindung ab (WebSite lädt bereits nicht mehr fertig, einige Grafiken fehlen noch) und einen Moment später rebootet das Modem.

 

Im Modem-Log findet sich danach lediglich Cable Modem Reboot - due to power reset, keine sonstigen Hinweise.

 

Gut, nun könnte man annehmen das Modem wäre defekt, aber nun kommts: Ich habe das Modem bereits ausgetauscht, habe nun das gleiche Modell wieder (Connect-Box CH7465LG-LC, diesmal mit "T"-Logo statt UPC-Logo an der Gehäusefront) erhalten. Problem weiterhin vorhanden.

 

Mit anderen Browsern wie Chrome, Firefox, Microsoft Edge Stable (also nicht Beta) etc... tritt das Problem nicht auf.

Nun da ich endlich draufgekommen bin was das Problem auslöst kann ich es einfach vermeiden - muss ja nicht mit Edge Beta 91.0.864.27 auf der ORF-Website das Wetter anschauen, aber da kommt man nun mal nicht so schnell drauf was die Ursache ist. Ich dachte ja tagelang bis zum Modem-Tausch es muss sich um ein Hardware-Problem am Modem handeln, erst als das Problem mit neuem Modem wieder auftrat ist mir der Zusammenhang mit dem ORF-Wetter aufgefallen und habe dies dann zahlreiche male verifiziert - hätte ich nicht für möglich gehalten. Andere problematische Website-Aufrufe sind mir noch nicht aufgefallen - solange ich nicht das ORF-Wetter abrufe läuft alles stabil und Modem-Signalwerte sowie Speedtest alles im optimalen Bereich.

 

Ausschalten der IPv6 Firewall am Modem sowie U-PNP deaktivieren ändert nichts am Verhalten.

Modem-Firmware-Update hat das Problem nicht behoben, ursprünglich war CH7465LG-NCIP-6.12.18.25-2p6-NOSH drauf, nach Update auf CH7465LG-NCIP-6.12.18.26-3p7-1-NOSH aber immer noch das gleiche Verhalten.

 

Ein Wireshark-Dump hat mich bei der Analyse bislang auch nicht weiter gebracht. Ich gehe angesichts dieser Erkenntnisse davon aus, dass es sich hier um ein Firmware-Problem des Modems bei der Analyse von IPv6 Traffic handeln muss.

 

Also, wenn euer Modem auch plötzlich rebootet und sich im Log nur "Cable Modem Reboot - due to power reset" findet, dann behaltet mal im Auge ob das mit den gleichen Website-Aufrufen die ihr unmittelbar vor dem Reboot geladen habt vielleicht auch reproduzierbar ist. 

[gunnar]

Ich kann das Problem inzwischen auf beliebigen Windows-Geräten und auch unter Linux jederzeit zeigen, in meinem Blog-Beitrag beschreibe ich die Hintergründe und nötige Konfigurationsänderung:

UPC/Magenta Connect-Box rebootet bei Aufruf von wetter.orf.at – Blog von Gunnar Haslinger (hitco.at)

 

Bearbeitet Mai 22, 2021 von gunnar

[Jonathan Dorian]

Hallo @ Gunnar,

 

danke für deine vielen Infos zu diesem Thema. Unsere Technikerinnen und Techniker haben die Infos an den Modemhersteller weitergeleitet. Ich bitte dich in diesem Fall auch ein Feedback an die Anbieter der Browser zu richten, damit auch diese der Ursache auf den Grund gehen können. Halte uns hier gerne zu dem Thema am Laufenden. Liebe Grüße, Jonathan

[Jonathan Dorian]

Hallo @gunnar,

 

ich habe soeben nachgefragt, ob es schon News dazu gibt. Sobald ich etwas weiß, gebe ich natürlich Bescheid. Liebe Grüße, Jonathan

[Ralf M]

hi gunnar et al,

 

wie schon mal erwähnt geht's mir gleich wie @Gojo. zwar kann ich mit setzen der niedrigeren portrange erzwingen, dass das modem praktisch jedesmal wenn ich auf orf.at F5 drücke crasht; aber selbst in der hohen portrange passiert das 1-2x täglich. nachdem sich firmwareseitig ja nix tut hoffe ich jetzt auch auf die neue chrome release. danke nochmal für die analyse, immerhin hab ich vermeiden können die stichleitung tauschen lassen .......

[gunnar]

Also, Status-Update: Google Chrome 91.0.4472.77 ist nun dem Beta-Stadium entwachsen, wird seit 25.05.2021 21:00 als reguläres Google Chrome Online-Update verteilt. Problem damit - wie befürchtet - vorhanden. Könnte ab morgen also mehr Anwender geben, die mit dem Problem kämpfen. Microsoft Edge v91 ist auch noch für diese Woche angekündigt.

Magenta hat sich heute bei mir gemeldet und mitgeteilt "wir schauen uns das an". Seitdem keine Rückmeldung mehr.

 

Habe meinen Blog-Post mit den neuen Informationen aktualisiert.

 

Bearbeitet Mai 25, 2021 von gunnar

[Christian_E]

SNMP auch in den späteren Versionen (V2) ist schon klar ein Sicherheitsthema.
Haben wir in der Firma schon komplett deaktiviert.

[Karo]

Hallo zusammen, 

die Herstellerfirma des Modems arbeitet daran. Ein größeres Update bzw. News können wir aktuell noch nicht geben. LG Karo

[Karo]

Hi @Gojo, das ist wirklich schwer zu sagen. Sei aber versichert, dass daran gearbeitet wird. LG Karo

[interessierter_user]

Hallo allerseits,

 

ich darf mich an dieser Stelle mit einem kurzen Erfahrungsbericht beteiligen:

 

Seit ca. Juni hatte ich hier mit täglichen unregelmäßigen Internetausfällen zu kämpfen. Nach (gefühlt hunderten) ca. 25 Support-Konversationen über den Zeitraum von mehreren Monaten mit dem technischen Kundenservice ist folgende Historie entstanden:

1. Erste paar Anrufe nach 10 Ausfällen: Ich soll das mal weiter Beobachten und mich nochmals melden.
2. Nach weiteren Ausfällen: Sie starten eine Analyse und ich bekomme ich 3-5 Tagen eine Rückmeldung.
3. Rückmeldung des "Technischen Experten": Alles in Bester Ordnung, Verbindung ideal.
4. Nach weiteren Ausfällen: Ein paar sinnlose Telefonate und dann die Conclusio, dass ich das Modem im nächsten Magenta Shop ausgetauscht bekomme. 
5. Nach Austausch des Modems, weiteren Ausfällen und weiteren Telefonaten: Techniker kommt vorbei.
6. Techniker war da: COAX Stichleitung von Stiegenhaus zum Anschlusspunkt in Wohnung ist alt und stellt definitiv das Problem dar. Kosten Austausch: ca. 100€.
7. Nach Austausch der COAX Stichleitung (durch lokales IT / Elektrounternehmen) und weiteren Problemen: Massive Diskussion mit Kundenservice: Mit meinem "eigenen" neuen Kabel geht das nicht, ich muss die (gerade durch Experten getauschte) Leitung jetzt nochmal durch Magenta austauschen lassen, ansonsten wird mir nicht mehr weiter geholfen. Der Kundenservice-Mitarbeiter hat mir definitiv versichern können, dass seine Analyse zeigt, dass mein COAX Kabel schuld ist. 
8. Danach hat es mir gereicht, habe im Internet recherchiert, bin irgendwann auf die Log Files vom Router gestoßen und habe nach weiterer Suche mit der Fehlermeldung diesen Thread gefunden.

 

Conclusio: Nach dem Workaround, der im Blog top beschrieben ist funktioniert es ausgezeichnet. Vielen Dank dafür. Ich weiß nicht wieso diese Werte bei meinem PC nicht den "Standard" Werten entsprechen, Visual Studio habe ich jedenfalls keins.

 

Licht am Ende des Tunnels: Anscheinend hat das Chromium Team das problematische Release zurückgerollt - in der aktuellen daily Version von Chromium ist das Problem behoben - damit hoffentlich auch im nächsten (größeren ?) Release von Edge und Chrome.

 

Apell an Magenta: Bitte gebt Euren Kundendienstmitarbeitern die Info an die Hand, wie dieses Problem zu lösen ist - da hätten sich viele Leute viel unnötige Arbeitszeit (und damit Geld...) sparen können. Besonders die Support-Aussage in Punkt 7 finde ich absolut unhaltbar für einen technischen Support von Magenta. 

[gunnar]

@Gojo interessant, dass es bei Dir nicht wirkt. Welches Betriebssystem / Version, welcher Browser / Version?

 

Im Chromium Projekt wurde der SO_RANDOMIZE_PORT Change übrigens am 31. August 2021 wieder reverted:

https://chromium-review.googlesource.com/c/chromium/src/+/3129902/1..4

 

Allerdings dauert das noch eine Weile bis es in der Stable-Release ab Chrome v95 ankommt:

https://chromiumdash.appspot.com/commits?commit=1ce4b7bcd754c7fbff5af8b6ad31e3641e0614f5&platform=Windows

 

 

Wobei das nun mittlerweile nur noch ein paar Tage dauert, um den 19. Oktober ist v95 zum Rollout vorgesehen. Als Chrome Beta oder als Microsoft Edge Beta kannst Du v95 jetzt schon testen - bin gespannt ob das die Problematik (zumindest durch den Browser getriggert, der Firmware-Bug bleibt ja weiterhin bestehen) etwas entschärft.

[Gojo]

Danke @gunnar,
Ich nutze Windows 10 Enterprise (Version    10.0.19043 Build 19043)
Browser ist Edge Chromium 94.0.992.38

Ich habe jetzt mal die angesprochene Beta runtergeladen und dort scheint das Problem nicht aufzutreten (zumindest kann ich dort problemlos die wetter.orf.at Seite aufrufen)

Dann werde ich inzwischen die Beta Version des Browsers verwenden, solange die v95 noch nicht für alle released wurde.

Danke auf alle Fälle für deine Bemühungen 👍!

[Gojo]

Das ist bei mir eingestellt. Sollte so passen...

[IT-Freak]

Würde das Netzteil mit getauscht?

Ich hatte heute erst wieder eine Leitung, wo irgendwie ein nicht passendes Netzteil im Einsatz war.

 

Es hört sich auf jeden Fall sehr spannend an

[gunnar]

Ja, Netzteil ist auch getauscht - das erhaltene Modem und Netzteil war originalverpackt. Auch das RJ45-Kabel habe ich schon getauscht.

Auch einen Einfluss der Stromversorgung schließe ich aus - andere Steckdose bereits versucht.

 

Und wie gesagt: Um das zu demonstrieren muss ich nichts anderes tun, als einfach nur die o.a. URL des ORF-Wetters mit Edge Beta aufzurufen. Frisch gebootetes Modem, ich rufe einfach nur diese URL auf und zack, Modem rebootet. Solange ich diese URL nicht aufrufe kein Problem, 5 Stunden lang Internet-Nutzung (surfen, Streamen) - alles stabil, dann ein Zugriff mit Edge-Beta auf o.a. URL und wieder zack, reboot.

 

Habe noch etwas gegoogelt und Fehlerberichte gefunden, dass Leute mit dem Modem keine größeren GIT-Push-Vorgänge mehr zustande bekommen, selber Effekt - Modem reboot. Als Lösung wurde genannt:

 

It's faulty firmware, this did not happen with CH7465LG-NCIP-6.12.18.24-5p4-NOSH. This issue is causing router restart when hairpin or loopback is being performed. With this error, you cannot use public IP or domain name inside your local network, because that is what causes reboot. It is couple of month now and still not fixed. You can ask your ISP to remotely downgrade to CH7465LG-NCIP-6.12.18.24-5p4-NOSH but the router updates itself anyway and ISP cannot stop it from doing so, so we are all screwed.

 

Wobei bei Zugriff auf die genannte Site definitiv kein Hairpinning im Spiel ist, Source (mein PC) und Destination (die Hosts die den ORF-Content ausliefern) kommunizieren beide über öffentliche IPv6-Adressen, meine Wireshark-Aufzeichnung zeigt zum betreffenden Zeitpunkt auch keinen anderen IPv4-Verkehr an - somit dürfte das Problem anders gelagert sein.

Bearbeitet Mai 16, 2021 von gunnar

[gunnar]

Nachtrag: Tritt nicht nur mit der wetter.orf.at Seite auf, sondern auch mit anderen orf.at Nachrichten-Inhalten.

Bearbeitet Mai 19, 2021 von gunnar

[Christian_E]

Mach doch mal einen Hotspot von deinem Handy o.ä. und teste das wieder.
Ich hätte jetzt klar das Modem getauscht aber wenn du das schon gemacht hast und es klappt immer noch nicht, ist das mehr als interessant.
Im Prinzip aber läuft es ja mit allen anderen Browsern, evtl. ist in der Beta Version des einen Browsers echt ein heftiger Bug drinnen.
 

[gunnar]

Danke @Christian_E für den Vorschlag, den ich aber freilich längst geprüft habe.

Mit anderen Internet-Zugängen (Handy-Hotspots auf Android 11 oder iOS 14.5) tritt das Problem freilich nicht auf - es ist ein Modem-Firmware-Fehler der Connect-Box CH7465LG-LC.

 

Getriggert - wie in meinem ausführlichen Blog-Post erläutert - durch die rasche Wieder-Verwendung von niedrigen (1024, 1025, ...) TCP-Source-Port-Nummern beim Aufbau von HTTPS-Verbindungen. Das Problem ist - wie ich am Ende meines Blog-Artikels zeige - auch mit einem kleinen Linux-Shell-Script gezielt demonstrierbar. 

 

Ich kann keinen Bug darin erkennen wenn man erstens Source-Ports ab 1024 wählt, und zweitens diese nach Abbau der TCP-Verbindung sofort für eine neue wiederverwendet, mir ist kein RFC bekannt dem dies widersprechen würde, bin aber für Hinweise diesbezüglich offen. 

[Christian_E]

Alles klar. Da hast eh schon super Analysen gemacht.
Aber wie dramatisch ist es für dich? Handelt sich ja im Moment nur um ein Problem mit dem Beta Browser vom Edge.
Wird natürlich interessant zu sehen, ob die finale Version dann wieder läuft.

[gunnar]

Es geht in diesem Thread hier nicht darum meine persönliche Situation zu lösen. Ich selbst kenne die Hintergründe ja mittlerweile und weiß mir zu helfen. Aber vielen anderen Kunden geht es möglicherweise nicht so wie mir, die können sich nicht selbst helfen, bemerken lediglich das ihr Modem rebootet und wissen nicht warum. Denen soll dieser Thread und mein Blog-Post Hilfestellung bieten zu prüfen, ob sie auch von dieser Problematik betroffen sind. Und wenn ja können sie mit dieser Anleitung eine geänderte Konfiguration herstellen um das Problem erst mal zu umgehen.

 

Aber eigentlich ist Magenta jetzt am Zug und muss handeln und diesen Bug in der Firmware beheben (lassen).

 

[Christian_E]

Ja gut aber noch mal - es handelt sich um ein Problem mit nur einem Browser, der sich im Beta Stadium befindet.
Alle anderen funktionieren und selbst der Edge "stable" funktioniert.
Ob da Magenta gleich losläuft? Oder eher mal die stable Version abwartet.

Aber ich verstehe schon deinen Ansatz - proaktiv da eine Lösung zu finden, bevor es ein Massenthema wird, wäre in jedem Fall die richtige Vorgehensweise.
In jedem Fall aber Danke für deine Recherche und vor allem für die Info hier in der Community!

[gunnar]

@Christian_E Deine Einschätzung zur Dringlichkeit und hinsichtlich der Auswirkungen teile ich nicht.

 

1. Es geht nicht nur um einen Browser, sondern um zwei (Google Chrome, Microsoft Edge)

2. Der Verbreitungsgrad dieser beiden Browser ist hoch.

3. Google Chrome v91 ist nicht mehr in einer frühen Beta-Phase, sondern v91 ist bereits finalisiert und wird am 25.05.2021 (also schon in wenigen Tagen!) per Auto-Update ausgerollt. Daran ist jetzt auch gar nichts mehr zu ändern. Ich prophezeie schon jetzt, dass die Magenta-Hotline dann vermutlich ein paar Anrufe zu verzeichnen haben wird.

 

[Christian_E]

Am 16.5.2021 um 17:38 schrieb gunnar:

 

 

Mit anderen Browsern wie Chrome, Firefox, Microsoft Edge Stable (also nicht Beta) etc... tritt das Problem nicht auf.

 

Aha - ich dachte mit Chrome läuft es, wie du im Anfangspost geschrieben hast?

Bearbeitet Mai 23, 2021 von Christian_E

[Christian_E]

OK - nochmal gelesen.
Die neue Version von Chrome wird also auch Probleme machen.
Gut dann wird das definitiv ein gröberes Thema.
Ja dann kann ich auch nur hoffen, dass Magenta da mitliest....

[Christian_E]

Danke für deinen Update!

[gunnar]

Danke @Jonathan Dorian für das Status-Update.

 

Ich weiß zwar nicht, warum Magenta denkt ich wäre dafür zuständig das an die Browser-Hersteller zu reporten, aber weil ich ein guter Mensch bin habe ich den betreffenden Change im Chromium-Projekt für euch herausgesucht und Kontakt mit dem Entwickler hergestellt. Die Diskussion ist öffentlich im Chromium-Source-Code-Repo nachvollziehbar, der Link dorthin ist in meinem Blog-Post im Abschnitt Welcher Chromium-Change verursacht diese Verhaltensänderung? ergänzt.