Gelöst

UDP RTP massive Paketverluste im Downstream von AWS

vor 2 Jahren

Hallo,

 

ich arbeite seit Jahren für eine US Firma im WebRTC/Videokonferenzbereich als Entwickler. Seit einigen Tagen verzeichnet meine DSL Verbindung massive RTP Paketverluste, z.B. beim Download von RTSP Media von einem in der AWS-Cloud gehotsteten RTSP Server. 

 

Ich habe ein kleines Testprogramm geschrieben, dass die RTP Packet Losses ausgibt und dieses zeigt mir, dass die Packet Losses 100% nur in der Downstream Relation auftreten. Mein DSL Upstream verzeichnet keinen packet loss wenn er bei AWS ankommt. 

 

Das Problem trifft besonders UDP Verbindungen, aber auch TCP Verbindungen scheinen massiv beeinträchtigt (nicht so stark, wie UDP).

 

Heute habe ich versucht, herauszubekommen, ob meine DSL Verbindung das Problem sein könnte. Aus folgenden Gründen schliesse ich das aus:

- Ich habe einen parallelen Tunnel (tailscale) von meiner Entwicklungsmaschine auf den AWS Server und alles was da durchgeht ist in beiden Richtungen fehlerfrei.

- Das Problem tritt auch in getetherten Verbindungen auf, hier mein iPhone 15 Pro mit Telekom 5G SIM. Hier werden zwar Downstream UDP Verbindungen gar nicht erst zugelassen, aber TCP ist ebenso gestört

- Ich war heute in einem McDonalds Restaurant und habe die Tests dort über den dortigen Telekom Hotspot gefahren. Identische Ergebnisse. UP ok, DOWN fail

- Zusätzlich war ich noch bei REWE (M3? Verifox?). Dasselbe Symptom wie bei tethered Telekom: UDP geht nicht, TCP Downstream gestört.

 

Ich kann alles belegen und die entsprechende Testapp z.V. stellen. 

Ich hätte nur gern meine stabilen Verbindungen zurück. Region ist übrigens Nord-Berlin

PS: Ich vergass zu erwähnen, dass Kollegen in den USA und in Spanien identische Tests gefahren haben und keinerlei Probleme festgestellt haben. Und - das Problem trifft nicht nur eine spezielle EC2 Instanz. Mehrere  unter meiner Kontrolle stehende Maschinen zeigen diese Ausfälle, insbesondere in WebRTC Sessions (stark UDP RTP lastig).

Letzte Aktivität

vor 2 Jahren

von

Gelöschter Nutzer

628

0

44

    • vor 2 Jahren

      Hallo Neil,

       

      ich habe das gleiche Problem wie du, allerdings ist es bei mir Ohio was Probleme macht. Ich bin selber kein Programmierer, aber mein Programmierer hat sich das angeschaut und beim recherchieren deinen Beitrag gefunden. Ich habe auch Bekannte testen lassen, die nicht in meiner Nähe wohnen und das ganze auch über das Handynetz mit Hotspot probiert. Sobald die Telekom im Spiel ist, ist es unfassbar langsam, bei Anbietern wie Vodafone z.b. funktioniert es einwandfrei.

       

      Bei mir tritt das Problem ab ca. 17 Uhr deutsche Zeit auf, ab da wird es zunehmend langsamer, bis es gehen 20 Uhr seinen Höhepunkt hat und fast gar nichts mehr geht...

      0

      1

      von

      vor 2 Jahren

      Witzig Fröhlich Ich bin jetzt (virtuell) nach Ohio umgezogen und da läuft erst mal alles.

      Hier (Berlin) ist es zwischen 13:00 und 01:00 auf east-1 unerträglich. Wir haben Tickets bei Amazon, die keine Probleme sehen. Ich gebe zu, ich hatte bislang nur Möglichkeit über Telekom zu testen (eigener DSL Anschluss, Telekom Hotspot bei Mäcces, LTE usw). Aber Freunde in Spanien hatten mit east-1 auch kein Problem. Mein Kollege in Miami schon, sieht ebenso eine Verlangsamung, aber nicht so drastisch wie hier. Ich kann Videos präsentieren, da flippt jeder aus, der sich auskennt. east-2 vs. east-1, praktisch side-by-side.

       

      Ich sehe trotz allem nicht die lokalen Gegebenheiten des Anbieters als Problem. Vielleicht ein Peering -Problem, wo sich Amazon und Telekom treffen... Wer weiss das schon.

       

      Ich kann das momentan nur aussitzen und ggf. durch Umzug lösen...

       

       

      0

      Uneingeloggter Nutzer

      von

    • vor 2 Jahren

      Abschliessend: Seit einigen Tagen läuft es wieder. 

       

      Hier das letzte Statement vom AWS Support dazu, bin autorisiert, das hier zu veröffentlichen. Zeigt erneut auf Telekom, leider hat es hier keiner gesehen (oder keiner konnte helfen):

      <snip>

      I have received an update from our internal investigation.

      Up until 2024-05-27 07:00 UTC DTAG Deutsche Telecom were not announcing a range of IPs to AWS, which affected routing between Amazon and DTGA in Virginia.
      As a result of traffic being sent to Germany from us-east-1 was being sent via different ISP and the handoff between DTAG and the new ISP is where we see the packet loss.

      DTAG improve the routing. The good news is that since DTAG started to route directly to Amazon, we have seen an improvement in the performance. We expect that since 2024-05-27 07:00 UTC Could you please check if this problem is still present on your side.

      If you see anymore issues with packet loss please share a new MTR going both directions result with us.

      I hope the above information was useful to you. If you have any concerns or questions, don’t hesitate to reach out to me here. I will be more than happy to assist you further.

      </snip>

       

      Und wer hat's zuerst gemerkt? Fröhlich

      0

      1

      von

      vor 2 Jahren

      @neil.young

       

      Vielen Dank für dein abschließendes Feedback 👍🏽

      Es freut mich wirklich sehr, dass es nun zu einer Verbesserung gekommen ist und das Routing wieder läuft 🙂

       

      Viele Grüße

      Timur

      0

      Uneingeloggter Nutzer

      von

    Uneingeloggter Nutzer

    von

    Beliebte Tags letzte 7 Tage

    Loading...Loading...Loading...Loading...Loading...Loading...Loading...Loading...Loading...Loading...