x-fabric Startseite

Daten- und TV-Qualität messen

Kunden kaufen Bandbreite, spüren aber vor allem, ob eine Seite sofort lädt und ein Download rechtzeitig fertig ist. Zuschauer bemerken ein eingefrorenes Bild oder einen langsamen Kanalwechsel genauso schnell.

Hochbetrieb am Abend: Telefon, TV und Downloads teilen sich eine Leitung, und mosprobe misst alles gleichzeitig.

Web- und Datenperformance

Warum Web- und Datenperformance messen?

Überlastung zu Spitzenzeiten, Engpässe beim Peering, langsame Nameserver, überlastete Server und das TCP-Verhalten auf langen oder verlustbehafteten Strecken bremsen eine Verbindung, ohne dass die Auslastungszähler der Leitungen es zeigen.

Die Messung aus Sicht der Kunden zeigt, ob die beworbene Geschwindigkeit ankommt. Sie liefert auch Zahlen, die sich über Regionen, Zugangstechnologien und Anbieter vergleichen und in SLAs und regulatorischen Berichten verwenden lassen.

Worauf der Nutzer wartet

Eine einzelne Web- oder Dateiübertragung durchläuft mehrere Phasen. Jede Phase lässt sich einzeln messen und weist auf einen anderen Teil der Übertragungskette hin.

Phasen einer Übertragung
PhaseWas sie zeigt
DNS-AuflösungOb Nameserver erreichbar und schnell sind
VerbindungsaufbauRound-Trip-Time zum Server und Reaktionsfähigkeit des Servers
Zeit bis zum ersten ByteWie schnell der Dienst zu liefern beginnt
Download- und Upload-DurchsatzDie Kapazität, die einer Anwendung zur Verfügung steht
Erfolg der ÜbertragungZuverlässigkeit: abgeschlossene, fehlgeschlagene und abgebrochene Übertragungen, mit Grund

Von Netztests zu Diensttests

In der Branche wird Datenperformance auf verschiedenen Ebenen getestet, die sich ergänzen.

  1. Netz-Benchmarking

    IETF RFC 2544 definiert Tests für Durchsatz, Latenz, Frame-Verlust und Back-to-Back, ursprünglich für das Benchmarking von Netzgeräten im Labor. ITU-T Y.1564 ist der Multiservice-Nachfolger für die Diensteinrichtung: Er prüft mehrere Verkehrsklassen gleichzeitig gegen ihre zugesicherten Raten, Verzögerung, Verzögerungsschwankung und Verlust. Coast Guard von x-fabric misst IP-Netze nach beiden.

  2. TCP-Durchsatz

    Der meiste Verkehr läuft über TCP, und der TCP-Durchsatz hängt von Round-Trip-Time, Fenstergrösse und Verlust ab, nicht nur von der Leitungskapazität. IETF RFC 6349 beschreibt ein wiederholbares Verfahren: zuerst Pfad-MTU, Round-Trip-Time ohne Last und Engpass-Bandbreite bestimmen, dann den TCP-Durchsatz messen und mit dem vergleichen, was der Pfad schaffen sollte. Kennzahlen wie TCP-Effizienz und Pufferverzögerung zeigen, warum eine Leitung hinter den Erwartungen zurückbleibt. Coast Guard misst den TCP-Durchsatz auf diese Weise.

  3. Übertragungen von Anwendungen

    HTTP- und FTP-Downloads und -Uploads mit einem Testserver zeigen, was eine Anwendung beim Kunden tatsächlich erhält. Broadband Forum TR-143 standardisiert solche Durchsatztests (HTTP- und FTP-Übertragungen, UDP-Echo) für Endgeräte beim Kunden. ETSI TS 102 250-2 definiert QoS-Parameter für verbreitete Dienste, darunter FTP und HTTP, mit genauen Messpunkten für Aufbauzeit, Sitzungsdauer, mittlere Datenrate und Fehlerquoten, damit Ergebnisse verschiedener Werkzeuge und Netze vergleichbar sind.

  4. Wahrnehmung beim Nutzer

    ITU-T G.1030 bietet einen Rahmen, um abzuschätzen, wie sich die Leistung eines IP-Netzes auf die wahrgenommene Leistung von Datenanwendungen wie dem Surfen im Web auswirkt.

Eine Verbindung oder viele?

Eine einzelne TCP-Verbindung zeigt, was eine Anwendung bekommt, und reagiert empfindlich auf Latenz und Verlust. Mehrere parallele Verbindungen füllen Leitungen mit hoher Kapazität und zeigen die gesamte Kapazität des Anschlusses.

Eine Verbindung. Was eine einzelne Anwendung bekommt.
Parallele Verbindungen. Die gesamte Kapazität des Anschlusses.

Laufen Uploads und Downloads gleichzeitig, zeigen sich Effekte, die aufeinanderfolgende Tests übersehen, etwa eine wachsende Latenz, wenn sich unter Last die Puffer füllen.

Was eine gute Messung braucht

Der Standort des Kunden
Von echten Anschlüssen aus messen, statt vom Rechenzentrum aus.
Die richtigen Ziele
Ein Referenzserver nahe am Netzrand isoliert das Zugangsnetz; echte Ziele im Internet beziehen Peering, Content Delivery Networks und DNS in die Messung ein.
Beide Richtungen und beide IP-Versionen
Upload und Download, IPv4 und IPv6 getrennt gemessen.
Ausreichend lange Übertragungen
Bei kurzen Übertragungen prägt vor allem der TCP-Slow-Start das Ergebnis statt der Kapazität der Leitung.
Ein Messkopf, der nicht der Engpass ist
Gigabit-Anschlüsse brauchen Messtechnik, die Gigabit-Raten zuverlässig hält.
Rund um die Uhr
Die Leistung um 3 Uhr nachts sagt wenig über die Leistung zu Spitzenzeiten.
Zusammenhang
DNS-Zeit, Verbindungsaufbau und Zeit bis zum ersten Byte erklären zusammen mit Round-Trip-Time und Verlust zu Referenzzielen, warum eine Übertragung langsam war.

Was mosprobe misst

Übertragungen
HTTP- und FTP-Downloads und -Uploads, als einzelne Übertragungen oder als Szenarien mit vielen parallelen Uploads und Downloads, über IPv4 und IPv6, mit bis zu Gigabit-Geschwindigkeit.
Jede Übertragung
Zeit für Namensauflösung, Verbindungsaufbau, die erste Antwort des Servers und das erste Datenbyte, die Gesamtdauer und die Datenrate in jede Richtung.
Jeder Test
Gestartete, abgeschlossene und fehlgeschlagene Übertragungen, jeder Fehler mit seinem Grund.

IPTV

Warum IPTV-Qualität messen?

Komprimiertes Video ist empfindlich, denn ein einziges verlorenes Paket kann mehrere voneinander abhängige Bilder beschädigen. Managed IPTV wird meist als Multicast verteilt, deshalb trifft ein Fehler an einem Verteilpunkt jeden Zuschauer dahinter.

Netzzähler zeigen, ob die Leitungen laufen. Ob ein bestimmter Kanal unversehrt im Wohnzimmer ankommt, prüft erst die Messung der IPTV-Qualität, Kanal für Kanal, aus Sicht der Abonnenten.

Was das Fernseherlebnis bestimmt

Fernseherlebnis
AspektTypische Ursache von Problemen
Bild- und TonqualitätBitrate, Codec und Encoder-Einstellungen am Headend
Übertragungsfehler (Blockbildung, Standbilder)Paketverlust, Verlustbündel, Jitter
Umschaltzeit (Zapping)Verzögerung beim Multicast-Beitritt, Abstand der Schlüsselbilder, Pufferung in der Set-Top-Box
Verfügbarkeit der KanäleFehlende oder unterbrochene Multicast-Streams, Ausfälle am Headend

Kanalwechsel und IGMP

Schaltet ein Zuschauer um, verlässt die Set-Top-Box eine Multicast-Gruppe und tritt einer anderen bei, über IGMP (IGMPv3, IETF RFC 3376; MLD in IPv6-Netzen). Die Umschaltzeit, die der Zuschauer wahrnimmt, ist die Summe mehrerer Schritte.

  1. Beitrittsanfrage

    Die Set-Top-Box tritt der neuen Multicast-Gruppe bei.

  2. Stream startet

    Das Netz beginnt, den neuen Stream zu liefern.

  3. Nächstes Schlüsselbild

    Das Bild beginnt erst mit dem nächsten Schlüsselbild, einem vollständigen Bild im Datenstrom.

  4. Pufferung im Decoder

    Die Set-Top-Box füllt ihren Puffer, bevor sie das Bild zeigt.

Ein Messkopf, der Kanäle so anfordert wie eine Set-Top-Box, misst den Anteil des Netzes an dieser Verzögerung und erkennt Kanäle, die gar nicht ankommen. ITU-T G.1080 zählt die Umschaltzeit zu den Anforderungen an die Quality of Experience bei IPTV.

Transportstrom und Netzkennzahlen

In der Branche werden Transportströme und die Auslieferung über IP nach Richtlinien und Kennzahlen wie diesen geprüft.

ETSI TR 101 290
Messrichtlinien für MPEG-2-Transportströme, nach Priorität gruppiert: Priorität 1 prüft, ob sich ein Stream überhaupt decodieren lässt (Synchronisation, Kontinuität, wesentliche Tabellen), Priorität 2 ergänzt empfohlene laufende Prüfungen wie Timing- und CRC-Fehler, Priorität 3 deckt anwendungsabhängige Prüfungen ab. Ursprünglich für den DVB-Rundfunk geschrieben, wird TR 101 290 heute vielfach für Transportströme über IP eingesetzt.
Media Delivery Index (MDI), IETF RFC 4445
Fasst die Auslieferung über IP in zwei Kennzahlen zusammen: den Delay Factor, der Jitter und den beim Empfänger nötigen Puffer abbildet, und die Media Loss Rate, die verlorene oder vertauschte Medienpakete zählt.
IP-Kennzahlen
Paketverlust, Verlustbündel und Jitter, pro Kanal gemessen, helfen, ein Problem im Headend, im Kernnetz oder im Zugangsnetz zu verorten.

Von Netzkennzahlen zur wahrgenommenen Qualität

In der Branche verwendete Anforderungen und Qualitätsmodelle setzen das Verhalten des Netzes in Beziehung zum Fernseherlebnis.

ITU-T G.1080
Definiert Nutzeranforderungen an die Quality of Experience bei IPTV, unabhängig von Netzarchitektur und Transportprotokoll.
Broadband Forum TR-126
Beschreibt Anforderungen an die Quality of Experience für Triple-Play-Dienste und übersetzt die Erwartungen der Zuschauer an Video, Sprache und Daten in technische Zielwerte.
ITU-T P.1201
Ein parametrisches, nicht-intrusives Modell (P.1201.2 für höher aufgelöste Dienste wie IPTV), das die Audio-, Video- und audiovisuelle Qualität anhand der Paket-Header als MOS schätzt.
ITU-T P.1203
Behandelt adaptives Streaming über HTTP, wie es TV-Apps und OTT-Dienste nutzen, einschliesslich der Wirkung von Qualitätswechseln und Unterbrechungen.

Was eine gute Messung braucht

Der Standort der Abonnenten
Hinter demselben Zugang messen wie der Kunde und Kanäle anfordern wie eine Set-Top-Box.
Das ganze Kanalangebot
Alle Kanäle der Reihe nach prüfen, denn ein Kanal, der in einer Region fehlt, ist vom Headend aus unsichtbar.
Kontinuität
Rund um die Uhr, auch zu den Hauptsendezeiten und bei grossen Live-Ereignissen.
Genaues Timing
Beitritts- und Umschaltzeiten sind kurz, deshalb müssen die Zeitstempel genau sein.
Zusammenhang
Transportkennzahlen verorten einen Fehler, Qualitätsmodelle übersetzen ihn in das, was der Zuschauer erlebt, und der Vergleich mit dem Headend trennt Probleme der Quelle von Problemen des Transports.

Was mosprobe misst

mosprobe®-Messköpfe fordern einen Kanal an wie eine Set-Top-Box, über IPv4 und IPv6, empfangen seinen Stream eine festgelegte Zeit lang und verlassen ihn wieder. Die Kanäle stammen aus einem zentral gepflegten Kanalangebot.

Empfang
Ob der Kanal überhaupt ankommt.
Kanalwechsel
Die Zeit vom Beitritt zum Kanal bis zu seinem ersten Paket: der Anteil des Netzes an der Umschaltzeit.
Auslieferung
Empfangene Pakete und Datenrate; Paketverlust, vertauschte und doppelte Pakete; Jitter als Minimum, Mittelwert und Maximum.