Entwicklung und Aufbau des TI-Scores für TI-Messenger

1 Ziele und Aufbau des TI-Scores

Der TI-Score für TI-Messenger soll Leistungserbringenden eine strukturierte Orientierung bei der Auswahl einer geeigneten Kommunikationslösung bieten. Hierzu werden produktbezogene Nutzungskennzahlen sowie technische und organisatorische Merkmale anhand eines einheitlichen Kriterienkatalogs bewertet. Die Ergebnisse machen Unterschiede zwischen den Produkten hinsichtlich ihrer Nutzung, plattformübergreifenden Verfügbarkeit und Unterstützung des betrieblichen Einsatzes sichtbar.

Die Bewertung erfolgt zunächst nur auf Grundlage standardisierter Herstellerangaben. Sie umfasst sieben Kategorien, die zunächst jeweils auf einer Skala von 0 bis 100 Punkten bewertet und anschließend zu einem gewichteten Gesamtscore zusammengeführt werden. Ergänzend werden Merkmale erhoben, die derzeit ausschließlich informativ dargestellt werden und zukünftige Weiterentwicklungen des Scores vorbereiten. 

Der TI-Score wurde im Rahmen eines nutzer-zentrierten Prozesses von der Arbeitsgruppe Data-Driven Innovation (DDI) der Technischen Universität Hamburg (TUHH) in Zusammenarbeit mit der gematik entwickelt. Die Kriterienentwicklung und qualitative Überprüfung erfolgten in einem mehrstufigen Verfahren mit insgesamt 34 Interviews. Die Kategoriegewichte, Punktwerte und Schwellenwerte wurden vom DDI-Team vorgeschlagen und anschließend mit dem Team der gematik abgestimmt.

 

2 Entwicklung der Bewertungskriterien

Der nutzerzentrierten Prozess zur Entwicklung des TI-Scores für den TI-Messenger folgte den vier im Folgenden erläuterten Stufen.

 

2.1 Erste Interviewrunde: Erfassung von Anforderungen

Zwischen April und Juni 2026 wurden 17 leitfadengestützte Interviews mit Ärztinnen und Ärzten sowie Vertreterinnen und Vertretern von Herstellern, der Selbstverwaltung und der gematik geführt. Die Rekrutierung erfolgte auf Grundlage von Vorschlägen der gematik sowie durch eigene Recherchen und Kontaktanbahnungen des DDI-Teams, unter anderem auf der Fachmesse DMEA. Das Ziel bestand darin, unterschiedliche Perspektiven auf Nutzungsszenarien und Anforderungen zum Thema Messaging im Gesundheitswesen im Allgemeinen sowie Einführungshürden und die Auswahl geeigneter Software für den TI-Messenger im Besonderen zu erfassen. Die Teilnehmenden wurden über Ziel und Ablauf der Untersuchung sowie die Verarbeitung ihrer Daten aufgeklärt und erteilten durch Unterzeichnung einer Einwilligungserklärung ihre schriftliche Zustimmung zur Aufzeichnung und Auswertung der Gespräche. 

Das DDI-Team strukturierte die Aussagen manuell nach thematischen Gemeinsamkeiten, gruppierte zusammengehörige Anforderungen und leitete daraus einen ersten Kriterienkatalog ab.

 

2.2 Kano-orientierte Strukturierung

Zur konzeptionellen Strukturierung der Anforderungen wurde das Kano-Modell herangezogen. Die identifizierten Bedürfnisse wurden zunächst durch das DDI-Team auf Grundlage der Interviewergebnisse als Basis-, Leistungs- oder Begeisterungsmerkmale eingeordnet.

Dabei diente das Modell als Orientierungsrahmen für die Einordnung der unterschiedlichen Nutzererwartungen. Die Zuordnung erfolgte auf Basis der qualitativen Interpretation der Interviews. Die Ergebnisse wurden dann mit den Ansprechpersonen bei der gematik diskutiert. Basierend darauf wurde ein erster Entwurf der Kriterien für den TI-Score für den TI-Messenger ausgearbeitet.

 

2.3 Zweite Interviewrunde: Qualitative Überprüfung

Im Juli und August 2026 wurde der erste Entwurf in 17 zusätzlichen Interviews mit Leistungserbringern aus der gematik-Community überprüft. Einbezogen wurden drei Apotheker:innen, eine Hebamme, drei Vertreter:innen von Pflegeeinrichtungen, zwei Zahnärzt:innen, sechs Ärzt:innen und zwei Vertreter:innen von Kliniken. Sechs Befragte nutzten bereits einen zugelassenen TI-Messenger, elf nutzten andere Kommunikationslösungen im Gesundheitswesen. 

Die Gespräche wurden aufgezeichnet, transkribiert und durch das DDI-Team manuell thematisch strukturiert. Die Rückmeldungen dienten der qualitativen Überprüfung und Überarbeitung des Kriterienkatalogs sowie der ursprünglichen Einordnung der Merkmale.

 

2.4 Abstimmung und Finalisierung

Der überarbeitete Kriterienkatalog wurde schrittweise innerhalb der gematik mit den relevanten Akteur:innen diskutiert und finalisiert. Anschließend wurden die Kriterien in eine standardisierte Herstellerabfrage und ein zugehöriges Auswertungsschema überführt.

Die qualitative Entwicklung der Kriterien und die Festlegung der Bewertungsregeln bilden unterschiedliche methodische Schritte: Die Interviews begründeten die inhaltliche Auswahl und Ausgestaltung der Kriterien. Die Gewichtung und die Punktestufen wurden fachlich durch das DDI-Team vorgeschlagen und mit der gematik abgestimmt.

 

3 Datengrundlage und Erhebung

Die Bewertung basiert auf einer standardisierten Online-Abfrage, die Hersteller für jedes Produkt gesondert ausfüllen. Erfasst werden Angaben zum Hersteller, zum Produkt, zu den produktiv unterstützten Nutzergruppen sowie zu den bewerteten und ergänzend dargestellten Merkmalen.

Alle Angaben beziehen sich auf das letzte vollständig abgeschlossene Quartal. Nutzungs- und Aufwandskennzahlen erfassen das gesamte Berichtsquartal; für Produktversion, Funktionen und Spezifikationsstand gilt der Stand am Quartalsende. Die Hersteller bestätigen ihre Einreichung über einen an die angegebene persönliche geschäftliche E-Mail-Adresse versandten Link. Sie können ihre Angaben durch erneutes Ausfüllen der Abfrage aktualisieren.

Zum Zeitpunkt der Erstellung dieses Methodenpapiers wurde die Abfrage versandt; die Hersteller übermitteln ihre Angaben. Die Veröffentlichung der Ergebnisse erfolgt anschließend durch die gematik.

 

4 Kategorien und Bewertungslogik

Die fünf primären Kategorien (K1-K5) gehen mit jeweils 18 % in den Gesamtscore ein. Die beiden sekundären Kategorien (K6-K7) werden mit jeweils 5 % berücksichtigt.

KürzelKategorieGewichtung
K1Nutzung und aktive Nutzer:innen18 %
K2Unterstützte Endgeräte und Betriebssysteme18 %
K3Datenschutzgerechte BYOD-Nutzung18 %
K4Support und Servicezeiten18 %
K5Onboarding und Befähigung18 %
K6Kommunikations- und Versorgungsszenarien5 %
K7White-Label-Fähigkeit5 %

 

4.1 Nutzung und Nachrichtenvolumen

Die Kategorie berücksichtigt die durchschnittliche Zahl monatlich aktiver Nutzender und die Zahl versendeter Nachrichten. Als monatlich aktiv gilt eine Person bei mindestens einer Nutzung im jeweiligen Monat. Maßgeblich ist der Mittelwert aus den drei Monaten des Berichtsquartals.

Durchschnittliche monatlich aktive Nutzende

Teilscore

0

0

Mehr als 0 bis unter 500

25

500 bis unter 2.500

50

2.500 bis unter 5.000

75

Ab 5.000

100

 

Für das Nachrichtenvolumen zählt die Gesamtzahl der im Berichtsquartal versendeten Nachrichten.

Versendete Nachrichten im Quartal

Teilscore

0

0

1–79.999

25

80.000–799.999

50

800.000–7.999.999

75

Ab 8.000.000

100

 

Der Kategoriescore setzt sich zu 30 % aus dem MAU-Teilscore und zu 70 % aus dem Nachrichten-Teilscore zusammen. Innerhalb jeder Stufe bleibt die Punktzahl konstant. Die Schwellen sind feste Werte und werden nicht anhand der Angaben anderer Hersteller neu berechnet. Optionale Aufteilungen nach Einrichtungsart werden nicht bewertet. Für die monatlich aktiven Nutzenden wird ausschließlich die Größenklasse veröffentlicht.

 

4.2 Unterstützte Endgeräte und Betriebssysteme

Bewertet werden die Nutzungsmöglichkeiten unter iOS, Android sowie auf Desktop-Systemen unter Windows und macOS. Für iOS und Android werden jeweils 25 Punkte vergeben; auf die Desktop-Nutzung entfallen insgesamt maximal 50 Punkte.

Für Windows und macOS werden sowohl Desktop-Clients als auch offiziell unterstützte Browserlösungen mit den wesentlichen Messenger-Funktionen berücksichtigt. Eine zusätzliche native Anwendung führt nicht zu weiteren Punkten. iPadOS, weitere Betriebssysteme, unterstützte Browser und Mindestversionen werden ausschließlich informativ dargestellt.

 

4.3 Datenschutzgerechte BYOD-Nutzung

Diese Kategorie erfasst die vom Hersteller vorgesehene und technisch unterstützte Nutzung auf privaten Endgeräten im Sinne von Bring Your Own Device (BYOD).

Bei unterstützter BYOD-Nutzung werden fünf Schutzmaßnahmen mit jeweils 20 Punkten bewertet:

  • Verschlüsselte Speicherung lokaler dienstlicher Daten.
  • Technische Trennung dienstlicher und privater Daten.
  • Zusätzlicher Zugriffsschutz, beispielsweise durch PIN oder Biometrie.
  • Verhinderung der Übertragung dienstlicher Daten in private Anwendungen und Dienste.
  • Möglichkeit zur Fernlöschung oder zum Entzug des Zugriffs auf dienstliche Daten, ohne private Daten zu beeinträchtigen.

Wird BYOD nicht unterstützt, erhält die Kategorie null Punkte. Ob BYOD bereits produktiv in einer Einrichtung genutzt wird, wird ergänzend dargestellt und nicht bepunktet.

 

4.4 Support und Servicezeiten

Bewertet wird das regulär buchbare Supportpaket mit dem größten Serviceumfang. Ein möglicher Aufpreis beeinflusst die Bewertung nicht.

Der Kategoriescore umfasst vier Bestandteile:

Bestandteil

Maximal erreichbare Punkte

Supportzeiten an Werktagen

35

Support an Wochenenden und Feiertagen

25

Verfügbare Supportkanäle

20

Vertragliche Zusicherung der Servicezeiten

20

Gesamt

100

 

Als Servicezeiten zählen ausschließlich Zeiträume, in denen Supportmitarbeitende Störungen qualifiziert bearbeiten und mit der Analyse oder Unterstützung beginnen können.

Bei den Supportkanälen ergeben eine anrechenbare Kontaktmöglichkeit zehn und mindestens zwei Kontaktmöglichkeiten 20 Punkte. Telefon und Rückrufservice werden gemeinsam als ein Kanal gezählt. Weitere anrechenbare Kanäle sind E-Mail, Ticketsystem und Live-Chat. Chatbots werden ergänzend dargestellt.

 

4.5 Onboarding und Befähigung

Bewertet wird die Anzahl unterschiedlicher standardisierter Unterstützungsangebote. Anrechenbar sind Live-Schulungen mit Austauschmöglichkeit, Schulungsvideos, schriftliche Dokumentationen, interaktive Einführungen sowie Wissensdatenbanken beziehungsweise FAQ.

Anzahl unterschiedlicher Angebotsarten

Punkte

Keine

0

Eine

33

Zwei

67

Drei oder mehr

100

 

Eine bestimmte Kombination der Angebote ist nicht vorgeschrieben.

 

4.6 Kommunikations- und Versorgungsszenarien

Bewertet werden wiederverwendbare Templates oder im Produkt unterstützte Prozessvorlagen. Reine Beschreibungen, Flyer und Testimonials werden nicht berücksichtigt.

Für ein bis zwei vorkonfigurierte Vorlagen werden 15 Punkte, für drei bis fünf Vorlagen 30 Punkte und für mehr als fünf Vorlagen 50 Punkte vergeben. Zusätzlich werden jeweils 25 Punkte berücksichtigt, wenn Einrichtungen eigene Vorlagen erstellen und diese innerhalb der Einrichtung zentral für mehrere Nutzende bereitstellen können.

 

4.7 White-Label-Fähigkeit

Die Kategorie erfasst die Anpassbarkeit an das Erscheinungsbild einer Einrichtung. Bewertet werden Logo, Farben beziehungsweise Design, App-Name, App-Icon, Domain beziehungsweise Absenderdarstellung und Start- beziehungsweise Begrüßungsbildschirm.

Pro anpassbarem Gestaltungselement werden zwölf Punkte vergeben, insgesamt höchstens 60 Punkte. Eine eigenständige White-Label-Version mit eigener Produktbezeichnung und eigenständigem Branding ergibt weitere 25 Punkte. Die Selbstadministration der Anpassungen durch die Einrichtung wird mit 15 Punkten bewertet. Ist keine Anpassung möglich, erhält die Kategorie null Punkte.

 

5 Berechnung und Interpretation des Gesamtscores

Der Gesamtscore wird aus den sieben Kategoriescores K₁ bis K₇ berechnet:

TI-Score = 0,18 * (K1 + K2 + K3 + K4 + K5) + 0,05 * (K6 + K7)

Er kann Werte zwischen 0 und 100 Punkten annehmen und wird erst am Ende der Berechnung kaufmännisch auf eine Nachkommastelle gerundet.

Die Einordnung erfolgt anhand folgender Untergrenzen:

Stufe

Punktebereich

Einordnung

A

Ab 80

Sehr hohe Leistungsfähigkeit

B

Ab 65 bis unter 80

Hohe Leistungsfähigkeit

C

Ab 50 bis unter 65

Mittlere Leistungsfähigkeit

D

Ab 35 bis unter 50

Eingeschränkte Leistungsfähigkeit

E

Unter 35

Geringe Leistungsfähigkeit

 

Die Bezeichnung „Leistungsfähigkeit“ bezieht sich auf die im Kriterienkatalog erfassten Eigenschaften. Neben dem Gesamtscore werden die sieben Kategoriescores dargestellt, damit unterschiedliche Stärken und Schwächen sichtbar bleiben.

 

6 Plausibilitätsprüfung und Veröffentlichung

Die gematik prüft die Herstellerangaben ausschließlich auf Plausibilität und verantwortet die Freigabe zur Veröffentlichung. Zusätzliche Nachweise werden nicht angefordert.

Fehlende oder widersprüchliche Angaben werden zunächst beim Hersteller nachgefragt. Bleiben sie ungeklärt, erhält das betroffene bewertete Merkmal null Punkte. Sein Gewicht wird nicht auf andere Merkmale verteilt. 

Veröffentlicht werden ausschließlich Produkte teilnehmender Hersteller. Produkte nicht teilnehmender Hersteller werden nicht aufgeführt und erhalten keine Bewertung. Eine gesonderte Einsichtnahme der Hersteller in die berechneten Ergebnisse vor der Veröffentlichung ist nicht vorgesehen. Aktualisierungen sind jederzeit durch erneutes Ausfüllen der Abfrage möglich

 

7 Ergänzende Angaben und Weiterentwicklung

Implementierungsaufwand, Integration in Primärsysteme sowie Automatisierungs- und Assistenzfunktionen werden derzeit ausschließlich informativ veröffentlicht. Sie beeinflussen den Gesamtscore nicht. Gleiches gilt für weitere als informativ gekennzeichnete Angaben.

Der Implementierungsaufwand wird getrennt für drei Referenzfälle dargestellt: eine Praxis mit einer Ärztin beziehungsweise einem Arzt und Team, ein MVZ mit etwa 20 bis 30 Personen sowie ein Klinikum der Grund- und Regelversorgung. Die Veröffentlichung erfolgt in Größenbändern und unter Angabe der Größe der zugrunde gelegten ersten Nutzergruppe.

Die Nutzungsschwellen für MAU und Nachrichtenvolumen bleiben für die ersten vier nach diesem Schema bewerteten Berichtsquartale unverändert. Anschließend wird ihre Eignung anhand der Marktentwicklung überprüft. Änderungen werden durch eine neue Version des Auswertungsschemas dokumentiert und gelten ausschließlich für zukünftige Bewertungen. Frühere Scores bleiben unverändert.

 

8 Limitationen

Der TI-Score beruht auf Hersteller-Selbstauskünften, die ausschließlich auf Plausibilität geprüft werden. Er stellt daher keine unabhängige technische Produktprüfung (z.B. durch die Leistungserbringer) dar. Unterschiede im Verständnis einzelner Angaben oder in der Erfassung von Nutzungskennzahlen können die Vergleichbarkeit beeinflussen.

Die Kriterienentwicklung berücksichtigt unterschiedliche Stakeholder- und Versorgungsperspektiven. Die Interviewstichproben wurden jedoch nicht zufällig gezogen und sind nicht repräsentativ. Insbesondere die Rekrutierung über die gematik-Community kann mit einer erhöhten Affinität zu digitalen Anwendungen verbunden sein.

Die Kano-orientierte Einordnung und die zweite Interviewrunde dienten der qualitativen Überprüfung des Kriterienkatalogs. Eine statistische Validierung des Gesamtscores oder seiner Zusammenhänge mit Nutzerzufriedenheit, Alltagstauglichkeit oder Versorgungsergebnissen liegt damit nicht vor. Gewichte und Schwellenwerte beruhen auf fachlichen Festlegungen.

Nutzungszahlen können neben Produkteigenschaften auch Markteintritt, Vertriebsreichweite und Größe bestehender Kundennetzwerke widerspiegeln. Ebenso erfasst die Anzahl von Supportkanälen oder Onboarding-Angeboten deren Verfügbarkeit, ohne die Qualität der tatsächlichen Leistung unmittelbar zu messen.

Der Gesamtscore verdichtet unterschiedliche Eigenschaften in einer Kennzahl. Er sollte deshalb gemeinsam mit den Kategoriescores, den ergänzenden Produktinformationen und den Anforderungen der jeweiligen Einrichtung interpretiert werden. Die veröffentlichten Ergebnisse bilden den angegebenen Berichtszeitraum und die Produkte der teilnehmenden Hersteller ab.