Direkt zum Inhalt

Qualität von Health-Apps einschätzen: Neue Bewertungsskala

Geschrieben von ursula.kramer am Mittwoch, 11. März 2015 - 17:28

Drei oder fünf Sterne im App-Store? Was sagt die subjektive Bewertung der Nutzer in den App-Stores über die objektive Qualität der bewerteten Health-App aus? Gibt es definierte Qualitätskriterien, mit denen sich diese Bewertungen unabhängig vom Tester reproduzieren lassen? Das war die Fragestellung der australischen Forschergruppe, die die "Mobile Application Rating Scale" (MARS) entwickelt  hat und nun erste Ergebnisse zur Validierung veröffentlicht.

Insgesamt 29 Fragen in sechs Kategorien (A bis F) sollen Rückschlüsse zulassen auf die objektive Qualität, die Testergebnisse korrelieren nach derzeitigen Untersuchungen mit insgesamt 60 Apps mit dem Sterne-Rating der App-Nutzer. Sie lassen sich außerdem von unterschiedlichen Testern reproduzieren. Qualitätsbestimmenden Faktoren, die den Erfolg einer Health-Apps vorhersagen lassen, werden die Entwickler und Anbieter von Gesundheits- und Medizin-Apps gleichermaßen interessieren.
Hier ein Kurzvorstellungen der Testkategorien mit den jeweiligen Kernfragen:

  • A. Macht die App Spaß, weckt sie das Interesse des Nutzers, ist sie zugeschnitten auf die Nutzerzielgruppe, bindet sie den Nutzer interaktiv ein? (5 Fragen, User Experience)
  • B. Ist die App einfach und intuitiv zu bedienen, logisch aufgebaut? (4 Fragen, Usability)
  • C. Look and Feel, Attraktivität der Bildwelt, Professionalität des Design? (3 Fragen, User Experience)
  • D. Informationen & Inhalte: Hält die App, was sie in der Ankündigung verspricht, erklärt sie die mit Hilfe der App erreichbaren Ziele, sind die Informationen relevant für den Nutzer, sind die Texte verständlich? Ist der Informationsgehalt überzeugend und gut visualisiert, stammt die App aus einer vertrauenswürdigen Quelle, ist die Wirksamkeit der App in Studien getestet, das Wissen evidenzbasiert? (7 Fragen Qualitätsstandards, Vertrauenswürdigkeit & Evidenz))
  • E. Persönliche Qualitätseinschätzung: Würde der Tester die App empfehlen? Wie häufig würde er sie nutzen (1 x bis mehr als 50 mal?). Wäre er bereit, die App zu kaufen? Wie würde er sie auf der 5-Sterneskala bewerten? (4 Fragen)
  • F. App-spezifische Fragen: Einfluss auf das Gesundheitsverhalten - Was kann die App? Sensibilisieren, Wissen vermitteln, Einstellung verändern, zu Verhaltensänderungen motivieren, zur Nutzung weitere Hilfeangebote motivieren, Verhalten gesundheitsförderlich verändern? (6 Fragen: Gesundheitsförderliches Methodenkonzept der App)

Die Bewertungsskala klassifiziert die App darüber hinaus anhand folgender, allgemeiner Fragen:

  • Technische Merkmale der App. Ist eine Anmeldung erforderlich? Bietet die App einen Passwort-Schutz? Benötigt sie Netzzugang? Kann sie Nachrichten senden? Bietet sie verschieden Funktionen zum Teilen (twitter, Facebook etc.) mit anderen? Hinweis: Weitere Fragen zu Berechtigungen der App oder zum Datenschutz werden nicht erfasst. 
  • Anwendungsfokus der App (z. B. Verhaltensänderung, körperliche Gesundheit, Unterhaltung, Depression etc.)
  • Theoretischer Unterstützungsansatz der App (z. B. Risikoassessment, Information, Tracking, Entspannung, Training etc.)
  • Alter der Nutzerzielgruppe
  • Anbietergruppe (Universität, Staatliche Behörde, Wirtschaftsunternehmen etc.)

Fazit: Die MARS-Bewertungsskala gibt wichtige Hinweise auf qualitätsbestimmende Merkmale einer Health-App. Die meisten Fragen sind graduelle Einschätzungen, deren Beantwortung vom Hintergrund und der Erfahrung der Tester beeinflusst wird. Die Berechnung des Scores gewichtet die Kategorie D (Information und Inhalte) mit max. 7 x 5 Pkt. am stärksten, die Kategorie C (Look and Feel) mit 3 x 5 Pkt. am schwächsten.
Bisher wurde die MARS-Skala in der Pilotphase mit 9 iOS-Apps getestet und im Anschlusstest mit 50 iOS-Apps auf die Reproduzierbarkeit der Ergebnisse überprüft. Wir sind gespannt auf weitere Ergebnisse.

Weiter zur größten Referenzdatenbank mit über 240 getesteten, deutschsprachigen Gesundheits-Apps: Healthon Referenzdatenbank

Mobile App Rating Scale: A New Tool for Assessing the Quality of Health Mobile Apps, Published on 11.03.15 in Vol 3, No 1 (2015): Jan-Mar.
Stoyanov SR, Hides L, Kavanagh DJ, Zelenko O, Tjondronegoro D, Mani M. Mobile App Rating Scale: A New Tool for Assessing the Quality of Health Mobile Apps. JMIR mHealth uHealth 2015;3(1):e27. DOI: 10.2196/mhealth.3422

Kategorie

HealthOn - Experten in Sachen Digital Health

Dr. Ursula Kramer - Die Ap(p)othekerin bloggt auf HealthOn

DiGA-Expertin, Autorin, Beraterin

Die Vision eines gerechten, patientenorientierten Gesundheitssystems treibt die Ap(p)othekerin Dr. Ursula Kramer an. Digitalisierung sieht sie als Möglichkeit, diesem Ziel näher zu kommen. Seit 2011 testet sie Qualität, Sicherheit und Anwenderfreundlichkeit von Gesundheits-Apps, Medizin-Apps und Apps auf Rezept (DiGA). Sie will Transparenz schaffen und digitale Gesundheitskompetenz fördern. Sie teilt die Erfahrung aus der Analyse vieler tausender Gesundheits-Apps in der Beratung von Unternehmen, sie schreibt darüber im Blog auf HealthOn, hält Vorträge und erstellt wissenschaftliche Publikationen. Mehr zur Ap(p)othekerin Dr. Ursula Kramer...