Summative Evaluierung - ein Einblick in das Usability Engineering von synedra Produkten

Die Usability unserer Produkte war bereits vor der Umstellung auf die MDR ein wichtiger Bestandteil jeder Anforderung. Neben der Usability wird jede neue Anforderung auch hinsichtlich Performance, Stabilität und Sicherheit beleuchtet. Schließlich wollen wir als synedra exzellente Produkte herstellen. 

Seit der Umstellung auf die MDR orientieren wir uns an der ISO 62366-1 – einer internationalen Norm, die die Entwicklung von Medizinprodukten mit einer sicheren und benutzerfreundlichen Benutzeroberfläche regelt. In diesem Blogeintrag möchten wir Ihnen einen Einblick in das Usability Engineering von synedra geben.

Usability Engineering bei synedra

Der Usability Engineering-Prozess bei synedra ist im Produktmanagement angesiedelt und beginnt mit der Analyse der Bedürfnisse unserer Kunden. Wir holen Feedback bei Endanwender*innen (Radiolog*innen, klinische Nutzer*innen, administrative Nutzer*innen) unserer Kunden ein, z. B. in Form von Online-Fragebögen oder Interviews, und verwenden dieses Feedback, um ein bestimmtes Feature zu entwerfen und zu entwickeln.

Im Laufe des Designprozesses werden dabei auch sogenannte Use Scenarios erstellt. In solchen Use Scenarios wird Schritt für Schritt beschrieben, welche konkrete Aufgabe ein*e Benutzer*in durchführt und welche möglichen Fehler – sogenannte Use Errors – auftreten können. Jeder einzelne Use Error wird dann von unseren Produktmanager*innen dahingehend bewertet, ob eine Gefährdung auftreten kann. Wird eine Gefährdung festgestellt, dann wird in Abstimmung mit dem synedra Risikomanagement diese in die Risikoakte aufgenommen und das betroffene Use Scenario wird formativ evaluiert.

Unter einer formativen Evaluierung versteht man das Abtesten der Benutzeroberfläche unter Einbeziehung der relevanten User-Gruppen, um herauszufinden, welche Aspekte des Designs gut funktionieren und wo noch Use Errors auftreten. Formative Evaluierungen können bereits in der Frühphase des Designprozesses stattfinden, z. B. durch Abtesten von Mockups. Bei synedra schicken wir auch gerne Fragebögen an unseren Testpersonen-Pool oder stellen Tech Previews zur Verfügung, um frühzeitig Feedback zu bekommen.

Am Ende des Entwicklungszyklus vor Fertigstellung des Releases werden ausgewählte Use Scenarios summativ evaluiert. Eine summative Evaluierung ist in der Regel ein Usability Test mit relevanten User-Gruppen. Die summative Evaluierung muss im Gegensatz zur formativen Evaluierung anhand von fertig entwickelten Features erfolgen. Für den Release 23 „Selene" fanden die Usability Tests Anfang Mai 2023 statt. Dieses Mal konnten neue oder verbesserte User Interfaces mit insgesamt 10 Radiolog*innen, 5 klinischen Nutzer*innen und 5 administrativen Nutzer*innen getestet werden. Mit dem Usability Test wird nachgewiesen, dass eine ausreichend sichere Nutzung gegeben ist. Dieser Nachweis ist auch erforderlich, um synedra View als Medizinprodukt der Klasse IIb zertifizieren zu können. Besonders freut uns aber das Feedback, das unsere Proband*innen uns während der Usability Tests mitgegeben haben (Auszug):

„Weiter so! Im Vergleich zu anderen PACS Produkten ist die Rate an neuen Features erstaunlich. Ich mag es, dass man als Anwender in die Weiterentwicklung miteinbezogen werden kann. Das ist bei der Konkurrenz nicht immer der Fall."

„Je mehr ich mit euch zusammenarbeite, desto spannender wird's! Das Programm ist einfach so vielfältig. Mit jeder Schulung und jedem Test lernt man etwas, das man selber nicht finden würde..."

„Ich finde es gut, dass Sachen so zügig implementiert werden. Waren vor ein paar Monaten erst im Test. Ich habe erwartet, dass das erst in 3 Jahren kommt und nicht so zügig. Der Test hat Spaß gemacht!"

Möchten Sie auch Testperson bei synedra werden und vorab neue Features testen? Dann melden Sie sich doch unter pm@synedra.com.