Am 27. Februar 2023 startet die größte je in Österreich durchgeführte Ärzteausbildungsevaluierung, die die Österreichische Ärztekammer gemeinsam mit der Eidgenössischen Technischen Hochschule Zürich (ETH) abwickelt, die auch in der Schweiz und in Deutschland derartige Qualitätskontrollen macht. Thorsten Medwedeff spricht im Interview mit dem Projektleiter seitens der ETH, Michael Siegrist, über die Ziele und den Ablauf der Umfrage – und warum es so wichtig ist, daran teilzunehmen.
In der Schweiz haben Sie als Projektleiter der ETH Zürich ja bereits Ausbildungsevaluierungen durchgeführt – bei welchen Institutionen? Wie war das der Erstellungsprozess der Fragen? In der Schweiz werden alle Ausbildungsstätten befragt, die eine Facharztausbildung anbieten und eine Anerkennung vom Schweizerischen Institut für Fort- und Weiterbildung (SIWF) erhalten haben. Es handelt sich dabei um verschiedene Institutionen wie Spitäler, Praxen, Gesundheitszentren oder ambulante und stationäre Kliniken. Zuerst wurden die relevanten Themenbereiche definiert und die dazugehörigen Fragen formuliert. Interessierte Chefärzte der Ausbildungsstätten und Assistenzärzte liefern dazu wichtigen Input. Der Fragebogen wurde erstmalig im Sommer 2003 an alle Assistenzärzte in der Schweiz verteilt. In den Folgejahren wurden verschiedene Anpassungen am Fragebogen vorgenommen. Seit 2013 kommt dieser in seiner aktuellen Fassung zur Anwendung. Der Fragebogen kam neben der Schweiz auch schon in Deutschland zum Einsatz. Wir haben dort zwei Befragungen bei allen Landesärztekammern durchgeführt. Die Ergebnisse stießen auch dort bei allen Beteiligten auf großes Interesse.
Welche Erfahrungen konnten Sie daraus gewinnen, die nun auch in das Prozedere in der Österreichischen Ärztekammer einfließen konnten? Der Fragebogen und das Erhebungsinstrument sind in der Schweiz in allen Ausbildungsstätten bekannt. Wir haben die Erfahrung gemacht, dass eine umfassende Kommunikation seitens der Ausbildungsverantwortlichen aber auch seitens des SIWF zur Evaluation sehr hilfreich ist und zu einem höheren Rücklauf, motivierterer Teilnahme und höherem Interesse an den Ergebnissen führt. Wir konnten auch beobachten, dass der Rücklauf bei einer schriftlichen Befragung deutlich höher ist als bei einer internetbasieren Befragung.
Was hat für eine Umfrage in Form eines Fragebogens im Print-Format gesprochen? In der Schweiz haben wir eine für diese Art von Befragung sehr hohe Rücklaufquote von 65 bis 70 Prozent. In Deutschland hatten wir die Befragung in allen Landesärztekammern per Internet durchgeführt. Der Rücklauf betrug dort aber lediglich 33 Prozent. Es gibt mehrere Gründe, warum der Papierfragebogen besser abschneidet. Ein physischer Fragebogen hat eine deutlich höhere Verbindlichkeit als eine Mail. Diese wird schnell gelöscht oder geht vergessen, während ein schriftlicher Fragebogen, den man während der Arbeitszeit erhält, verbindlicher ist. Zudem hat ein Papierfragebogen den Vorteil, dass dieser problemlos etappenweise ausgefüllt werden kann. Weil die Ausbildungsverantwortlichen selber den Fragebogen an die Turnusärzte verteilen, kann es auch keine Unklarheiten darüber geben, welche Ausbildungsstätte beurteilt werden soll. Zudem nutzen die Ausbildungsverantwortlichen in der Schweiz die Ausbildungszeit, damit alle sicher den Fragebogen ausfüllen. Dies trägt ebenfalls zu einem hohen Rücklauf bei, der sich aktuell bei 70 Prozent eingependelt hat.
Wie erfolgt die Rücksendung? Die Turnusärztinnen und Turnusärzte erhalten den Fragebogen und ein Rückantwort-Kuvert, welches vorfrankiert und adressiert an die ETH Zürich ist, direkt von ihrem Primararzt oder ihrer Primarärztin. Die ausgefüllten Fragebogen können in dem Rückantwort-Kuvert zur Post gebracht oder in einen Briefkasten geworfen werden. So erfolgt die Rücksendung komplett anonym und ohne großen Aufwand.
Welche Fragen bzw. Fragenkomplexe umfasst der Bogen – wie wurden diese ausgewählt? Der Fragebogen besteht aus Fragen zur Ausbildungsstätte, zu den Arbeitsbedingungen und einigen Angaben zum Turnusarzt oder der Turnusärztin. Weiters werden jedes Jahr wechselnde Fragen zu aktuellen Themen der medizinischen Ausbildung gestellt. Die Qualität der Ausbildung wird mit 57 Fragen gemessen, welche sich in die folgenden acht Kategorien zusammenfassen lassen: Globalbeurteilung, Fachkompetenz, Führungskultur, Fehlerkultur, Betriebskultur, Lernkultur, Entscheidungskultur und eidenzbasierte Medizin. Diese Dimensionen bilden die Weiterbildungsaspekte ab, die für eine erfolgreiche Weiterbildung wichtig sind.
Was geschieht nach der Auswertung? Nach der Auswertung erhält jede Ausbildungsstätte Informationen darüber, wie sie beurteilt wurde. Damit die Ergebnisse auch eingeordnet werden können, wird auch noch ein Benchmark geliefert. Jede Ausbildungsverantwortliche kann dadurch ablesen, in welchen Aspekten er besser und in welchen er schlechter als seine Peers beurteilt wurde.
In der Schweiz ist die Umfrage gut etabliert. Glauben Sie, dass die österreichischen Primarärzte die Umfrage unter Umständen „fürchten“? Zu Recht? Angst vor der Umfrage muss niemand haben! Wir liefern Informationen, die helfen sollen, die Ausbildung stetig zu reflektieren und zu verbessern. Die Ausbildungsstätten erhalten eine Rückmeldung über die Stärken und Schwächen der vermittelten Ausbildung aus Sicht der Turnusärzte. Nur ein offenes Feedback ermöglicht es, Verbesserungen zu erzielen. In der Schweiz beobachten wir, dass die Evaluation den Austausch zwischen Ausbildungsverantwortlichen und Turnusärzten fördert. Der Bericht wird von den Ausbildungsverantwortlichen als Diskussionsbasis genutzt und so entsteht oftmals ein konstruktives Gespräch mit den Turnusärzten. Dies trägt zur Qualitätssicherung der Ärzteausbildung bei.
Was kann die Ärzteschaft in Österreich von der Auswertung, die ja dann öffentlich gemacht werden wird, erwarten? Es kann davon ausgegangen werden, dass die Evaluation nicht nur den Austausch zwischen Ausbildungsverantwortlichen und den Turnusärzten fördert, sondern auch einen Diskurs zwischen den einzelnen Landesärztekammern oder innerhalb der einzelnen medizinischen Fachgebiete ermöglicht. Mit den jährlich wechselnden Modulfragen im Fragebogen können die Meinungen und Einstellungen der Ärzteschaft zu aktuellen Themen erfasst werden. In der Schweiz publizieren wir interessante Ergebnisse zu den Modulfragen in der Schweizerischen Ärztezeitung. Dies bietet auch die Möglichkeit, standespolitische Fragen faktenbasiert zu diskutieren. Ähnliches ist für Österreich geplant – also hier in der ÖÄZ.
Wie können Sie den Datenschutz der Umfrage gewährleisten? Das Retournieren der ausgefüllten Fragebogen erfolgt anonymisiert mittels beigelegtem Rückantwort-Kuvert an die ETH Zürich. Die Rohdaten und die Fragebogen bleiben bei der ETH Zürich und werden selbstverständlich nicht herausgegeben. Die Österreichische Ärztekammer erhält nur aggregierte Daten auf Basis der Ausbildungsstätte und nicht auf Basis von Einzelpersonen. Die Fragebögen lassen sich also mit Sicherheit nicht rückverfolgen. Alle Turnusärzte werden zudem am Schluss des Fragebogens gefragt, ob eine Rückmeldung an den Primararzt auch dann erfolgen darf, wenn weniger als vier Fragebogen von dieser Ausbildungsstätte vorliegen. Nur bei einem Einverständnis wird der Fragebogen für die Auswertungen an die Ausbildungsstätte miteinbezogen, ansonsten wird dieser von diesen Analysen ausgeschlossen.
Jedes Jahr werden auch besonders aktuelle Themen – in zwei Modulen – abgefragt. Welche werden das 2023 bei der Evaluierung in Österreich sein? Es werden Fragen zu den Themenbereichen Teilzeitarbeit und Vereinbarkeit von Ausbildung und Privatleben in gestellt.
Kann man die Daten zwischen Österreich und der Schweiz dann grundsätzlich vergleichen? Die Daten lassen sich zum großen Teil vergleichen, denn es wird der gleiche Fragebogen verwendet. Die angebotenen Fachrichtungen in Österreich und der Schweiz sind aber nicht identisch, dies kann in einigen Fällen die Vergleichbarkeit erschweren. Aber im Großen und Ganzen kann man das zwischen Österreich und der Schweiz schon vergleichen und die richtigen Schlüsse daraus ziehen.
© Österreichische Ärztezeitung Nr. 3 /10.02.2023