DEGAM-Leitlinien als App für Mobiltelefone – Einsatz, Anregungen und Nutzen für den Lernprozess von Studierenden im Fach Allgemeinmedizin

zma000849 10.3205/zma000849 urn:nbn:de:0183-zma0008498 Forschungsarbeit research article DEGAM-Leitlinien als App für Mobiltelefone – Einsatz, Anregungen und Nutzen für den Lernprozess von Studierenden im Fach Allgemeinmedizin Smartphone Application of Primary Care Guidelines used in Education of Medical Students Waldmann Waldmann Uta-Maria UM Dr. med.

Universität Ulm, Institut für Allgemeinmedizin, Helmholtz Straße 20, 89069 Ulm, Deutsschland, Tel.: +49 (0)731/50-31107, Fax: +49 (0)731/50-1231107Universität Ulm, Institut für Allgemeinmedizin, Ulm, Deutsschland

University of Ulm, Institute of General Practice, Helmholtz Straße 20, 89069 Ulm, Germany, Phone: +49 (0)731/50-31107, Fax: +49 (0)731/50-1231107University of Ulm, Institute of General Practice, Ulm, Germany

uta-maria.waldmann@uni-ulm.de author Weckbecker Weckbecker Klaus K Prof. Dr. med.

Universität Bonn, Institut für Hausarztmedizin, Bonn, Deutschland

University of Bonn, Institute of General Practice, Bonn, Germany

klaus.weckbecker@icloud.com author German Medical Science GMS Publishing House

Düsseldorf

610 Family medicine General Practice Primary Care guidelines medical training mobile learning app Allgemeinmedizin Leitlinien Medizinische Ausbildung Mobile Learning App medicine Humanmedizin 20120628 20130103 20130111 20130221 germ engl 1860-3572 30 1 GMS Zeitschrift für Medizinische Ausbildung GMS Z Med Ausbild Einsatz von Social Media und Web 2.0 in der (tier/zahn)medizinischen Aus- und Fortbildung 6 Hintergrund und Fragestellung: Die Leitlinien der Deutschen Gesellschaft für Allgemeinmedizin (DEGAM) zu häufigen und wichtigen Beratungsanlässen in der Hausarztpraxis sind ein zentraler Inhalt der Lehre im Fach Allgemeinmedizin. Durch die Autoren wurden sie als App für Mobiltelefone aufbereitet und stehen somit nun Hausärzten und Studierenden jederzeit zur Verfügung. Die vorliegende Studie untersucht die Fragestellung: Wie bewerten Studierende den Nutzen dieser Anwendung für ihren Lernprozess im Fach Allgemeinmedizin?Methodik: Die Kurzversionen der 15 DEGAM-Leitlinien wurden als (Smartphone-Betriebssystem-unabhängige) Web-App mit Möglichkeit der Offline-Nutzung umgesetzt und Studierenden in Kurs, Blockpraktikum, Wahlfächern und PJ (Praktisches Jahr) Allgemeinmedizin angeboten. Die Evaluation erfolgte durch eine strukturierte Befragung über die Feedbackfunktion der Moodle-Lernplattform www.elearning-allgemeinmedizin.de mit Likertskalen und Freitextkommentaren.Ergebnisse: Der Evaluations-Rücklauf kam von 14 (25%) der 56 studentischen TesterInnen aus dem Kurs Allgemeinmedizin (9), dem Blockpraktikum (1), dem PJ (1) und Wahlfächern (4). Die App selbst sehen die Studierenden als Mehrwert zur Print/PDF-Version. Sie nutzen sie häufig und erfolgreich in Nischenzeiten und vor/während/nach Lehrveranstaltungen. Neben allgemeinem Interesse / Kennenlernen der Leitlinien und Lernen wird sie zum Nachschlagen konkreter (theoretischer) Fragestellungen eingesetzt, weniger im Zusammenhang mit Patientenkontakten. Interesse und Kenntnis der Leitlinien wird durch die App gefördert, insgesamt ist die Anwendung für die Bedürfnisse dieser Usergruppe gut geeignet.Diskussion: Die Leitlinien-App wurde von Studierenden sehr positiv bewertet: Als moderne Form, ihnen die Leitlinien näher zu bringen und ihre Kenntnisse zu erweitern, gerade auch durch den flexiblen Einsatz in Nischenzeiten und das attraktive Medium Smartphone. Letzteres verhindert aber auch eine verbindliche Curriculare Implementierung in der Pflichtlehre, da nicht alle Studierenden Smartphones nutzen. Sie ist eine sinnvolle Ergänzung mit Mehrwert zu den bereits bestehenden Lernangeboten und unterstützt die Evidenz basierte Lehre im Fach Allgemeinmedizin – die nicht nur für die universitären Kurse, sondern auch für Famulaturen geeignet ist. Background and Objective: The guidelines of the German College of General Practitioners and Family Physicians (DEGAM) on frequent and important reasons for encounter in Primary Care play a central role in the teaching of Family Medicine. They were edited by the authors into an app for mobile phones, making them available at all times to General Practitioners and medical students. This study examines the issue: how useful do students consider this application within their learning process in Family Medicine? Method: The short versions of the 15 DEGAM guidelines were processed as a web app (for all smartphone software systems) including offline utilisation, and offered to students in the Family Medicine course, during clinical attachments in General Practice, on elective compulsory courses or for their final year rotation in General Practice. The evaluation was made with a structured survey using the feedback function of the Moodle learning management system [http://www.elearning-allgemeinmedizin.de] with Likert scales and free-text comments. Results: Feedback for evaluation came from 14 (25%) of the student testers from the Family Medicine course (9), the clinical attachment in General Practice (1), the final year rotation in General Practice (1) and elective compulsory courses (4). Students rated the app as an additional benefit to the printed/pdf-form. They use it frequently and successfully during waiting periods and before, during, or after lectures. In addition to general interest and a desire to become acquainted with the guidelines and to learn, the app is consulted with regard to general (theoretical) questions, rather than in connection with contact with patients. Interest in and knowledge of the guidelines is stimulated by the app, and on the whole the application can be said to be well suited to the needs of this user group. Discussion: The students evaluated the guidelines app positively: as a modern way of familiarising them with the guidelines and expanding their knowledge, particularly through its use in waiting periods and the attractive medium smartphone. However, the latter prevents a mandatory curricular use in compulsory courses, since not all students use smartphones. It is a meaningful addition to existing teaching materials and supports evidence-based teaching in Family Medicine and is suitable for use not only in university course teaching but also during clinical training. EinleitungHäufige und wichtige Beratungsanlässen in der Hausarztpraxis sind Themen der Leitlinien der Deutschen Gesellschaft für Allgemeinmedizin (DEGAM) und auch zentraler Inhalt der Lehre im Fach Allgemeinmedizin. An vielen Universitäten werden deshalb die DEGAM-Leitlinien in der Lehre eingesetzt, da sie übersichtlich Evidenz basierte, relevante und aktuelle Informationen sowie Empfehlungen zu Diagnostik und Therapie zusammenfassen. Dabei orientieren sie sich nicht an fertigen Diagnosen, sondern an Beschwerdebildern (z. B. Halsschmerz, Husten, Ohrenschmerz).Die DEGAM-Leitlinien – welche als PDF-Dokumente unter http://www.degam-leitlinien.de auch frei im Netz verfügbar sind – bestehen aus den ausführlichen Langfassungen (ca. 50 – 290 Seiten lang), den zweiseitigen Kurzversionen und weiteren Materialien wie Patienteninformationen, Informationen für Medizinische Fachangestellte, etc.Sämtliche Leitlinien in Papierform mitzuführen, ist für den Einsatz in der Lehre und der Praxis wegen des Materialumfangs unpraktikabel. Daher bereiteten die Autoren die Kurzversionen der aktuell 15 Leitlinien als App für Mobiltelefone auf, wodurch diese auf dem – meist ständigen Begleiter – Smartphone Hausärzten und Studierenden jederzeit zur Verfügung stehen . Zeitgleich zum internationalen Release der SIGN-App (Scottish Clinical Guidelines App [http://www.sign.ac.uk/guidelines/apps/index.html]) im April 2011 wurde die DEGAM-App für studentische und hausärztliche Tester kostenlos unter [http://www.elearning-allgemeinmedizin.de] bereit gestellt.Die Lehre im Fach Allgemeinmedizin findet in unterschiedlichen Lehrveranstaltungen statt (kleinere Abweichungen je nach Universität): Der Kurs Allgemeinmedizin besteht aus Vorlesung und Seminaren, wobei überwiegend kein direkter Patientenkontakt stattfindet. In vielen Universitäten werden die DEGAM-Leitlinien explizit im Kurs Allgemeinmedizin gelehrt. Das Blockpraktikum Allgemeinmedizin wurde durch die letzte Änderung der Approbationsordnung für Ärzte auf eine Mindestdauer von 2 Wochen fest gelegt und findet bis auf wenige Ausnahmen in hausärztlichen Praxen statt. Hier im Eins-zu-Eins-Setting mit einem Lehrarzt / einer Lehrärztin erhalten Studierende einen praktischen Einblick in die hausärztliche Tätigkeit, der Einsatz der DEGAM-Leitlinien ist dabei oft individuell von den Lehrenden abhängig. Im Praktischen Jahr, dem PJ Allgemeinmedizin, das ebenfalls in einer Einrichtung der hausärztlichen Versorgung stattfindet und durch die letzte Änderung der Approbationsordnung einem zunehmenden Teil der Medizinstudierenden zur Verfügung gestellt werden muss , spielen die DEGAM-Leitlinien meist eine wichtige Rolle: Zum einen in den begleitenden Seminaren als auch bei der abschließenden M2- Prüfung. In verschiedenen Wahlfächern können die Leitlinien auch eine mehr oder weniger zentrale Rolle einnehmen (z.B. „Online-Kurs Leitlinien Allgemeinmedizin“ oder „Hausärztliche Beratungsanlässe“).Der Schwerpunkt dieser Veröffentlichung liegt auf der Beschreibung von der Nutzung durch und dem Nutzen der DEGAM-Leitlinien-App für Studierende der Medizin in den verschiedenen allgemeinmedizinischen Lehrveranstaltungen.International konnte gezeigt werden, dass schon die Nutzung von PDAs (Personal Digital Devices) durch Medizinstudierende insgesamt gut angenommen wurde und einen Nutzen für den Lernprozess zu haben schien – bei insgesamt eher deskriptiven Studien ließ sich jedoch keine starke Evidenz dafür finden . Die PDAs wurden zunehmend durch Smartphones abgelöst, die sich einer weiten Verbreitung bei Medizinstudierenden und Ärzte erfreuen – mit deutlich steigender Tendenz , , . Auch die Nutzung in der Lehre nimmt zu: Wurden sie früher eher von Medizinstudierenden in höheren Semestern genutzt, sind sie jetzt bei allen Studierenden gleichermaßen zu finden , , . In Übersichten, welche Apps im Gesundheitswesen genutzt werden, sind bei Medizinstudierenden vor allem Apps zur Diagnosefindung und Therapie sowie zum Nachschlagen von Medikamenten beliebt, außerdem – besonders bei nicht-klinischen Semestern – Apps zur Wiederholung des Lernstoffs , , , . National und international wünschen sich Studierende weitere Apps zum Lernen, Nachschlagen und als Entscheidungshilfe in klinischen Situationen , , , . Apps mit den Leitlinien einer deutschen Fachgesellschaft oder den Nationalen Versorgungsleitlinien liegen zwar vor u.a. [https://www.aerzteblatt.de/archiv/128463/App-Leitlinien-Innere-Medizin], , eine Befragung von Studierenden zum Nutzen dieser Anwendungen für die universitäre Lehre in diesen Fächern lässt sich jedoch nicht finden.Die vorliegende Untersuchung soll konkret den Einsatz einer Leitlinien-App in der medizinischen Ausbildung beschreiben, wie die App von den Studierenden angenommen und genutzt wird, wie hilfreich sie für den Lernprozess und die Auseinandersetzung mit Leitlinien ist, und welche Vorschläge Studierende zur Verbesserung der Nutzung der App und zum Einsatz in der Lehre in dem Fach haben.FragestellungWie bewerten Studierende den Nutzen der DEGAM-Leitlinien-App für ihren Lernprozess im Fach Allgemeinmedizin? Welche Anregungen haben sie für einen Einsatz in der Lehre? IntroductionThe guidelines of the German College of General Practitioners and Family Physicians (DEGAM) target the most frequent and important reasons for encounter in Primary Care. They are also of central importance in the teaching of Family Medicine/General Practice. For this reason many universities incorporate the DEGAM guidelines into the syllabus, since they offer a concise summary of evidence-based, relevant and up to date information as well as recommendations on diagnostics and treatment. These recommendations are not based on final diagnoses but rather on symptoms (e.g. sore throat, coughing, ear ache). The DEGAM guidelines, which are also freely available in the internet as pdf-documents, consist of the detailed long versions (50-290 pages in length), the two-page short versions and other material such as patient information and information for practice nurses etc. [http://www.degam-leitlinien.de].The sheer volume of material makes it impracticable to carry the complete set of guidelines in printed form for use in theory or in practice. For this reason the authors processed the short versions of the 15 current Guidelines as an app for mobile phones, thus making them available at all times on the smartphones which, in most cases, are the constant companion of General Practitioners and students . Simultaneously with the international release of the SIGN-app (Scottish Clinical Guidelines App [http://www.sign.ac.uk/guidelines/apps/index.html]) in April 2011, the DEGAM-app was placed free of charge at the disposal of under- and post-graduate testers at [http://www.elearning-allgemeinmedizin.de].The teaching of Family Medicine/General Practice at university is done in different courses and clinical attachments (with slight variation at different universities): the Family Medicine course consists of lectures and seminars, whereby generally there is no direct contact with patients. In many universities the DEGAM-guidelines are taught explicitly during the Family Medicine course. In the latest modification of the Order Regulating Licencing to Practise Medicine the clinical attachment in General Practice, which takes place with very few exceptions in a GP’s surgery, was set at a minimum of two weeks. Here, in a one-to-one teaching situation with a GP students gain a practical insight into the work of a General Practitioner, during which time the use of the DEGAM-guidelines often depends on the teacher. During the final year rotation in General Practice, which is also usually completed in a GP’s surgery or clinic, and which according to the latest modification of the Medical Licensure Act must be made available to an increasing number of medical students , the DEGAM-guidelines usually play an important role: firstly in the accompanying seminars and then in the concluding state examination. In various elective compulsory courses the guidelines may also play a greater or lesser role (e.g. “Online Course on General Practice Guidelines” or “Reasons for Encounter in General Practice”). The emphasis of this publication lies on the description of the use of the DEGAM-guideline app by medical students during different stages of their studies of family medicine, and of its usefulness.It has been shown internationally that the use of PDAs (Personal Digital Devices) by medical students has on the whole been well received and they seem to have some usefulness in the learning process, whereby the generally descriptive surveys provide no unequivocal supporting evidence . The PDAs were superseded more and more by smartphones, which are now very common among medical students and doctors, with a clear upward trend , , . Their use in training is also increasing: whereas they were formerly used mainly by senior medical students, they are now commonplace among students of all years , , . In reviews of which apps are used in health care, those concerning diagnosis and treatment and for reference with regard to medication are the most popular among medical students, as well as, particularly during non-clinical semesters, apps concerning revision of learning matter , , , . Nationally, and internationally, students want additional apps for learning and for reference, and for decision guidance in clinical situations , , , . Apps already exist with the guidelines of German Medical associations / Colleges or with the German Disease Management Guidelines [e.g. https://www.aerzteblatt.de/archiv/128463/App-Leitlinien-Innere-Medizin], , but there does not appear to be an evaluation regarding the usefulness of the applications in undergraduate medical education. This study is intended to provide a description of the use of a guideline app in medical training, of how the app is accepted and used by the students, of its benefits in the learning process and in dealing with guidelines. It also looks into which recommendations students have regarding improvements in the usefulness of the app and its use within undergraduate training in Family Medicine. Objectives of this studyHow do students judge the benefit of the DEGAM-guideline app for their learning process in the field of Family Medicine/General Practice? What suggestions do they have for its deployment in training / teaching? MethodenDEGAM-Leitlinien als AppEs wurde für die Umsetzung die Form der Web-App gewählt, die über den integrierten Browser der mobilen Endgeräte aus dem Internet geladen und so ohne Installation genutzt werden kann. Sie ist somit unabhängig vom Betriebssystem und kann von jedem Smartphone und PC dargestellt werden, meist ist auch eine offline-Nutzung möglich.In der DEGAM-Leitlinien-App sind alle aktuell 15 Leitlinien von der Startseite aus direkt erreichbar (siehe Abbildung 1 ). Die Kurzfassungen wurden Wort für Wort übernommen und – um es für die kleinen Smartphone-Bildschirme lesbar zu machen – in kleinere Abschnitte herunter gebrochen mit Unterüberschriften, welche über ein Inhaltsverzeichnis direkt ansteuerbar und auch untereinander verlinkt sind.Abhängig von den Inhalten der Leitlinien (z. B. verschachtelte Tabellen) wurden auch aufklappbare Untermenüs, zoom-bare Diagramme, Flussdiagramme, interaktive Entscheidungsbäume sowie statische und dynamische Algorithmen verwendet (siehe Abbildung 2 ).Im April 2011 wurde die erste Fassung der App für den Einsatz in Studium und Praxis freigegeben, das letzte (3.) Update erfolgte am 1. März 2012.Rekrutierung der TesterStudentische TesterInnen Studierende wurden im Seminar und der Vorlesung des Kurses Allgemeinmedizin, sowie in den Wahlfächern „Online-Kurs Leitlinien“ und „Hausärztliche Beratungsanlässe“ über die App informiert. Zusätzlich wurde eine Info-Email über die Kursverteiler aller allgemeinmedizinischen Kurse auf der Lernplattform der Universität Ulm verschickt. Universitätsübergreifend wurden die Teilnehmer der PJ-Plattform Allgemeinmedizin per Email zum App Testen eingeladen und Lehrbeauftragte an verschiedenen Universitäten gebeten, ihre Studierenden zu informieren.Test-User Alle, die sich für die App interessierten, konnten sich auf http://www.elearning-allgemeinmedizin.de für die App registrieren und erhielten kostenlosen Zugang zur Anwendung. Dafür wurden sie gebeten, nach einigen Wochen Nutzung anonym ein strukturiertes Feedback auszufüllen (der Link dazu lag den Zugangsdaten bei). Eine verbindliche Regelung mit Sanktionen bei Nicht-Abgabe des Feedbacks bestand nicht. Es folgten drei weitere Aufrufe / Erinnerungen zur Evaluation per Email (Juli 2011, April 2012, Juli 2012).Feedback / Evaluation Die Evaluation erfolgte über die Feedback-Funktion der Moodle-Plattform mit Likertskalen und Freitextkommentaren. Dabei wurden folgende Daten und Informationen erfasst:Demographische Daten (Alter, Geschlecht, Studierende / Ärzte)Kommentare zur App (Einrichtung, Gestaltung, Übersichtlichkeit)Wann, wo und wofür die App genutzt wurdeInteresse an Leitlinien und Kenntnisse der Leitlinien vorher/hinterherEignung für die eigenen Bedürfnisse, Positives, Kritik und AnregungenAnregungen für den Einsatz in der LehreDer Fragebogen wurde induktiv auf der Basis bisheriger Evaluationen erstellt und nach erfolgreicher Testung durch vier Studierende und zwei Hausärzte unverändert übernommen. MethodsDEGAM-guidelines as a smartphone applicationFor implementation the form “web-app” was chosen, which can be viewed (and downloaded into the cache) from the internet with the integrated browser of the mobile device and which can be used without an installation process. It is thus independent of the operating system and can be displayed on any smartphone or PC, and mostly can even be used in offline mode. At present 15 guidelines can be reached directly from the start screen of the DEGAM guideline app (see Figure 1 ). The short versions were copied word for word and, in order to make them legible on small smartphone displays, broken down into smaller units with headings which are directly accessible via a table of contents and which are linked with one another. Depending on the contents of the guidelines (for instance nested charts) use was also made of collapsible submenus, zoomable diagrams, flow charts and interactive decision trees as well as static and dynamic algorithms (see Figure 2 ). The first version of the app was released in April 2011 for use in undergraduate study and General Practice. The most recent (third) update was released on 1st March 2012.Recruitment of test personsStudent testers Students were told about the app during seminars and lectures of the Family Medicine course, as well as in the elective compulsory courses “Online Course on General Practice Guidelines” or “Reasons for Encounter in General Practice”. Additionally an email was sent out through the mailing lists of the other courses and attachments in Family Medicine on the learning platform of the University of Ulm. Final Year (PJ) students from different universities participating in the PJ-Platform Family Medicine [8] were invited to test the app and university lecturers at various universities were asked to inform their students. Test-UsersAll those who were interested in the app were able to register for it on the website [http://www.elearning-allgemeinmedizin.de] and they received free of charge access to the application. In return they were requested, after using the app for some weeks, to fill out an anonymous, structured feedback (the link to which was attached to the login data). There was no mandatory arrangement with sanctions for failing to provide the feedback. Three additional appeals / reminders for the evaluation were made by email (July 2011, April 2012, July 2012).Feedback / Evaluation Evaluation was done through the feedback function of the Moodle platform with Likert scales and free text comments, during which process the following data and information was collected: demographic data (age, sex, student / doctor)comments on the app (composition, layout, clarity)when, where and how the app was usedinterest in the guidelines and previous knowledge of themsuitability for one’s own requirements, positives, criticism and suggestionssuggestions for use in trainingThe questionnaire was compiled inductively on the basis of previous evaluations and adopted without alteration after testing by four students and two General Practitioners. ErgebnisseNutzer, Rücklauf und Demographische Daten89 Studierende haben sich die Zugangsdaten zur App schicken lassen (Registrierung).56 Studierende haben die App herunter geladen.14 studentische Evaluationen wurden abgegeben (das entspricht einem Rücklauf von 25%).Die demographischen Daten der studentischen Tester, welche die Evaluation ausgefüllt haben, sind Tabelle 1 zu entnehmen.Nutzung von Smartphone und Leitlinien vorherEin großer Teil der Studierenden nutzte das Smartphone schon vorher viel für „berufliche“ Zwecke, also für das Studium, die Leitliniennutzung hingegen war recht unterschiedlich und deutlich seltener – siehe Tabelle 2 .Download und Gestaltung der AppRückmeldungen zum Download, der Installation, der Übersichtlichkeit und der Gestaltung der App sind in Tabelle 3 aufgeführt – alle Aspekte erreichten durchschnittliche Bewertungen zwischen 1,4 und 2,0. Ebenfalls dort aufgeführt ist die Einschätzung auf die Frage nach dem Mehrwert der Anwendung im Vergleich zur Papier-/digitalen Form der Kurzversionen der Leitlinien, und ob sie eine sinnvolle Ergänzung seien, was deutlich bestätigt wurde.Die Bewertungen mit 6-stufigen Likertskalen entsprechen mit den Abstufungen von 1 (= „sehr ansprechend / sehr übersichtlich / …“) bis 6 (= „gefällt mir nicht / konnte mich gar nicht zurechtfinden / …“) in etwa den uns in Deutschland bekannten Schulnoten. Daher wird der errechnete Durchschnitt der Antworten auch als „Note“ bezeichnet.Einsatz-SzenarienWie nützlich / hilfreich die Anwendung in verschiedenen Einsatzszenarien von den Testern bewertet wurde, ist in den Tabellen 4 und 5 abzulesen:„Wann“, also in welchem Zusammenhang die Anwendung angewendet wurde und ob sie da als hilfreich empfunden wurde, wird in Tabelle 4 dargestellt. Dabei wurde die Nutzung im Rahmen von Patientenkontakten und vor allem auf Hausbesuchen selten angegeben (bei Hausbesuchen 3 von 14 Testern) und mit 3,0 respektive 5,3 schlecht bewertet. Im Gegensatz dazu wurde die Nutzung in Nischenzeiten und im Rahmen von Lehrveranstaltungen häufig (12 bzw. 13/14) und mit 2,0 respektive 2,1 gut bewertet. Das „Wofür“ wird in Tabelle 5 aufgeführt. Dabei war die Nutzung zum Lernen / zur Fortbildung, zum allgemeinen Nachschlagen und bei konkreten theoretischen Fragestellungen sowie zur Vor- und Nachbereitung von Veranstaltungen sehr häufig und wurde gut bewertet („Note“ 1,6 – 1,9). Die Nutzung bei konkreten Fragestellungen zu Patienten wurde seltener angegeben und etwas schlechter beurteilt (7/14, „Note“ 2,4).Interesse an Leitlinien und Kenntnis der Leitlinien Studierende schätzten ihr Interesse an Leitlinien vor der Nutzung der App als mäßig ein („Note“ 2,9), ihre Kenntnis der Leitlinien als schlecht („Note“ 4,4) – siehe Tabelle 6 . Alle erlebten eine positive Veränderung durch die Anwendung der App - siehe Tabelle 7 .GesamturteilAbschließend wurde noch nach der Gesamtbeurteilung der Anwendung gefragt: Insgesamt ist die Anwendung für die Bedürfnisse der Tester hilfreich („Note“ 2,1, 14/14). Sie konnte ihnen die Leitlinien näher bringen („Note“ 1,7, 14/14) – siehe Tabelle 8 .FreitextantwortenEs wurden verschiedene Fragen mit Möglichkeit zur Freitextantwort aufgenommen:„Folgendes finde ich positiv an dieser Anwendung:“„Folgendes finde ich negativ, es sollte an dieser Anwendung verbessert werden:“„Was würden Sie sich noch wünschen, damit diese Anwendung Ihnen noch mehr nutzen könnte? Wie könnte diese Anwendung für die Nutzung in der Praxis / im Studium optimiert werden? Haben Sie insgesamt noch Anregungen?”Die Antworten und Kommentare dazu werden an den entsprechenden Stellen in der Diskussion aufgeführt. ResultsUsers, response rate and demographic data89 students asked to be sent the access data for the app (registration).56 students downloaded the app.14 student evaluations were submitted (a response rate of 25%).The demographic data of the student testers who filled out the evaluation is listed in table 1 . Previous use of smartphone and guidelinesA large proportion of students had already previously made regular use of a smartphone for “professional” purposes, i.e.: for academic studies. Use of the guidelines, on the other hand, was quite varied and clearly less frequent – see table 2 . Download and design of the appResponse to the download, installation, clarity and design of the app is listed in table 3 – all aspects achieved a rating of between 1.4 and 2.0. Also listed is the assessment of the question of the additional benefit of the application in comparison with the printed or digital form of the short versions of the guidelines, and whether it were a useful addition, which was clearly confirmed. The responses with 6-point Likert scales correspond, with grading from 1 (“very good / very clear /…”) to 6 (“don’t like it / couldn’t use it / …”) approximately with the grading scheme in the German school system, and the computed average of the responses is therefore referred to as the “grade”. Application scenarios The usefulness / helpfulness of the application in various scenarios, as it was assessed by the testers, can be seen in table 4 and table 5 :„When“, i.e. in which situation the application was used, and whether it was considered to be helpful in that situation, is shown in table 4 , whereby use in connection with patient contacts and particularly house calls was rarely specified (house calls 3 of 14 testers) and poorly graded, with 3.0 and 5.3. By contrast, use during waiting periods and in the context of lectures, frequently (12 and 13/14) and well graded, with 2.0 and 2.1. The “what for” is listed in table 5 , whereby use in learning and further training, general reference, specific theoretical issues and the preparation for and following-up of lectures was often specified and well graded (“grades 1.6 – 1.9”). Use in the context of specific patient-related issues was mentioned less frequently and was graded less well (7/14, “grade” 2.4). Interest in guidelines and knowledge of the guidelines Students assessed their interest in guidelines as moderate (“grade” 2.9) before using the app and their knowledge of the guidelines as poor (“grade” 4.4) – see table 6 . All of them experienced a positive change through the use of the app – see table 7 . Overall assessment:Finally the testers were asked to give an overall assessment of the application: on the whole the application is helpful in terms of the testers‘ requirements (“grade” 2.1, 14/14). It was capable of giving them a better understanding of the guidelines (“grade” 1.7., 14/14) – see table 8 .Free text answersA number of questions were included which offered the possibility of giving a free text answer:“I find the following aspects of the application positive:”“I find the following aspects negative, the application should be improved in those areas:”“What would you wish for in order to be able to make even more use of the application? How could the app be optimised for use in practice / in the learning process? Overall, do you have any suggestions?”The answers and comments are given at the appropriate places within the discussion. DiskussionMethodenkritik und LimitationenEine Schwäche dieser Erhebung ist die geringe Zahl an Rückmeldungen, die sich auch durch drei Erinnerungen per Email nicht wesentlich erhöhen ließ. Die Aussagekraft ist dadurch reduziert, jedoch lassen sich durchaus Tendenzen erkennen. Durch die geringe Zahl an Rückmeldungen entsteht eine gewisse Selektion: Die Wahrscheinlichkeit, dass eher Interessierte (oder besonders Verärgerte) antworten, ist dadurch erhöht. Da die Anwendung momentan ein freiwilliges Zusatzangebot darstellt und auf mögliche Einsatzszenarien getestet werden soll, waren gerade auch die Interessierten und Kritischen als Zielgruppe dieser Erhebung interessant. Zwei Hauptprobleme, welche zu der geringen Zahl an Studierenden geführt hat, die trotz Interesse, aktiver Anforderung und Zusendung der persönlichen Zugangsdaten die App nicht heruntergeladen haben, konnten in einer weiteren Befragung identifiziert werden: Diese waren zum einen der Zugang zur App über ein persönliches Login auf einer Plattform, zum andern der ungewohnte „Download“-Weg der Web-App, der sich vom gewohnten App-Store-Prozedere wesentlich unterscheidet .Durch Erstellung nativer Apps und die Bereitstellung eines freien Zugangs ohne persönliche Registrierung könnten dieses Barrieren überwunden werden, allerdings sind dafür noch finanzielle (Kosten für Programmierung) und rechtliche Hürden (Copyright-Auflagen) zu überwinden.Diese Erhebung ist keine abschließende Evaluationsstudie, für die eine größere Zahl an Rückmeldungen notwendig gewesen wäre, sondern es handelt sich um eine Machbarkeits-, eine Pilotstudie, in der auch die qualitative Beschreibung einen großen Raum einnimmt, nämlich wie diese App von Studierenden eingesetzt werden kann, und eine Ideensammlung, welche Szenarien sich Studierende dafür in der Lehre vorstellen können. Die Auswertung erfolgt also auch zu einem wichtigen Teil qualitativ, und da können auch geringere Fallzahlen Anregungen geben.Zielgruppe und NutzerDiese Anwendung, in der die Kurzversionen der DEGAM-Leitlinien Eins-zu-Eins für den kleinen Smartphone-Bildschirm aufbereitet wurden, ist für Studierende der Medizin und für Ärzte in Weiterbildung bis Fachärzte erstellt worden, die sich mit der Patientenversorgung im Rahmen der Primärversorgung (Studium, Theorie, Praxis) beschäftigen. Die bisherige Nutzung des Smartphones im beruflichen / universitären Umfeld wurde von „gar nicht“ bis „sehr viel“ angegeben, wobei deutlich mehr regelmäßige Nutzer als Smartphone-Neulinge dabei waren. Dies deckt sich mit den Erhebung von Schulz et al. 2012 , die eine hohe Smartphone-Nutzung von Studierenden der Zahn- und Humanmedizin und den zunehmenden Wunsch nach mehr eLearning-Angeboten von 89% der Befragten beschrieben. Die hohe Nutzung von Smartphones und die Forderung von Medizinstudierenden nach mehr Apps für ihren Lernprozess werden auch international im Survey von Payne et al. dargestellt , und Mosa et al. beschreiben, dass vor allem jüngere ÄrztInnen und Studierende PDAs (Personal Digital Assistants) nutzten, die jetzt von Smartphones abgelöst werden .Die Nutzung von Leitlinien bisher tendierte laut Angaben der Studierenden jedoch eher in Richtung „weniger“ (der Durchschnittswert als vereinfachendes Schulnoten-Äquivalent lag bei 3,6), die Kenntnisse von (DEGAM-) Leitlinien wurde als noch schlechter eingestuft („Note“ 4,4), wobei durchaus Interesse an Leitlinien bekundet wurde („Note 2,9“) – ein gewisses Interesse musste bestanden haben, denn sonst hätten sich die Studierenden nicht als Tester gemeldet und die App auf ihr Smartphone geladen.Installation und Rückmeldungen zur AppDownload und Installation dieser (ungewohnten) Web-App funktionierte bei dieser Smartphone-geübten Gruppe weitgehend problemlos und sowohl Übersichtlichkeit als auch Gestaltung wurden gut bewertet. Bei den „Noten“ 1,6 respektive 2,0 fließen auch noch Evaluationen zum Zeitpunkt der ersten App-Version von April 2011 mit ein, auf deren Anregung hin („etwas mehr Farbe bitte“) die farblichen und gestalterischen Verbesserungen der 2. und 3. Version durchgeführt wurden.Nutzung der AnwendungDie Gelegenheiten, wann Studierende die Anwendung genutzt haben, waren vor allem „In Nischenzeiten wie Warten, in öffentlichen Verkehrsmitteln, etc.“ und „Vor / während / nach (Lehr-) Veranstaltungen“. Dies deckt sich mit den theoretischen Überlegungen von Lemos et al., die bei der Erstellung Ihres Konzepts „Wie kann mLearning (mobile Learning) die Qualität der medizinischen Lehre verbessern?“ die Nutzung von Leerlaufzeiten zum Lernensowie die Möglichkeit, Umgebungsinformationen mit einzubeziehen (situiertes Lernen) propagieren . Auch Mosa et al. beschreiben diesen Einsatz von Apps bei Medizinstudierenden zum Lernen und Nachschlagen in Nischenzeiten, in denen kein Lehrbuch zur Verfügung steht .Bei der Nutzung in Nischenzeiten und im Rahmen von Veranstaltungen wurde die Anwendung als hilfreich bewertet („Noten“ 2,0 bzw. 2,1). Die Nutzung bei diesen Gelegenheiten ist auch einer der Gründe, warum alle Studierenden der Anwendung einen deutlichen Mehrwert zur Papierversion und den PDFs der Kurzfassungen der Leitlinien bescheinigten („Note“ 1,6).„Ich habe die LL immer dabei und spare mir jede Menge Papierkrieg. Zum schnellen Nachschlagen ideal.“„Immer mit dabei, Printversion müsste sonst immer mitgeschleppt werden“Zur Nutzung im Rahmen von Patientenkontakten oder Hausbesuchen gab es nur wenige und sehr unterschiedliche Antworten, was auch durch fehlende Patientenkontakte der meisten rückmeldenden Studierenden erklärt werden kann (nur 2 in Kursen mit Patientenkontakt: 1 im Blockpraktikum und 1 im PJ).Dieser Hintergrund spiegelt sich auch darin wieder, wofür die Anwendung genutzt wurde, nämlich „Allgemeines Interesse, Kennenlernen und Nachschlagen der Leitlinien“, „zum Lernen und zur eigenen Fortbildung”, „Für eine Veranstaltung (Aufgaben, Vor- und Nachbereitung)“ und zum „Nachschlagen einer konkreten (theoretischen) Fragestellung“. Teilweise wurde sie auch zum „Nachschlagen einer konkreten Fragestellung bei einem Patienten“ genutzt, wobei da auch die virtuellen Patienten des „Online-Kurses Leitlinien Allgemeinmedizin“ eingeschlossen wurden. Wie hilfreich und nützlich die App für diese erst genannten Anwendungsszenarien war, wurde mit „Noten“ zwischen 1,6 und 1,9 bewertet, bei konkreten Fragestellungen bei Patienten reichten die Bewertungen von 1 bis 6 bei nur wenigen Antworten („Note“ 2,4). (Zwei Personen – beide in Kursen ohne Patientenkontakt – haben bei jeder Evaluationsfrage eine Bewertung abgegeben, obwohl sie explizit aufgefordert worden waren, nur die Fragen zu bewerten, die auf sie zutreffen: Beide bewerteten relativ häufig Items mit „6“ wie z.B. „Nutzen bei Hausbesuch“, „Nutzen vor / während / nach Patientenkontakten“. Es liegt nahe, dass mit diesen schlechten Bewertungen eigentlich „nicht zutreffend“ gemeint war. Da aber schon aus rein wissenschaftstheoretischer Sicht die Aussagen der Studienteilnehmenden ernst genommen werden müssen, wurden diese negativen Bewertungen dennoch nicht aus der Auswertung heraus genommen und fließen auch in die „Durchschnittsnoten“ mit ein.)Einfluss der Anwendung auf Interesse und Kenntnis von LeitlinienNachdem das Interesse an und die Kenntnisse von Leitlinien vor der Nutzung der Anwendung als eher gering beurteilt wurden (s.o.), wurde bei beiden Kriterien eine Verbesserung durch die Anwendung angegeben. Dies spiegelte sich auch in den Freitextantworten wider:„Ich finde es gut, dass es die LL als App gibt. Da es ja doch ein sehr trockenes Thema ist, ist die Kombi mit dem Smartphone doch optimal, um das Interesse zu wecken.“Insgesamt hatte die Anwendung den Nutzern die Leitlinien näher gebracht („Note“ 1,7) und wurde als „hilfreich für ihre Bedürfnisse“ („Note“ 2,1) bewertet. Da die Leitlinien prüfungsrelevant sind, ist diese positive Beurteilung der App durch Studierende ein starkes Argument, diese Anwendung in die Lehre zu integrieren.Anregungen für den Einsatz in der LehreDie Studierenden gaben gerade die praktischen Anteile der universitären Lehre als geeignete Einsatzszenarien für die Anwendung an:„Die Anwendung ist sehr gut geeignet für den Online-Kurs LL. Auch eine Anwendung im Blockpraktikum und im PJ kann ich mir sehr gut vorstellen.“„Hinweis als Nachschlagemöglichkeit Blockpraktikum, Vorbereitung Blockkurs Allgemeinmedizin“Aber auch für die theoretischen Kurse ist sie geeignet:„Habe die Anwendung genutzt, um mich auf Vorlesungen oder Kurse vorzubereiten. … gute Möglichkeit, um sich vor dem Unterricht noch mal die wichtigsten Dinge in Erinnerung zu rufen.“Sie sahen aber auch die Einsatz-Beschränkungen:"Einen 'erzwungenen' Einsatz in Vorlesung oder im Seminar des Kurssemesters halte ich für schwierig, da zum einen bei weitem nicht jeder über ein Smartphone verfügt, zum anderen ein 'Benutzungszwang' bei Gruppenarbeiten nicht zielführend wäre.“In Hinblick auf die Änderung der Approbationsordnung vom 11.5.2012 mit Einführung der Pflicht-Famulatur Allgemeinmedizin bietet sich die Anwendung auch an:„Man könnte die App bestimmt auch sehr gut bei einer Famulatur in der Praxis benutzen.“Positive Kommentare zur AnwendungDie App an sich kam gut an als innovative Anwendung:„Ich war von der DEGAM-Leitlinien-Anwendung sehr angetan. Endlich mal ein Schritt in die richtige Richtung und weg von den staubalten Systemen.“„Ich habe die LL immer dabei und spare mir jede Menge Papierkrieg. Zum schnellen Nachschlagen ideal.“Und sogar für die Anwendung am PC, wo auf den größeren Monitoren die PDFs der Kurzfassungen gut lesbar wären, wurde von Studierenden ein Mehrwert gesehen – ein Vorteil, der sich auch auf Tablets / iPads erstreckt:„Hierfür [Bearbeiten von Patientenfällen am PC] war die Anwendung sehr hilfreich, da nicht die einzelnen Leitlinien mühsam durchsucht werden mussten, sondern alles sortiert und übersichtlich vorlag. Die wichtigsten Punkte sind hervorgehoben, was schnell zu den gesuchten Lösungen führte.“„Informationen optisch sehr angenehm aufbereitet und man wurde von den Informationen nicht so erschlagen, wie es bei den "vollgestopften" Kurzversionen der Leitlinien der Fall ist.“Gelobt wurden vielfach die Aufmachung und die Übersichtlichkeit:„Die optische Aufmachung ist sehr ansprechend und die Informationen sind leicht zu finden und sehr übersichtlich dargestellt.“(Auch wenn dieser Meinung vereinzelt widersprochen wurde:„In der bisherigen Form finde ich die Anwendung relativ frei von Nutzen, da höchst unübersichtlich und schlecht strukturiert“.)Kritik und Anregungen für die Verbesserung der AnwendungBei den ersten Versionen wurde „mehr Farbe“ gefordert, was bereits umgesetzt wurde. Eine beklagte Textlastigkeit liegt jedoch in den Vorlagen (die Kurzversionen der Leitlinien wurden Wort für Wort übernommen, Abbildungen gibt es außer Flussdiagrammen keine). Gewünschte interaktive Algorithmen sind ebenfalls abhängig von den Vorlagen und konnten sehr gut bei der neuesten Leitlinie „Brustschmerz“ umgesetzt werden.Bisher wurde vor allem von Hausärzten, die die Leitlinien regelmäßig anwenden, eine Ergänzung mit den Langfassungen der Leitlinien angeregt. Aber auch von studentischer Seite kam dieser Wunsch:„Außerdem wäre es schön, wenn Patienteninformationen, Langfassungen und etwaige zusätzlichen Informationen, die bisher nur aus der Web-App heraus verlinkt sind, zusammen mit der App für den Offline-Gebrauch gespeichert werden könnten.“Außerdem wurde mehrfach die Anregung für eine Suchfunktion gegeben:„eine Suchfunktion wäre gut um Dinge schneller zu finden“Als native Apps in App-Stores eingestellt würde der Zugang für Studierende vereinfacht und ein sicherer Offline-Betrieb gewährleistet werden. DiscussionCritical view on methods and limitationsA weak point of the survey is the very small number of responses, which could not be significantly increased even with three reminders per email. Its validity is thus reduced, but tendencies can nevertheless be observed. The small number of responses gives rise to a certain selectivity: the possibility is increased that interested persons (or ones who are particularly annoyed) respond. Since the application is currently a voluntary additional offer which is to be tested for possible uses, precisely these interested and critical persons were seen to be an interesting target group for this survey. Two major problems which led to a large number of students not downloading the app despite being interested and having actively requested and received personal access data, was identified in an additional survey: the access to the app through an individual log-in on a platform, and the unfamiliar download route of the web-app, which differs greatly from the usual app-store process . These barriers could be overcome through the development of a native app and free access without login, but in this case there would be financial (programming costs) and legal (copyright obligations) difficulties to resolve.This survey is not a conclusive evaluation study, for which a larger number of responses would have been required, but it represents a feasibility study, a pilot survey in which emphasis is also placed on the qualitative description, namely the ways in which the app can be used by students, and a collection of ideas - which scenarios students themselves could imagine for its use in teaching. The evaluation has been therefore been made to a great extent qualitatively, in which case smaller numbers of responses may provide suggestions. Target group and usersThis application, in which the short versions of the DEGAM Guidelines were processed on a one-to-one basis for the small smartphone screen, is intended for the use of undergraduate medical students and doctors during and after completing specialist training, who are concerned with patient-centered care in the context of primary care (medical school, theory, practice). Previous use of a smartphone in work / university environments was quoted as ranging from “not at all” to “very often”, whereby there were considerably more regular users than smartphone-newcomers. This corresponds with the study by Schulz et al. 2012 , which describes a high degree of smartphone usage among students of dentistry and medicine and the increasing wish of 89% of respondents for more e-learning offers. This high degree of smartphone usage and the demand of medical students for more apps for their learning process have also been shown internationally in the study by Payne et al. and Mosa et al., that in particular young doctors and students made use of PDAs (Personal Digital Assistants), which are now increasingly being replaced by smartphones . In the responses of the students, previous use of guidelines tended towards “to a lesser extent” (expressed as a simplified school grade – 1 being best and 6 the lowest grade – this was 3.6) and knowledge of the DEGAM Guidelines was said to be even poorer (“grade” 4.4) whereby a certain level of interest was said to exist (“grade” 2.9) – of course this had to be the case, otherwise the students would not have registered as testers and downloaded the app onto their smartphone. Installation and feedback on the appDownload and installation of this (unfamiliar) web-app worked well and without any great problems among these in this smartphone experienced group, and clarity of arrangement and design were judged positively. The grades 1.6 and 2.0 take into account evaluations made of the first version of the app in April 2011, as a result of which (“more colour please”) improvements were made in colour and design for the 2nd and 3rd versions. Use of the applicationSituations in which students used the app were primarily “in waiting periods”, “while using public transport” etc., and “before/during/after lectures”. This corresponds with the theoretical considerations of Lemos et al., who propagate the idea of using waiting periods for learning, and the possibility of incorporating environmental information (situated learning) into their concept “How can m-learning (mobile learning) improve the quality of the teaching of medicine?” . Mosa et al. also describe this usage of apps by medical students for learning and revision during spare moments in medical school, when no textbook is available. .The application was judged to be helpful with regard to use in spare moments / waiting periods and in connection with lectures (“grades” 2.0 and 2.1). Deployment in these situations is also one of the reasons why all students attested the application a clear advantage over the printed and pdf-versions of the guidelines (“grade” 1.6).„I’ve always got the guidelines with me and save a lot of paper. Perfect for quick reference.“„Always with me, and otherwise I’d have to carry the print version around“With regard to patient contact there were few and very varied responses, which can be explained by the lack of patient contact of the majority of responding students (only two had contact with patients: one in a clinical attachment and one in his final year rotation in General Practice). This background is reflected again in the question of how the application was used: namely “general interest, learning about the guidelines and for reference reasons”, “to learn and expand my own knowledge”, “for a lecture (homework, preparation, follow-up)” and “consultation regarding a specific (theoretical) question”. It was also sometimes “consulted with regard to a specific patient-based question”, whereby the virtual patients of the “Online Course on General Practice Guidelines” were included. Helpfulness and usefulness of the app when used in the former ways were “graded” between 1.6 and 1.9, in specific patient-related questions the assessments ranged from 1 to 6 with few responses (“grade” 2.4). (Two persons, both on courses not involving patient contact – gave an answer to each evaluation question, although they were explicitly asked to only provide a response to those questions which actually applied to them: both frequently evaluated items with a “6”; for instance “use during house visits” and “use before/during/after patient contact”. Obviously these negative evaluations really mean: “does not apply”. However, since from a purely scientific point of view the comments of all participants in the study have to be taken seriously, these negative assessments were not removed from the evaluation and were therefore incorporated into the “average grades”.) Influence of the application on interest in, and knowledge of the, guidelinesAfter interest in, and knowledge of, the guidelines had been judged as being poor before use of the application (see above), an improvement was registered in both categories after using the application. This is reflected in free text comments: “I think it’s a good thing that the guidelines are available as an app. It’s a very dry subject, so the combination with the smartphone is a perfect way to arouse interest”. All in all the application had given the users a better understanding of the guidelines (“grade” 1.7) and it was considered to be “helpful to their requirements”. Since the guidelines are relevant to examinations, this positive assessment of the app by students is a strong argument for the integration of the application into the training. Suggestions for use in medical trainingThe students named the practical sections of the training as being particularly suitable for use of the application: “The application is very suitable for the Online Guidelines Course. I could also imagine it being useful in clinical attachment and during the final year”. “Tip as a source of reference and for preparation for the clinical attachment in General Practice”But it is also suitable for university courses:“Used the app to prepare for lectures and courses …… good way of reminding oneself of the most important facts before a lecture.” But they also saw the limitations in usage:“I think a “compulsory” use in lectures or seminars would be problematical, because by no means all students have a smartphone, and compulsory use in team work would not be productive.” In view of the alterations made in the Medical Licensure Act of 11.5.2012 with the introduction of a compulsory elective period in General Practice / Primary Care [2], the application also lends itself to use: “The app would certainly come in very handy during an elective in General Practice.”Positive comments on the applicationThe app itself was well received as an innovative application:“I was pretty much taken with the DEGAM Guideline app. A move in the right direction at last, away from all those fusty old systems.” “I‘ve always got the Guidelines with me and save a whole load of paper. Ideal for quick reference.” And students even saw a benefit in using the application on PCs, although on the larger screen the pdf-versions of the short versions of the guidelines would have been easily legible, a benefit which extended to include tablets and iPads: “For this [working on patient cases on a PC] using the application was very helpful, because it was not necessary to plough through all the individual guidelines. Everything was clearly laid out and well-arranged. The most important points are accentuated, which makes it quick and easy to find the right solutions.” “The optical presentation of the information is very pleasing and one doesn’t get swamped with information as is the case with the “jam-packed” short versions of the guidelines.”There was much praise for the design and the clarity of presentation:“The optical presentation is very pleasing and information is easy to find and presented very clearly.” (Even if this opinion was occasionally contradicted: “I find the app in its present form relatively free of benefits, because it is totally confusing and badly structured”.) Criticism and suggestions regarding the applicationIn the first versions “more colour” was demanded, which has already been implemented. The text-heaviness however, which was often a reason for complaint, stems from the original (the short versions of the guidelines were adopted word for word, the only illustrations being flow-charts). The interactive algorithms which were requested are also dependent on the originals and could successfully be incorporated into the most recent guideline “chest pain”. Until now it has been mainly General Practitioners, who regularly use the guidelines, who have requested the addition of the long versions of the guidelines, although students have also expressed the same wish:„Apart from that it would be nice if patient information, long versions and other additional pieces of information, which are so far only available via a link from the web-app, could be saved for offline use“. The wish for the addition of a search function was also expressed several times: “A search function would be good to help find things faster” Simplified access for students and reliable offline use could be achieved by placing native apps in app-stores. AusblickDie Umsetzung vieler der von den Studierenden gegebenen Anregungen ist bereits angedacht:Die Erstellung nativer Apps (iOS, Android), evtl. auch Hybrid-Apps für andere BetriebssystemeEine Umsetzung der Langfassungen, Patienteninformationen und weiterer MaterialienEinrichtung einer Suchfunktion und LesezeichenfunktionEine Vereinfachung des Zugangs zur App wird kommen, damit diese für das Medizinstudium und die Lehre im Fach Allgemeinmedizin geeignete Anwendung als Zusatzangebot allen Studierenden zur Verfügung steht und sie dann auch auf ihrem weiteren Berufsweg begleiten kann. OutlookThe implementation of many of the students’ suggestions is already being considered: The creation of native apps (iOS, Android), possibly also hybrid-apps for other operating systemsThe inclusion of the long versions, patient information and other materialThe addition of a search function and a bookmark functionThe app is an appropriate additional tool for medical students and for training in Family Medicine and access to it will at some point be simplified in order to make it available to all students during their studies and in the further course of their career. Stichwortartige ZusammenfassungLeitlinien-AppKommt gut an bei denen, die es genutzt (und Feedback gegeben) habenGutes und modernes Medium, um Leitlinien bekannter zu machen und Interesse zu weckenÜbersichtlich und immer dabei, gut für die Bedürfnisse der Studierenden geeignetEinsatz in der LehreNutzung in „Nischen“-Zeiten, zu Lehrveranstaltungen und zum allgemeinen Auffrischen der Kenntnisse, Einsatz zum Nachschlagen von theoretischen und konkreten FragenNur als Zusatzangebot, da nicht alle Studierenden Smartphones besitzen – obwohl auch der Einsatz auf PCs wegen der übersichtlichen Strukturierung der Inhalte als Mehrwert zu den PDFs gesehen wurdeSinnvolle Ergänzung zu bereits bestehenden Nachschlag- und Lernangeboten; unterstützt die evidenzbasierte Lehre im Fach AllgemeinmedizinInteresse an und Kenntnis der Leitlinien werden durch App gefördert Abbreviated conclussionGuideline appWell received by those who have used it (and who have sent feedback)Good and modern medium which can be used to awaken interest in the guidelines and improve knowledge of themWell-arranged and always available, suited to the needs of studentsUse in trainingUse in “waiting periods / spare moments”, during lectures and generally in the revision of knowledge, and as a source of reference in theoretical and practical questionsOnly as a supplementary offer, because not all students possess a smartphone – although use on PCs was seen as beneficial in comparison to the PDFs, because of the clear arrangement of the contents. A meaningful addition to the existing offers on revision and learning: supports evidence based teaching in Family MedicineInterest in and knowledge of the guidelines are stimulated by the app InteressenkonfliktDie Autoren erklären, dass sie keine Interessenkonflikte im Zusammenhang mit diesem Artikel haben. Competing interestsThe authors declare that they have no competing interests. Waldmann UM Weckbecker K DEGAM-Leitlinien als App für Mobiltelefone – Einsatz in der hausärztlichen Praxis und erstes Feedback 2011 45. Kongress für Allgemeinmedizin und Familienmedizin, Forum Medizin 21. Salzburg, 22.-24.09.2011 Doc11fom012 Waldmann UM, Weckbecker K. DEGAM-Leitlinien als App für Mobiltelefone – Einsatz in der hausärztlichen Praxis und erstes Feedback. In: 45. Kongress für Allgemeinmedizin und Familienmedizin, Forum Medizin 21. Salzburg, 22.-24.09.2011. Düsseldorf: German Medical Science GMS Publishing House; 2011. Doc11fom012. DOI: 10.3205/11fom012 http://dx.doi.org/10.3205/11fom012 Bundesrat Artikel 3 Weitere Änderung der Approbationsordnung für Ärzte zum 1. Oktober 2013 2012 Bundesrat Drucksache 18 Bundesrat. Artikel 3 Weitere Änderung der Approbationsordnung für Ärzte zum 1. Oktober 2013. Bundesrat Drucksache. 2012;238(12):18. Zugänglich unter/available from: http://www.bundesrat.de/cln_110/SharedDocs/Drucksachen/2012/0201-300/238-12,templateId=raw,property=publicationFile.pdf/238-12.pdf http://www.bundesrat.de/cln_110/SharedDocs/Drucksachen/2012/0201-300/238-12,templateId=raw,property=publicationFile.pdf/238-12.pdf Lindquist AM Johansson PE Petersson GI Saveman BI Nilsson GC The use of the personal digital assistant (PDA) among personnel and students in health care: a review 2008 J Med Internet Res e31 Lindquist AM, Johansson PE, Petersson GI, Saveman BI, Nilsson GC. The use of the personal digital assistant (PDA) among personnel and students in health care: a review. J Med Internet Res. 2008;10(4):e31. DOI: 10.2196/jmir.1038 http://dx.doi.org/10.2196/jmir.1038 Payne KFB Wharrad H Watts K Smartphone and medical related App use among medical students and junior doctors in the United Kingdom (UK): a regional survey 2012 BMC Med Inform Decis Mak 121 Payne KFB, Wharrad H, Watts K. Smartphone and medical related App use among medical students and junior doctors in the United Kingdom (UK): a regional survey. BMC Med Inform Decis Mak. 2012;12:121. DOI: 10.1186/1472-6947-12-121 http://dx.doi.org/10.1186/1472-6947-12-121 Schulz P Sagheb K Affeld H Kumar Taylor K Walter C Akzeptanz und Nutzung von portablen Internet Geräten (Tablet PC, Smartphones) in der zahnmedizinischen und medizinischen Ausbildung 2012 Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA). Aachen, 27.-29.09.2012 DocP228 Schulz P, Sagheb K, Affeld H, Kumar , Taylor K, Walter C. Akzeptanz und Nutzung von portablen Internet Geräten (Tablet PC, Smartphones) in der zahnmedizinischen und medizinischen Ausbildung. Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA). Aachen, 27.-29.09.2012. Düsseldorf: German Medical Science GMS Publishing House; 2012. DocP228. DOI: 10.3205/12gma130 http://dx.doi.org/10.3205/12gma130 Mosa ASB Yoo I Sheets L A Systematic Review of Healthcare Applications for Smartphones 2012 BMC Med Inform Decis Mak 12(1);67 Mosa ASB, Yoo I, Sheets L. A Systematic Review of Healthcare Applications for Smartphones. BMC Med Inform Decis Mak. 2012:12(1);67. DOI: 10.1186/1472-6947-12-67 http://dx.doi.org/10.1186/1472-6947-12-67 Ollenschläger G Nationale VersorgungsLeitlinien (NVL) jetzt auch als App 2012 Z Evidenz Fortbild Qual Gesundheitswes 619 Ollenschläger, G. Nationale VersorgungsLeitlinien (NVL) jetzt auch als App. Z Evidenz Fortbild Qual Gesundheitswes. 2012;106(9):619. Waldmann UM Gulich M Weckbecker K Böhme K Allgemeinmedizin auf der PJ-Plattform des Netzwerks ELearning Allgemeinmedizin" (ELA): Universitätsübergreifende Online-Seminare für Studierende im Praktischen Jahr – Bewertung und Motivation von Studierenden und Dozenten 2011 Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA). München, 05.-08.10.2011 Doc11gma157 Waldmann UM, Gulich M, Weckbecker K, Böhme K. Allgemeinmedizin auf der PJ-Plattform des Netzwerks ELearning Allgemeinmedizin" (ELA): Universitätsübergreifende Online-Seminare für Studierende im Praktischen Jahr – Bewertung und Motivation von Studierenden und Dozenten. Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA). München, 05.-08.10.2011. Düsseldorf: German Medical Science GMS Publishing House; 2011. Doc11gma157. DOI: 10.3205/11gma157 http://dx.doi.org/10.3205/11gma157 Waldmann UM Schmidt UM Weckbecker K DEGAM-Leitlinien als App" für Mobiltelefone – Umsetzung und Rückmeldung der Tester GMS Med Inform Biom Epidemiol Waldmann UM, Schmidt UM, Weckbecker K. DEGAM-Leitlinien als App" für Mobiltelefone – Umsetzung und Rückmeldung der Tester. GMS Med Inform Biom Epidemiol [in Begutachtung]. Lemos M Biermann H Sopka S Beckers S Ohnesorge-Radtke U Mobiles Lernen in der Medizin: neue Wege zum Erlernen praktischer Fähigkeiten an der Medizinischen Fakultät der RWTH Aachen – ein Konzept 2011 Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA). München, 05.-08.10.2011 Doc11gma164 Lemos M, Biermann H, Sopka S, Beckers S, Ohnesorge-Radtke U. Mobiles Lernen in der Medizin: neue Wege zum Erlernen praktischer Fähigkeiten an der Medizinischen Fakultät der RWTH Aachen – ein Konzept. Jahrestagung der Gesellschaft für Medizinische Ausbildung (GMA). München, 05.-08.10.2011. Düsseldorf: German Medical Science GMS Publishing House; 2011. Doc11gma164. DOI: 10.3205/11gma164 http://dx.doi.org/10.3205/11gma164 11de1en

22de2en

33de3en

44de4en

55de5en

66de6en

77de7en

88de8en

1 1 Abbildung 1: Screenshot Startbildschirm Figure 1: Screenshot start screen

2 2 Abbildung 2: Screenshot dynamischer Algorithmus mit aufklappbaren Untermenüs bei Leitlinie Nr. 15 – Brustschmerz Figure 2: Screenshot dynamic algorithm with collapsible submenus for guideline no. 15 – chest pain 2 0 0