<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<!DOCTYPE GmsArticle SYSTEM "http://www.egms.de/dtd/2.0.34/GmsArticle.dtd">
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>zma001384</Identifier>
    <IdentifierDoi>10.3205/zma001384</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-zma0013840</IdentifierUrn>
    <ArticleType language="en">short report</ArticleType>
    <ArticleType language="de">Kurzbeitrag</ArticleType>
    <TitleGroup>
      <Title language="en">Designing virtual patient based self-study quizzes covering learning goals in clinical diagnostic sciences for undergraduate medical students &#8211; the radiology example</Title>
      <TitleTranslated language="de">Gestaltung fallbasierter Selbstlernquizze f&#252;r klinische Diagnosewissenschaften f&#252;r Studierende der Humanmedizin am Beispiel der Radiologie</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>Wagner-Menghin</Lastname>
          <LastnameHeading>Wagner-Menghin</LastnameHeading>
          <Firstname>Michaela</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address language="en">Medical University Vienna, Teaching Center, Spitalgasse 23, BT87, A-1090 Vienna, Austria<Affiliation>Medical University Vienna, Teaching Center, Vienna, Austria</Affiliation></Address>
        <Address language="de">Medizinische Universit&#228;t Wien, Teaching Center, Spitalgasse 23, BT87, A-1090 Wien, &#214;sterreich<Affiliation>Medizinische Universit&#228;t Wien, Teaching Center, Wien, &#214;sterreich</Affiliation></Address>
        <Email>michaela.wagner-menghin&#64;meduniwien.ac.at</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Szenes</Lastname>
          <LastnameHeading>Szenes</LastnameHeading>
          <Firstname>Victor</Firstname>
          <Initials>V</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical University Vienna, Teaching Center, Vienna, Austria</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Universit&#228;t Wien, Teaching Center, Wien, &#214;sterreich</Affiliation>
        </Address>
        <Email>victor.szenes&#64;meduniwien.ac.at</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Scharitzer</Lastname>
          <LastnameHeading>Scharitzer</LastnameHeading>
          <Firstname>Martina</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical University Vienna, Department of Biomedical Imaging and Image-guided Therapy, Vienna, Austria</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Universit&#228;t Wien, Universit&#228;tsklinik f&#252;r Radiologie und Nuklearmedizin, Wien, &#214;sterreich</Affiliation>
        </Address>
        <Email>martina.scharitzer&#64;meduniwien.ac.at</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Pokieser</Lastname>
          <LastnameHeading>Pokieser</LastnameHeading>
          <Firstname>Peter</Firstname>
          <Initials>P</Initials>
        </PersonNames>
        <Address language="en">
          <Affiliation>Medical University Vienna, Teaching Center, Vienna, Austria</Affiliation>
          <Affiliation>Medical University Vienna, Radiologie W&#228;hring, Vienna, Austria</Affiliation>
          <Affiliation>Medical University Vienna, Institut f&#252;r bildgebende Diagnostik, Sanatorium Hera, Vienna, Austria</Affiliation>
        </Address>
        <Address language="de">
          <Affiliation>Medizinische Universit&#228;t Wien, Teaching Center, Wien, &#214;sterreich</Affiliation>
          <Affiliation>Medizinische Universit&#228;t Wien, Radiologie W&#228;hring, Wien, &#214;sterreich</Affiliation>
          <Affiliation>Medizinische Universit&#228;t Wien, Institut f&#252;r bildgebende Diagnostik, Sanatorium Hera, Wien, &#214;sterreich</Affiliation>
        </Address>
        <Email>peter.pokieser&#64;meduniwien.ac.at</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">clinical diagnostic sciences</Keyword>
      <Keyword language="en">virtual patients</Keyword>
      <Keyword language="en">teaching radiology</Keyword>
      <Keyword language="de">klinische Diagnosewissenschaften</Keyword>
      <Keyword language="de">virtuelle PatientInnen</Keyword>
      <Keyword language="de">Lehre Radiologie</Keyword>
      <SectionHeading language="en">Case-based Learning (CBL)</SectionHeading>
      <SectionHeading language="de">Fallbasiertes Lernen</SectionHeading>
    </SubjectGroup>
    <DateReceived>20200731</DateReceived>
    <DateRevised>20201013</DateRevised>
    <DateAccepted>20201029</DateAccepted>
    <DatePublishedList>
      
    <DatePublished>20201203</DatePublished></DatePublishedList>
    <Language>engl</Language>
    <LanguageTranslation>germ</LanguageTranslation>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>2366-5017</ISSN>
        <Volume>37</Volume>
        <Issue>7</Issue>
        <JournalTitle>GMS Journal for Medical Education</JournalTitle>
        <JournalTitleAbbr>GMS J Med Educ</JournalTitleAbbr>
        <IssueTitle>Teaching in times of Covid-19/Lehre in Zeiten von Covid-19</IssueTitle>
      </Journal>
    </SourceGroup>
    <ArticleNo>91</ArticleNo>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph><Mark1>Hintergrund: </Mark1>Ergebnisse aus diagnostischen Tests und Untersuchungen stellen relevante Informationen f&#252;r die klinische Entscheidungsfindung dar. Daher ist ein wesentlicher Teil der arbeitsplatzbasierten Ausbildung von Medizinstudierenden dem Erwerb von Kernkompetenzen in klinischen Diagnosewissenschaften gewidmet. Da COVID-19 bedingt die klinischen Praktikumspl&#228;tze f&#252;r Studierende im f&#252;nften Studienjahr reduziert wurden, war es notwendig, diese Teile der Ausbildung zu ersetzen.</Pgraph><Pgraph><Mark1>Projektbeschreibung: </Mark1>Am Beispiel der Radiologie wurden online-Lernmaterialien zum Thema klinische Diagnosewissenschaften entwickelt, um Studierende durch die Arbeit mit virtuellen PatientInnen auf den &#220;bergang zu arbeitsplatzbezogenem Lernen vorzubereiten. Zur Entwicklung der PatientInnenszenarien wurden drei f&#252;r die interdisziplin&#228;re PatientInnenbehandlung relevante Aktivit&#228;tstypen definiert. Die entwickelten Lernszenarien zeigen, was zu lernen ist und wie radiologisches Wissen die Diagnose und Behandlung von PatientInnen verbessert. Gleichzeitig zeigen die Szenarien den Studierenden, wie man am klinischen Arbeitsplatz lernt: Nach m&#246;glichst selbst&#228;ndiger Erledigung einer praxisrelevanten Aufgabe vergleichen Studierende die &#220;bereinstimmung ihres Ansatzes mit einem von klinischen ExpertInnen vorgestellten Ansatz.</Pgraph><Pgraph><Mark1>Ergebnisse: </Mark1>Die entwickelten zwanzig Selbstlernquizze und neun interaktiven Webinare entsprechen 13&#37; der f&#252;r Jahr 5 insgesamt angebotenen akademischen Ersatz-Stunden f&#252;r das Sommersemester 2020. Im Juni 2020 schlossen 486 Studierende das Ersatzprogramm ab und sammelten einen durchschnittlichen Anteil von 16&#37; (SD&#61;10) ihrer ben&#246;tigten akademischen Stunden durch Teilnahme an Quizzen und&#47;oder Webinaren.  </Pgraph><Pgraph><Mark1>Schlussfolgerung: </Mark1>Der vorgestellte Ansatz, virtuelle PatientInnenszenarien zur Vorbereitung auf sp&#228;teres arbeitsplatzbasiertes Lernen anhand prototypischer klinischer Aktivit&#228;tstypen zu entwickeln, kann als erfolgreich bezeichnet werden. Das aufgrund von Covid-19 sehr rasch entwickelte Online-Quiz-Format und das Webinar-Format zeigten hohe Akzeptanz und Interesse unter den Studierenden. </Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph><Mark1>Background: </Mark1>Diagnostic tests and examinations inform clinical decision making. Thus, an essential part of medical students&#8217; workplace-based training is dedicated to core skills in clinical diagnostic sciences. Due to a reduction of clinical internships for fifth-year students in the wake of COVID-19 learning activities replacing this aspect of training were needed.</Pgraph><Pgraph><Mark1>Project description: </Mark1>Virtual Patient online learning materials addressing clinical diagnostic sciences, specifically, radiology, were developed to prepare students for the transition to workplace-based learning. Three types of activities related to interprofessional patient treatment, showing how radiology knowledge improves the diagnosing and treatment of patients, were used to design the narrative of each virtual patient. The materials also showed students &#8220;how to learn&#8221; in the clinical workplace while showing &#8220;what to learn&#8221;. Students complete relevant tasks and compare their approach with experts&#8217; approach in a self-directed way.</Pgraph><Pgraph><Mark1>Results:</Mark1> Twenty self-study quizzes, accompanied by nine interactive Webinars were developed, providing 13&#37; of the overall available replacement learning materials for the summer term 2020. In June 2020, 486 students completed the program and collected a mean share of 16&#37; (SD&#61;10) of their required credits by choosing to learn with these materials. </Pgraph><Pgraph><Mark1>Conclusion: </Mark1>Developing virtual patients based on three types of clinical activities to prepare students for the transition to workplace based learning proved successful and allowed rapid development of learning materials. The presented online quiz format and webinar format showed high acceptance and interest among students. </Pgraph></Abstract>
    <TextBlock language="en" linked="yes" name="1. Introduction">
      <MainHeadline>1. Introduction</MainHeadline><Pgraph>During clinical decision making primary care physicians or medical specialists of various disciplines compile information from the patient&#8217;s history, the physical examination, and diagnostic procedures, which are performed and appraised by medical specialists. To make the best use of diagnostic procedures, all practising physicians should rely on skills related to clinical diagnostic sciences (CDS) as specified for undergraduate medical education <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>.</Pgraph><SubHeadline2>1.1. Problem</SubHeadline2><Pgraph>Due to the outbreak of COVID-19 Austrian hospitals reduced the number of internships for fifth-year medical students, thus canceling their workplace-based learning of CDS. The Learning Development Team of the  Teaching Center was approached &#8211; more than ten teams from different departments of the Medical University were approached &#8211; by the Director of the Curriculum to create replacement learning scenarios, covering some KLZ&#214; learning goals (Austrian National Learning Objectives Catalogue for Undergraduate Medical Education) with the following specifications: </Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1."><Mark2>Online activities:</Mark2> to comply with COVID-19 measures</ListItem><ListItem level="1" levelPosition="2" numString="2."><Mark2>Self-directed learning:</Mark2> to facilitate the transition to workplace-based learning</ListItem></OrderedList></Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="1. Einleitung">
      <MainHeadline>1. Einleitung</MainHeadline><Pgraph>&#196;rzte&#47;&#196;rztinnen in der Prim&#228;rversorgung und Fach&#228;rzte&#47;-&#228;rztinnen verschiedener Disziplinen st&#252;tzen sich zur klinischen Entscheidungsfindung nicht nur auf Informationen aus der Krankengeschichte des Patienten&#47;der Patientin oder der klinischen Untersuchung, sondern auch auf Ergebnisse aus verschiedenen diagnostischen Verfahren. Diese werden typischerweise von Fach&#228;rzten&#47;- &#228;rztinnen durchgef&#252;hrt und befundet. Um diagnostische Verfahren optimal nutzen zu k&#246;nnen, ben&#246;tigen aber alle praktizierenden &#196;rzte&#47;&#196;rztinnen grundlegende Kenntnisse in klinischen Diagnosewissenschaften (KDiWi) in dem f&#252;r das Ende des Medizinstudiums festgelegten Umfang <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>, <TextLink reference="3"></TextLink>.</Pgraph><SubHeadline2>1.1. Problemstellung</SubHeadline2><Pgraph>Nach Ausbruch von COVID-19 reduzierten &#246;sterreichische Krankenh&#228;user die Anzahl der Praktikumspl&#228;tze f&#252;r Medizinstudierende im f&#252;nften Jahr, wodurch das arbeitsplatzbasierte Lernen von KDiWi entfiel. Das Learning Development Team des Teaching Centers wurde daher vom Curriculumdirektor beauftragt, zum Ersatzprogramm &#8211; mehr als zehn Teams aus verschiedenen Organisationseinheiten der Medizinischen Universit&#228;t wurden insgesamt angesprochen &#8211; beizutragen und Lernszenarien zur Erarbeitung von KLZ&#214;-Lernzielen (Klinischer Lernzielkatalog &#214;sterreichs) mit folgender Spezifikation zu entwickeln: </Pgraph><Pgraph><OrderedList><ListItem level="1" levelPosition="1" numString="1.">Online-Aktivit&#228;ten zur Einhaltung der COVID-19-Ma&#223;nahmen</ListItem><ListItem level="1" levelPosition="2" numString="2.">Selbstgesteuertes Lernen, um den sp&#228;teren &#220;bergang zum arbeitsplatzbasierten Lernen zu erleichtern</ListItem></OrderedList></Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="2. The project">
      <MainHeadline>2. The project</MainHeadline><Pgraph>The last author&#8217;s rich archive of radiological cases made it feasible to focus the development of virtual patient learning materials (VPs) on CDS related to radiology. </Pgraph><SubHeadline2>2.1. Three types of clinical activity requiring CDS knowledge &#8211; the radiology example</SubHeadline2><Pgraph>The students&#8217; motivation engaging in CDS learning goals varies greatly. Tasks like identifying anatomical structures and pathologies on radiological images might not seem relevant to some students. During class, teachers remediate such motivational difficulties by illustrating how CDS knowledge enhances clinical decisions. To foster students&#8217; motivation in online learning, we structure the students&#8217; tasks around three types of clinical activities, thus highlighting the specific CDS knowledge for decision making. </Pgraph><SubHeadline3>2.1.1. Selecting an imaging method pertinent to the clinical situation</SubHeadline3><Pgraph>All physicians referring to medical imaging need detailed knowledge about indications and difficulties in performing radiological investigations. </Pgraph><SubHeadline3>2.1.2. Identifying pathologies on images and communicating them</SubHeadline3><Pgraph>Radiologists carry out the radiological reporting, but all physicians need skills in recognizing abnormalities on radiological images.</Pgraph><SubHeadline3>2.1.3. Supporting patients in the understanding of doctors&#8217; or boards&#8217; letters</SubHeadline3><Pgraph>All physicians need to talk about imaging with patients in a comprehensible manner (examples see table 1 <ImgLink imgNo="1" imgType="table"/>).</Pgraph><SubHeadline2>2.2. Simulating self-directed learning in the workplace with self-study quizzes </SubHeadline2><Pgraph>During workplace-based learning students observe the decision making of senior doctors. Students participate in this process in a self-directed way by attempting problem solving and by reflecting on work practices between together with the supervisor, creating knowledge as a shared activity. Since the transition to workplace-based learning is difficult for undergraduates <TextLink reference="4"></TextLink>, we propose VPs to show them &#8220;how to learn&#8221; in a self-directed way while showing them &#8220;what to learn&#8221;. While students complete relevant tasks with authentic patient information <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>, they compare their approach with the approach of experts using four categories ranging from 0&#37; (no concordance, different approach) through 40&#37; or 80&#37; to 100&#37; (similar approach) to self-score the quiz. Including an appropriate basic science question together with a clinical application question, activates the students&#8217; basic sciences knowledge. A short teaching summary promotes learning. Self-Study Quizzes were presented using Moodle, or in interactive webinars (without concordance rating). </Pgraph><SubHeadline2>2.3. Evaluation </SubHeadline2><Pgraph>To evaluate we prompt students to comment on each quiz freely; we also compare the mean share of credits earned by students choosing to participate in our learning activities with the share of credits provided by our learning materials within the overall replacement program. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="2. Das Projekt">
      <MainHeadline>2. Das Projekt</MainHeadline><Pgraph>Das umfangreiche Archiv radiologischer F&#228;lle des Letztautors erm&#246;glichte es, rasch Lernszenarien mit virtuellen PatientInnen (VPs) f&#252;r den KDiWi-Themenbereich Radiologie zu entwickeln. </Pgraph><SubHeadline2>2.1. Drei Arten klinischer Aktivit&#228;ten, die KDiWi-Kenntnisse erfordern - das Beispiel Radiologie</SubHeadline2><Pgraph>Die Motivation Medizinstudierender, sich KDiWi-Kenntnisse anzueignen, ist sehr unterschiedlich. Kenntnisse, wie das Identifizieren anatomischer Strukturen und Pathologien auf radiologischen Bildern, erscheinen manchen Studierenden nicht relevant. Im Pr&#228;senzunterricht begegnen Lehrende solchen motivationalen Schwierigkeiten indem sie veranschaulichen, wie KDiWi-Kenntnisse ihre klinischen Entscheidungen verbessern. Um die Motivation der Studierenden auch beim Online-Lernen von KDiWi zu f&#246;rdern, etablieren wir drei typische klinische Aktivit&#228;ten, die grundlegende radiologische Kenntnisse erfordern, als Basis f&#252;r die Entwicklung der Lernszenarien: </Pgraph><SubHeadline3>2.1.1. Auswahl einer f&#252;r die klinische Situation relevanten Bildgebungsmethode</SubHeadline3><Pgraph>Alle &#196;rzte&#47;&#196;rztinnen, die bildgebende Diagnostik in die Entscheidungsfindung einbeziehen, ben&#246;tigen detailliertes Wissen &#252;ber Indikationen und Schwierigkeiten bei der Durchf&#252;hrung radiologischer Untersuchungen.</Pgraph><SubHeadline3>2.1.2. Identifizieren von Pathologien auf Bildern und kompetente Kommunikation dar&#252;ber</SubHeadline3><Pgraph>Obwohl Radiologen&#47;Radiologinnen den Befund erstellen, ben&#246;tigen alle &#196;rzte&#47;&#196;rztinnen F&#228;higkeiten zur Erkennung von Pathologien auf radiologischen Bildern.  </Pgraph><SubHeadline3>2.1.3. Unterst&#252;tzung der Patienten&#47;Patientinnen beim Verstehen von Arztbriefen- oder Boardempfehlungen</SubHeadline3><Pgraph>Alle &#196;rzte&#47;&#196;rztinnen m&#252;ssen auf verst&#228;ndliche Weise mit den Patienten&#47;Patientinnen &#252;ber die Bildgebung kommunizieren (Beispiele in Tabelle 1 <ImgLink imgNo="1" imgType="table"/>).</Pgraph><SubHeadline2>2.2. Simulation des selbstgesteuerten Lernens am Arbeitsplatz mit fallbasierten-Selbstlernquizzen</SubHeadline2><Pgraph>Beim arbeitsplatzbasierten Lernen beobachten Studierende die klinische Entscheidungsfindung der verantwortlichen &#196;rzte&#47;&#196;rztinnen. Selbstgesteuertes Erlernen erfolgt, indem Studierende versuchen, ein beobachtetes klinisches Problem zun&#228;chst selbstst&#228;ndig zu l&#246;sen und dann die eigenen Entscheidungen mit denen des Supervisors&#47;der Supervisorin zu vergleichen bzw. gemeinsam zu diskutieren. Da der Einstieg ins arbeitsplatzbasierte Lernen f&#252;r Studierende schwierig ist <TextLink reference="4"></TextLink>, schlagen wir vor, Studierenden anhand der VP Lernszenarien nicht nur zu zeigen, &#34;was sie lernen sollen&#34;, sondern auch, &#34;wie man selbstgesteuert am Arbeitsplatz lernt&#34;. </Pgraph><Pgraph>Im Quiz erarbeiten Studierende zun&#228;chst f&#252;r einen Patienten&#47;eine Patientin, dargestellt durch authentische medizinische Informationen (&#61;VP), eine klinisch relevante Entscheidung <TextLink reference="5"></TextLink>, <TextLink reference="6"></TextLink>. Danach vergleichen sie die Konkordanz ihres Entscheidungsansatzes mit dem Entscheidungsansatz des Experten&#47;der Expertin anhand von vier Kategorien, die von 0&#37; (keine Konkordanz, anderer Ansatz) &#252;ber 40&#37; oder 80&#37; bis 100&#37; (&#228;hnlicher Ansatz) reichen, um das Quiz selbst zu bewerten. </Pgraph><Pgraph>Die klinischen Anwendungsfragen werden dabei durch geeignete Fragen zum Grundlagenwissen (z.B. Anatomiewissen) erg&#228;nzt, um dieses Wissen gezielt im klinischen Kontext zu aktivieren. Begleitet wird das Material durch kurze Lehrbuchtexte. Bearbeitet werden die Selbstlernquizze &#252;ber die Lernplattform Moodle oder im Rahmen interaktiver Webinare (ohne Konkordanzbewertung).  </Pgraph><SubHeadline2>2.3. Auswertung </SubHeadline2><Pgraph>Studierende sind aufgefordert, jedes Quiz nach dessen Bearbeitung frei zu kommentieren. Der durchschnittliche Anteil akademischer Stunden, den Studierende durch Wahl unserer Lernszenarien erworben haben, wird verglichen mit dem Anteil akademischer Stunden, den unsere Lernszenarien innerhalb des gesamten Ersatzprogramms abdecken.   </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="3. Results">
      <MainHeadline>3. Results</MainHeadline><SubHeadline2>3.1. Learning materials</SubHeadline2><Pgraph>Twenty self-study quizzes and nine interactive live webinars were developed, covering 16 KLZ&#214;-objectives (up to five objectives per VP). Three learning activity types highlighted the learner&#8217;s perspective during the development of the quizzes&#8217; content. </Pgraph><SubHeadline2>3.2. Student participation </SubHeadline2><Pgraph>By participating in all available replacement activities, one could overfulfill the requirements by about 75 percentage points. As our learning activities accounted for 13&#37; of available credits, nobody was obliged to participate since there were alternatives available. In June 2020, 486 fifth-year students completed the replacement program and earned a mean share of credits by participating in our quizzes and webinars of 16&#37; (standard deviation&#177;10). Students chose our activities as compared to the alternatives with a similar preference. Students&#8217; self-scoring resulted in a mean concordance score of 81&#37; (SD&#61;10&#37;). On average 10&#37; (SD&#61;3&#37;) of students commented per quiz, expressing predominately satisfaction (e.g. <Mark2>great case, &#9786; </Mark2>) or neutrality (e.g. <Mark2>&#8220;thanks&#8221;, &#8220;nothing in particular&#8221;</Mark2>). </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="3. Ergebnisse">
      <MainHeadline>3. Ergebnisse</MainHeadline><SubHeadline2>3.1. Lernszenarien </SubHeadline2><Pgraph>Es wurden zwanzig Selbstlernquizze und neun interaktive Live-Webinare entwickelt, die 16 KLZ&#214;-Ziele (bis zu f&#252;nf Ziele pro VP) abdecken. Die drei typischen klinischen Aktivit&#228;ten halfen die Perspektive der Studierenden bei der Entwicklung der Lernszenarien zu ber&#252;cksichtigen. </Pgraph><SubHeadline2>3.2. Beteiligung der Studierenden </SubHeadline2><Pgraph>Durch Teilnahme an s&#228;mtlichen im Ersatzprogramm angebotenen Lernszenarien h&#228;tten Studierende um 75 Prozentpunkte mehr akademische Stunden absolviert als ben&#246;tigt. Unsere Lernszenarien machten 13&#37; der verf&#252;gbaren akademischen Stunden aus, d.h. niemand war zur Teilnahme verpflichtet, da es ausreichend Alternativangebot gab. Im Juni 2020 schlossen 486 Studierende im f&#252;nften Studienjahr das Ersatzprogramm ab und erwarben durch die Teilnahme an unseren Quizzen und Webinaren einen durchschnittlichen Anteil akademischer Stunden von 16&#37; (Standardabweichung&#177;10). Die Studierenden w&#228;hlten unsere Lernszenarien im Vergleich zu den Alternativen mit einer &#228;hnlichen Pr&#228;ferenz. Die Selbstbewertung der Studierenden ergab einen durchschnittlichen Konkordanz-Score von 81&#37; (SD&#61;10&#37;). Im Durchschnitt gaben 10&#37; (SD&#61;3&#37;) der Studierenden pro Quiz Kommentare ab, die &#252;berwiegend Zufriedenheit (z.B. Super Fall) oder Neutralit&#228;t (z.B. &#8222;Danke&#8220;, &#8222;nichts Besonderes&#8220;) zum Ausdruck brachten.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="4. Discussion">
      <MainHeadline>4. Discussion</MainHeadline><Pgraph>Defining three types of clinical activities helped in guiding the development of VPs requiring CDS skills related to radiology, which have previously been proposed for medical undergraduates <TextLink reference="7"></TextLink>. The VP-based quizzes and webinars showed high acceptance among the students and can be improved based on the provided comments.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="4. Diskussion">
      <MainHeadline>4. Diskussion</MainHeadline><Pgraph>Die Definition der drei typischen klinischen Aktivit&#228;ten erleichterte die Entwicklung von VP-Lernszenarien f&#252;r radiologische KDiWi Lernziele, die in der Literatur f&#252;r Medizinstudierende vorgeschlagen wurden <TextLink reference="7"></TextLink>. Die VP-basierten Quizze und Webinare zeigten eine hohe Akzeptanz unter den Studierenden und k&#246;nnen anhand der freien Kommentare verbessert werden.</Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="5. Conclusion">
      <MainHeadline>5. Conclusion</MainHeadline><Pgraph>Our approach in guiding the development of online VPs to improve the transition of students to workplace-based learning demonstrates high acceptance among students. As such, the second edition for all quizzes is currently under preparation. Besides working on covering more of the KLZ&#214; learning goals, development has to focus on systematically describing how CDS knowledge is needed in varying clinical settings to systematically prepare students for the challenges they face related to learning in the clinical workplace.</Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="5. Schlussfolgerung">
      <MainHeadline>5. Schlussfolgerung</MainHeadline><Pgraph>Unser Ansatz, die Entwicklung von Online-Lernszenarien mit VPs durch Definition prototypischer klinischer Aktivit&#228;ten zu steuern, um Studierende auf sp&#228;teres Lernen am Arbeitsplatz vorzubereiten, zeigt eine hohe Akzeptanz bei den Studierenden. Daher wird derzeit die zweite Ausgabe f&#252;r alle Quizze vorbereitet. Neben der Arbeit an der Abdeckung weiterer Lernziele des KLZ&#214; muss systematisch beschrieben werden, welche KDiWi-Kenntnisse in verschiedenen klinischen Situationen ben&#246;tigt werden. Dadurch w&#228;re es m&#246;glich, Studierende gezielt auf die Herausforderungen beim Lernen am klinischen Arbeitsplatz vorzubereiten. </Pgraph></TextBlock>
    <TextBlock language="en" linked="yes" name="Competing interests">
      <MainHeadline>Competing interests</MainHeadline><Pgraph>The authors declare that they have no competing interests. </Pgraph></TextBlock>
    <TextBlock language="de" linked="yes" name="Interessenkonflikt">
      <MainHeadline>Interessenkonflikt</MainHeadline><Pgraph>Die Autor&#42;innen erkl&#228;ren, dass sie keinen Interessenkonflikt im Zusammenhang mit diesem Artikel haben.</Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Medizinische Universit&#228;t Graz</RefAuthor>
        <RefAuthor> Medizinische Universit&#228;t Wien</RefAuthor>
        <RefAuthor> Medizinische Universit&#228;t Innsbruck</RefAuthor>
        <RefAuthor> Medizinische Fakult&#228;t Linz</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2020</RefYear>
        <RefBookTitle>Klinischer Lernzielkatalog &#214;sterreichs</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Medizinische Universit&#228;t Graz; Medizinische Universit&#228;t Wien; Medizinische Universit&#228;t Innsbruck; Medizinische Fakult&#228;t Linz. Klinischer Lernzielkatalog &#214;sterreichs &#91;Austrian National Learning Objectives Catalogue for Undergraduate Medical Education&#93;. Graz: Eigenverlag der Medizinischen Universit&#228;t Graz; 2020.</RefTotal>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Wissing F</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2018</RefYear>
        <RefJournal>Bundesgesundheitsbl Gesundheitsforsch Gesundheitsschutz</RefJournal>
        <RefPage>170</RefPage>
        <RefTotal>Wissing F. &#91;National Competency-Based Learning Objective Catalogue for Dental and Human Medicine&#93;. Bundesgesundheitsbl Gesundheitsforsch Gesundheitsschutz. 2018;61(2):170. DOI: 10.1007&#47;s00103-018-2688-0</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1007&#47;s00103-018-2688-0</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>B&#252;rgi H</RefAuthor>
        <RefAuthor>Rindlisbacher B</RefAuthor>
        <RefAuthor>Bader C</RefAuthor>
        <RefAuthor>Bloch R</RefAuthor>
        <RefAuthor>Bosman F</RefAuthor>
        <RefAuthor>Gasser C</RefAuthor>
        <RefAuthor>Gerke W</RefAuthor>
        <RefAuthor>Jumair JP</RefAuthor>
        <RefAuthor>Im Hof V</RefAuthor>
        <RefAuthor>Kaiser H</RefAuthor>
        <RefAuthor>Lefebvre D</RefAuthor>
        <RefAuthor>Schl&#228;ppi P</RefAuthor>
        <RefAuthor>Sottas B</RefAuthor>
        <RefAuthor>Spinas GA</RefAuthor>
        <RefAuthor>Stuck AE</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2008</RefYear>
        <RefBookTitle>Swiss Catalogue of Learning Objectives for Undergraduate Medical Training</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>B&#252;rgi H, Rindlisbacher B, Bader C, Bloch R, Bosman F, Gasser C, Gerke W, Jumair JP, Im Hof V, Kaiser H, Lefebvre D, Schl&#228;ppi P, Sottas B, Spinas GA, Stuck AE. Swiss Catalogue of Learning Objectives for Undergraduate Medical Training. Genf: Joint Conference of Swiss Medical Faculties (SMIFK); 2008: Zug&#228;nglich unter&#47;available from: http:&#47;&#47;sclo.smifk.ch&#47;</RefTotal>
        <RefLink>http:&#47;&#47;sclo.smifk.ch&#47;</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>Teunissen PW</RefAuthor>
        <RefAuthor>Westerman M</RefAuthor>
        <RefTitle>Opportunity or threat: the ambiguity of the consequences of transitions in medical education</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Med Educ</RefJournal>
        <RefPage>51-59</RefPage>
        <RefTotal>Teunissen PW, Westerman M. Opportunity or threat: the ambiguity of the consequences of transitions in medical education. Med Educ. 2011;45(1):51-59. DOI: 10.1111&#47;j.1365-2923.2010.03755.x</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1111&#47;j.1365-2923.2010.03755.x</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>Hege I</RefAuthor>
        <RefAuthor>Kononowicz AA</RefAuthor>
        <RefAuthor>Tolks D</RefAuthor>
        <RefAuthor>Edelbring S</RefAuthor>
        <RefAuthor>Kuehlmeyer K</RefAuthor>
        <RefTitle>A qualitative analysis of virtual patient descriptions in healthcare education based on a systematic literature review</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>146</RefPage>
        <RefTotal>Hege I, Kononowicz AA, Tolks D, Edelbring S, Kuehlmeyer K. A qualitative analysis of virtual patient descriptions in healthcare education based on a systematic literature review. BMC Med Educ. 2016;16:146. DOI: 10.1186&#47;s12909-016-0655-8</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;s12909-016-0655-8</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>Urresti-Gundlach M</RefAuthor>
        <RefAuthor>Tolks D</RefAuthor>
        <RefAuthor>Kiessling C</RefAuthor>
        <RefAuthor>Wagner-Menghin M</RefAuthor>
        <RefAuthor>H&#228;rtl A</RefAuthor>
        <RefAuthor>Hege I</RefAuthor>
        <RefTitle>Do virtual patients prepare medical students for the real world&#63; Development and application of a framework to compare a virtual patient collection with population data</RefTitle>
        <RefYear>2017</RefYear>
        <RefJournal>BMC Med Educ</RefJournal>
        <RefPage>174</RefPage>
        <RefTotal>Urresti-Gundlach M, Tolks D, Kiessling C, Wagner-Menghin M, H&#228;rtl A, Hege I. Do virtual patients prepare medical students for the real world&#63; Development and application of a framework to compare a virtual patient collection with population data. BMC Med Educ. 2017;17(1):174. DOI: 10.1186&#47;s12909-017-1013-1</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.1186&#47;s12909-017-1013-1</RefLink>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>Alexander AG</RefAuthor>
        <RefAuthor>Deas D</RefAuthor>
        <RefAuthor>Lyons PE</RefAuthor>
        <RefTitle>An Internet-Based Radiology Course in Medical School: Comparison of Academic Performance of Students on Campus Versus Those With Absenteeism Due to Residency Interviews</RefTitle>
        <RefYear>2018</RefYear>
        <RefJournal>JMIR Med Educ</RefJournal>
        <RefPage>e14</RefPage>
        <RefTotal>Alexander AG, Deas D, Lyons PE. An Internet-Based Radiology Course in Medical School: Comparison of Academic Performance of Students on Campus Versus Those With Absenteeism Due to Residency Interviews. JMIR Med Educ. 2018;4(1):e14. DOI: 10.2196&#47;mededu.8747</RefTotal>
        <RefLink>https:&#47;&#47;doi.org&#47;10.2196&#47;mededu.8747</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID language="en">1en</MediaID>
          <MediaID language="de">1de</MediaID>
          <Caption language="en"><Pgraph><Mark1>Table 1: Activity typs</Mark1></Pgraph></Caption>
          <Caption language="de"><Pgraph><Mark1>Tabelle 1: Aktivit&#228;tstypen</Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>1</NoOfTables>
      </Tables>
      <Figures>
        <NoOfPictures>0</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <NoOfAttachments>0</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>