<?xml version="1.0" encoding="iso-8859-1" standalone="no"?>
<!DOCTYPE GmsArticle SYSTEM "http://www.egms.de/dtd/2.0.34/GmsArticle.dtd">
<GmsArticle xmlns:xlink="http://www.w3.org/1999/xlink">
  <MetaData>
    <Identifier>mibe000180</Identifier>
    <IdentifierDoi>10.3205/mibe000180</IdentifierDoi>
    <IdentifierUrn>urn:nbn:de:0183-mibe0001807</IdentifierUrn>
    <ArticleType>&#220;bersichtsarbeit</ArticleType>
    <TitleGroup>
      <Title language="de">HTA und aktuelle Herausforderungen: Harmonisierung, Real World Data und Surrogatparameter</Title>
      <TitleTranslated language="en">HTA &#8211; How to tackle pressing challenges: International Harmonization, Real World Data, and Surrogates</TitleTranslated>
    </TitleGroup>
    <CreatorList>
      <Creator>
        <PersonNames>
          <Lastname>R&#252;ther</Lastname>
          <LastnameHeading>R&#252;ther</LastnameHeading>
          <Firstname>Alric</Firstname>
          <Initials>A</Initials>
        </PersonNames>
        <Address>IQWiG &#8211; Institut f&#252;r Qualit&#228;t und Wirtschaftlichkeit im Gesundheitswesen, Im Mediapark 8, 50670 K&#246;ln, Deutschland<Affiliation>IQWiG &#8211; Institut f&#252;r Qualit&#228;t und Wirtschaftlichkeit im Gesundheitswesen, K&#246;ln, Deutschland</Affiliation></Address>
        <Email>alric.ruther&#64;iqwig.de</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Herrmann</Lastname>
          <LastnameHeading>Herrmann</LastnameHeading>
          <Firstname>Kirsten H.</Firstname>
          <Initials>KH</Initials>
        </PersonNames>
        <Address>Bristol-Myers Squibb GmbH &#38; Co. KGaA, Arnulfstr. 29, 80636 M&#252;nchen, Deutschland<Affiliation>Bristol-Myers Squibb GmbH &#38; Co. KGaA, M&#252;nchen, Deutschland</Affiliation></Address>
        <Email>khmailforme&#64;gmail.com</Email>
        <Creatorrole corresponding="yes" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Hebborn</Lastname>
          <LastnameHeading>Hebborn</LastnameHeading>
          <Firstname>Ansgar</Firstname>
          <Initials>A</Initials>
        </PersonNames>
        <Address>
          <Affiliation>F. Hoffmann-La Roche AG, Basel, Schweiz</Affiliation>
        </Address>
        <Email>ansgar.hebborn&#64;roche.com</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Perleth</Lastname>
          <LastnameHeading>Perleth</LastnameHeading>
          <Firstname>Matthias</Firstname>
          <Initials>M</Initials>
        </PersonNames>
        <Address>
          <Affiliation>G-BA-Gemeinsamer Bundesausschuss, Berlin, Deutschland</Affiliation>
        </Address>
        <Email>matthias.perleth&#64;g-ba.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Schwarzer</Lastname>
          <LastnameHeading>Schwarzer</LastnameHeading>
          <Firstname>Ruth</Firstname>
          <Initials>R</Initials>
        </PersonNames>
        <Address>
          <Affiliation>IQWiG &#8211; Institut f&#252;r Qualit&#228;t und Wirtschaftlichkeit im Gesundheitswesen, K&#246;ln, Deutschland</Affiliation>
        </Address>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Sch&#252;rmann</Lastname>
          <LastnameHeading>Sch&#252;rmann</LastnameHeading>
          <Firstname>Christoph</Firstname>
          <Initials>C</Initials>
        </PersonNames>
        <Address>
          <Affiliation>IQWiG &#8211; Institut f&#252;r Qualit&#228;t und Wirtschaftlichkeit im Gesundheitswesen, K&#246;ln, Deutschland</Affiliation>
        </Address>
        <Email>christoph.schuermann&#64;iqwig.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Sieben</Lastname>
          <LastnameHeading>Sieben</LastnameHeading>
          <Firstname>Wiebke</Firstname>
          <Initials>W</Initials>
        </PersonNames>
        <Address>
          <Affiliation>IQWiG &#8211; Institut f&#252;r Qualit&#228;t und Wirtschaftlichkeit im Gesundheitswesen, K&#246;ln, Deutschland</Affiliation>
        </Address>
        <Email>wiebke.sieben&#64;iqwig.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Gillhaus</Lastname>
          <LastnameHeading>Gillhaus</LastnameHeading>
          <Firstname>Johanna</Firstname>
          <Initials>J</Initials>
        </PersonNames>
        <Address>
          <Affiliation>Pfizer Deutschland GmbH, Berlin, Deutschland</Affiliation>
        </Address>
        <Email>johanna.gillhaus&#64;pfizer.com</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Goertz</Lastname>
          <LastnameHeading>Goertz</LastnameHeading>
          <Firstname>Ralf</Firstname>
          <Initials>R</Initials>
        </PersonNames>
        <Address>
          <Affiliation>AMS Advanced Medical Services GmbH, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Email>Ralf.Goertz&#64;ams-europe.com</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Jeratsch</Lastname>
          <LastnameHeading>Jeratsch</LastnameHeading>
          <Firstname>Ulli</Firstname>
          <Initials>U</Initials>
        </PersonNames>
        <Address>
          <Affiliation>AMS Advanced Medical Services GmbH, M&#252;nchen, Deutschland</Affiliation>
        </Address>
        <Email>Ulli.Jeratsch&#64;ams-europe.com</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Leverkus</Lastname>
          <LastnameHeading>Leverkus</LastnameHeading>
          <Firstname>Friedhelm</Firstname>
          <Initials>F</Initials>
        </PersonNames>
        <Address>
          <Affiliation>Pfizer Deutschland GmbH, Berlin, Deutschland</Affiliation>
        </Address>
        <Email>friedhelm.leverkus&#64;pfizer.com</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
      <Creator>
        <PersonNames>
          <Lastname>Schramm</Lastname>
          <LastnameHeading>Schramm</LastnameHeading>
          <Firstname>Wendelin</Firstname>
          <Initials>W</Initials>
        </PersonNames>
        <Address>
          <Affiliation>Hochschule Heilbronn, Heilbronn, Deutschland</Affiliation>
        </Address>
        <Email>wendelin.schramm&#64;hs-heilbronn.de</Email>
        <Creatorrole corresponding="no" presenting="no">author</Creatorrole>
      </Creator>
    </CreatorList>
    <PublisherList>
      <Publisher>
        <Corporation>
          <Corporatename>German Medical Science GMS Publishing House</Corporatename>
        </Corporation>
        <Address>D&#252;sseldorf</Address>
      </Publisher>
    </PublisherList>
    <SubjectGroup>
      <SubjectheadingDDB>610</SubjectheadingDDB>
      <Keyword language="en">HTA</Keyword>
      <Keyword language="en">systematic reviews</Keyword>
      <Keyword language="en">real world data</Keyword>
      <Keyword language="en">policy</Keyword>
      <Keyword language="en">technology assessment</Keyword>
      <Keyword language="en">surrogate endpoints</Keyword>
      <Keyword language="en">biological markers</Keyword>
      <Keyword language="en">endpoint determination</Keyword>
      <Keyword language="en">thresholds</Keyword>
      <Keyword language="en">validation techniques</Keyword>
      <Keyword language="en">correlation of data</Keyword>
      <Keyword language="en">estimation techniques</Keyword>
      <Keyword language="en">biometry</Keyword>
      <Keyword language="en">simulation</Keyword>
      <Keyword language="en">theoretical study</Keyword>
      <Keyword language="en">medicine, evidence-based</Keyword>
      <Keyword language="en">decision support techniques</Keyword>
      <Keyword language="de">Gesundheitstechnologiefolgenabsch&#228;tzung</Keyword>
      <Keyword language="de">Health Technology Assessment</Keyword>
      <Keyword language="de">Real-World-Daten</Keyword>
      <Keyword language="de">Politik</Keyword>
      <Keyword language="de">Surrogatendpunkte</Keyword>
      <Keyword language="de">biologische Marker</Keyword>
      <Keyword language="de">Endpunktbestimmung</Keyword>
      <Keyword language="de">Schwellenwerte</Keyword>
      <Keyword language="de">Validierungstechniken</Keyword>
      <Keyword language="de">Korrelation</Keyword>
      <Keyword language="de">Sch&#228;tztechniken</Keyword>
      <Keyword language="de">Biometrie</Keyword>
      <Keyword language="de">Simulation</Keyword>
      <Keyword language="de">theoretische Studie</Keyword>
      <Keyword language="de">evidenzbasierte Medizin</Keyword>
      <Keyword language="de">Entscheidungsunterst&#252;tzungstechniken</Keyword>
    </SubjectGroup>
    <DatePublishedList>
      
    <DatePublished>20180216</DatePublished></DatePublishedList>
    <Language>germ</Language>
    <License license-type="open-access" xlink:href="http://creativecommons.org/licenses/by/4.0/">
      <AltText language="en">This is an Open Access article distributed under the terms of the Creative Commons Attribution 4.0 License.</AltText>
      <AltText language="de">Dieser Artikel ist ein Open-Access-Artikel und steht unter den Lizenzbedingungen der Creative Commons Attribution 4.0 License (Namensnennung).</AltText>
    </License>
    <SourceGroup>
      <Journal>
        <ISSN>1860-9171</ISSN>
        <Volume>14</Volume>
        <Issue>1</Issue>
        <JournalTitle>GMS Medizinische Informatik, Biometrie und Epidemiologie</JournalTitle>
        <JournalTitleAbbr>GMS Med Inform Biom Epidemiol</JournalTitleAbbr>
      </Journal>
    </SourceGroup>
    <ArticleNo>02</ArticleNo>
  </MetaData>
  <OrigData>
    <Abstract language="de" linked="yes"><Pgraph>Health Technology Assessment (Gesundheitstechnologiefolgenabsch&#228;tzung) geh&#246;rt international und im deutschen Gesundheitswesen zu den Standardinstrumenten der Entscheidungsunterst&#252;tzung zur Definition des Leistungskatalogs. Neben systematischen Reviews, Nutzen-Schaden-Abw&#228;gungen, gesundheits&#246;konomischen Evaluationen und entscheidungsanalytischen Modellierungen spielen insbesondere epidemiologische und biometrische Fragen und Methoden eine Rolle. Vor diesem Hintergrund geraten die zunehmenden Diskussionen um europ&#228;ische Zusammenarbeit in den Fokus bis hin zu Rufen nach umfangreicher Harmonisierung. </Pgraph><Pgraph>Die GMDS-Arbeitsgruppe HTA m&#246;chte gemeinsam mit den AG&#47;AK Methodik Systematischer Reviews, Gesundheits&#246;konomie und Medical Decision Making dieses Thema aufgreifen und aktuelle Entwicklungen darstellen. Dies beginnt mit einem europ&#228;ischen Blick auf den Aufbau des EU-HTA-Netzwerks, das sich der Herausforderung stellt, &#8222;Joint Work&#8220; europaweit zu definieren und zu etablieren. Hier r&#252;ckt die Diskussion um &#8222;Harmonisierung von HTA&#8220; in den Vordergrund: Ist dies als Bedrohung oder als Unterst&#252;tzung zu werten&#63; Im zweiten Teil des Artikels wird vor diesem Hintergrund eine weitere aktuelle methodische Frage aus verschiedenen Perspektiven er&#246;rtert: &#8222;Sind Real World Data und Surrogate m&#246;gliche Parameter im Decision Making oder in der Gesundheitstechnologiefolgenabsch&#228;tzung&#63;&#8220;.</Pgraph></Abstract>
    <Abstract language="en" linked="yes"><Pgraph>Health Technology Assessment is one of the standard instruments in support of the decision-making to define the public health services both internationally and in the German health care system. Besides systematic reviews, benefit-harm-analyses, health economic evaluations, and, decision-analytic modelling, especially epidemiological and biometrical questions and methods play a key role. From this perspective discussions on increased European cooperation including calls for wider harmonization are attracting greater interests.</Pgraph><Pgraph>The overall aim is, to present at the GMDS workshop relevant information on this emerging field of harmonization in Europe across similarities and differences in the HTA process. Current developments around the composition of the EU-HTA Network are provided. This network accepts the challenge to define and establish a &#8220;Joint Work&#8221; across Europe. Special emphasis was placed on the discussion on &#8220;Harmonization of HTA: is it a threat or does it mean support&#63;&#8221;. Furthermore, methodological discussions and questions are being addressed: &#8220;Are Real World Data and Surrogates possible parameters for decision-making or HTA&#63;&#8221;</Pgraph></Abstract>
    <TextBlock linked="yes" name="Einf&#252;hrung">
      <MainHeadline>Einf&#252;hrung</MainHeadline><Pgraph>Mittlerweile geh&#246;rt Health Technology Assessment (Gesundheitstechnologiefolgenabsch&#228;tzung) international und im deutschen Gesundheitswesen zu den Standardinstrumenten der Entscheidungsunterst&#252;tzung zur Definition des Leistungskatalogs. Neben systematischen Reviews, Nutzen-Schaden-Abw&#228;gungen, gesundheits&#246;konomischen Evaluationen und entscheidungsanalytischen Modellierungen spielen insbesondere epidemiologische und biometrische Fragen und Methoden eine Rolle. </Pgraph><Pgraph>In einem HTA-Prozess geht es darum, in einem objektiven (unverzerrt, ohne Bias), transparenten und nachvollziehbaren Prozess Informationen zu einer medizinischen Fragestellung zusammenzuf&#252;hren, um dann eine Entscheidung zu dieser  Fragestellung unter m&#246;glichst gro&#223;er Sicherheit zu treffen. Der erste Schritt ist deshalb vorab die Fragestellung bzgl. Patientengruppe, Intervention, Komparator, Outcome und Studiendesign festzulegen und ein Protokoll zu definieren. Dieses Protokoll demonstriert, dass der Prozess nicht durch Erkenntnisse w&#228;hrend des Prozesses gesteuert wurde, oder wenn die Ergebnisse vorliegen. In einer systematischen Recherche wird die gesamte verf&#252;gbare Evidenz zur jeweiligen Fragestellung aufgefunden. Diese Literatur wird in einem definierten Verfahren gesichtet und einer kritischen Bewertung anhand des Vier-Augen-Prinzips unterzogen, um systematische Fehler in der Bewertung zu vermeiden. F&#252;r die Forschungsfrage relevante Studien werden in einem mehrschrittigen Verfahren herausgefiltert. Daten zu vorab definierten Endpunkten (Mortalit&#228;t, Morbidit&#228;t, Lebensqualit&#228;t...) werden extrahiert und in einer Evidenzsynthese, wenn m&#246;glich Meta-Analyse, zusammengef&#252;hrt und ausgewertet. Ein Ziel dieses Verfahrens ist es u.a. durch Meta-Analysen Patientenzahlen durch das Zusammenf&#252;hren der Studien zu erh&#246;hen, und damit die statistische Datensicherheit zu erh&#246;hen. In einem HTA-Bericht k&#246;nnen mehrere, mindestens zwei, Versorgungsalternativen verglichen werden. In einem letzten Schritt wird eine &#246;konomische Evaluation durchgef&#252;hrt. In diesem sehr komplexen Verfahren k&#246;nnen unterschiedliche Perspektiven eingenommen werden, u.a. die der Krankenversicherung oder der Gesellschaft. Es werden in verschiedenen Gesundheitssystemen unterschiedliche Methoden und Arten angewandt. Folgende Parameter m&#252;ssen in einem HTA ber&#252;cksichtigt werden: Arten und Einsatz der Analysen, Evidenzquelle: Studien- oder Routinedaten, Literaturrecherche und Bewertung der &#246;konomischen Studien, Kostenermittlung, Diskontierung und Sensitivit&#228;tsanalysen, Modellierung und Entscheidungsanalysen, Bewertung der &#246;konomischen Evidenz <TextLink reference="1"></TextLink>, <TextLink reference="2"></TextLink>.</Pgraph><Pgraph>Die AG HTA, AG&#47;AK Methoden systematischer Reviews, Gesundheits&#246;konomie und Medical Decision Making m&#246;chten  gemeinsam mit den aktuelle Informationen aus dem Bereich um HTAs geben, um weiterf&#252;hrende Diskussionen zu f&#246;rdern. Dazu erl&#228;utern anerkannte Experten in einem Workshop auf der GMDS Tagung in Krefeld 2015 ihre unterschiedlichen und kontroversen Standpunkte zum Thema &#8222;Harmonisierung von HTA in der EU&#8220; und beleuchten den Einfluss sogenannter &#8222;Real World Data&#8220;. Dies wird erg&#228;nzt durch Ausf&#252;hrungen zur Surrogatvalidierung. Ziel des Workshops ist es verschiedene Standpunkte aufzuzeigen und zu diskutieren, ohne dabei jedoch ein gemeinsames Fazit oder einen Konsens bilden zu m&#252;ssen. Die Experten stellen in den jeweiligen Abschnitten ihre Sicht zum Thema dar und verantworten somit den mit ihrem Namen versehenen Abschnitt.</Pgraph></TextBlock>
    <TextBlock linked="yes" name="HTA-Netzwerk: Zusammenarbeit oder Harmonisierung">
      <MainHeadline>HTA-Netzwerk: Zusammenarbeit oder Harmonisierung</MainHeadline><Pgraph><UnorderedList><ListItem level="1"><Mark1>Alric R&#252;ther</Mark1></ListItem></UnorderedList></Pgraph><Pgraph>Health Technology Assessment, die Bewertung medizinischer Verfahren und Technologien als Grundlage f&#252;r Entscheidungen im Gesundheitswesen hat sich etabliert, insbesondere zur Erstattung medizinischer Leistungen. HTA-Institutionen und -Abteilungen schie&#223;en wie Pilze aus dem Boden, dreistellig allein in Europa. Das hei&#223;t jedoch nicht, dass HTA gleich HTA ist. Die Methoden der Bewertung bis hin zu den Prozessen der Entscheidungsfindung variieren teilweise erheblich. Die EU-Kommission erkannte schon sehr fr&#252;h das Potenzial von HTA, sichtbar an einer kontinuierlich aufbauenden Reihe von Projekten von EURASSESS 1994 bis hin zum Aufbau des Europ&#228;ischen Netzwerks HTA, EUnetHTA (siehe: <Hyperlink href="http:&#47;&#47;www.eunethta.eu&#47;">http:&#47;&#47;www.eunethta.eu&#47;</Hyperlink>). Ein Meilenstein f&#252;r HTA war die Verabschiedung der Richtlinie zur grenz&#252;berschreitenden Patientenversorgung <TextLink reference="3"></TextLink> in 2011 in deren Artikel 15 die EU-Kommission ein kontinuierliches HTA-Netzwerk (HTAN) <TextLink reference="4"></TextLink> festschreibt. Dieses HTA-Netzwerk wurde 2013 gegr&#252;ndet. Es hat die Aufgabe sich mit der strategischen HTA-Ausrichtung und -Entwicklung zu befassen. Mitglieder sind Vertreter der Gesundheitsministerien aller Mitgliedsstaaten der EU in Begleitung der entsprechenden HTA-Experten <TextLink reference="4"></TextLink>. EUnetHTA gilt als das wissenschaftlich technische Netzwerk der &#246;ffentlichen und wissenschaftlichen HTA-Organisationen der Mitgliedsstaaten <TextLink reference="5"></TextLink>. <TextGroup><PlainText>EUnetHTA</PlainText></TextGroup> ist eng mit HTAN verkn&#252;pft, soll jedoch von den Mitgliedstaaten getragen werden. Um das bestm&#246;glich aufzusetzen hat die EU-Kommission mit einer Joint Action 3 (JA3) eine letzte F&#246;rderperiode f&#252;r EUnetHTA eingeleitet. JA3 startet im Juni 2016 im Anschluss an die auslaufende JA2 mit einer Projektdauer von vier Jahren. Ziel ist die Zusammenarbeit europ&#228;ischer HTA-Organisationen, insbesondere hinsichtlich des Austausches und gemeinsamen Nutzens von HTA-Informationen.</Pgraph><SubHeadline3>Harmonisierung&#63;</SubHeadline3><Pgraph>Vor dem Hintergrund der Entwicklungen um HTAN und EUnetHTA wird eine Harmonisierung von HTA in Europa diskutiert. Hier gibt es verschiedene Ans&#228;tze. Diese reichen vom Austausch von Studiendaten bis hin zu gemeinsamen EU-weiten HTA-Berichten. Es stellt sich die Frage, ob EU-weite einheitliche HTA-Berichte sinnvoll sind. Vordergr&#252;ndig steht die Annahme, dass der hochkomplexe Prozess der HTA-Erstellung viel effizienter w&#228;re bei einem Bericht f&#252;r alle L&#228;nder. Ein europaweit einheitliches Ergebnis w&#228;re f&#252;r die Industrie ebenso mit viel geringerem Aufwand zu bew&#228;ltigen. In diesem Zusammenhang  m&#252;ssen nicht nur die Vielfalt der Gesundheitssysteme in Europa sondern auch kulturelle Unterschiede beachtet werden. Ein HTA-Bericht muss auf den Entscheidungsprozess ausgerichtet sein. Dieser bleibt in all seiner systembezogenen und kulturellen Vielfalt in der uneingeschr&#228;nkten Verantwortung des jeweiligen Mitgliedsstaates. Aus diesem Grund spricht man im Umfeld von EUnetHTA von HTA-Information. Ein HTA-Report stellt eine umfassende wissenschaftliche Analyse bereit. Eine dar&#252;berhinausgehende Empfehlung f&#252;r eine Gesundheitssystementscheidung wird nicht abgegeben. Dies soll den Mitgliedsstaaten selbst vorbehalten bleiben <TextLink reference="6"></TextLink>. Harmonisierung in HTA steht also f&#252;r wissenschaftliche Zusammenarbeit, Einigung auf methodische Standards und Qualit&#228;tsprozesse. EUnetHTA tr&#228;gt diesen Voraussetzungen Rechnung. Basis ist das HTA-Core Model. Hier soll systematisch das &#8222;Herz&#8220; (&#8222;Core&#8220;) eines HTA erarbeitet werden und zwar idealerweise von mehreren HTA-Organisationen gemeinsam (joint report). In der auslaufenden JA2 wurde dies an mehreren Piloten mit unterschiedlichen Ans&#228;tzen getestet. Parallel dazu wurden methodische Leitf&#228;den erarbeitet und bereitgestellt, z.B. zu &#8222;interner Validit&#228;t von nicht randomisierten Studien&#8220; oder Literatursuche <TextLink reference="7"></TextLink>. Auf den Ergebnissen der JA2 wird mit JA3 eine weitere Joint Action aufbauen. Diese hat zum Ziel die praktischen Applikationen in die Arbeitsprozesse der beteiligten Organisationen effizient einzubringen und ein kontinuierliches Netzwerk zu etablieren. JA3 startet im Juni 2016 mit einem Gesamtbudget von <TextGroup><PlainText>20 Mio. &#8364;</PlainText></TextGroup> (60&#37; F&#246;rderung, 40&#37; Eigenanteil) und einer Laufzeit von 4 Jahren. Es sind 77 HTA-Organisationen aus allen EU-Mitgliedsstaaten beteiligt.</Pgraph><Pgraph>Zusammenfassend kann gesagt werden, dass es sich bei einer EU-weiten Harmonisierung nicht um eine Adaption oder Angleichung handelt, sondern eher um die Anstrengung den n&#246;tigen wissenschaftlichen Aufwand f&#252;r eine qualitative Entscheidungsgrundlage auf mehrere Schultern sinnvoll und effektiv zu verteilen. So bleiben mehr Ressourcen zur optimalen Ber&#252;cksichtigung nationaler Gegebenheiten und Bed&#252;rfnisse. Vorsicht ist geboten vor dem Einfluss treibender Kr&#228;fte, die &#252;ber ein Absenken des HTA-Qualit&#228;tsniveaus eine Aufwandsreduktion, Erleichterung der Marktzug&#228;nge und fr&#252;hestm&#246;glichen Einsatz am Patienten bewirken wollen. Oberstes Gebot muss die effektive Patientenversorgung mit solidarischem Zugang zu wirksamen Leistungen mit tats&#228;chlichem Nutzen sein.</Pgraph></TextBlock>
    <TextBlock linked="yes" name="Health Technology Assessment (HTA) und Real World Data (RWD) aus Sicht eines international operierenden forschenden pharmazeutischen Unternehmens">
      <MainHeadline>Health Technology Assessment (HTA) und Real World Data (RWD) aus Sicht eines international operierenden forschenden pharmazeutischen Unternehmens</MainHeadline><Pgraph><UnorderedList><ListItem level="1"><Mark1>Ansgar Hebborn</Mark1></ListItem></UnorderedList></Pgraph><Pgraph>Die Bedeutung von Daten aus der Routineversorgung (&#8222;Real World Daten&#8220; &#8211; RWD) im Rahmen der systematischen Evaluation von Arzneimitteln im Rahmen von Zulassungs-, Preisfindungs- und Erstattungsentscheidungen nimmt kontinuierlich zu. Dies ist zum einen auf die erleichterte Verf&#252;gbarkeit dieser Daten und die Weiterentwicklung von Techniken und Methoden der Datenaufbereitung und -analyse zur&#252;ckzuf&#252;hren, zum anderen auf die wachsende Erkenntnis das einzig RWD bestimmte im Zusammenhang mit dem Einsatz von Gesundheitsleistungen stehende Fragen beantworten kann.</Pgraph><SubHeadline3>RWD als wesentliche Grundlage von kontext-spezifischem HTA</SubHeadline3><Pgraph>Die k&#252;nftige Verf&#252;gbarkeit als wertvoll anerkannter innovativer Arzneimittel h&#228;ngt wesentlich davon ab, inwieweit die Pr&#228;ferenzen von Patienten, &#196;rzten, Kostentr&#228;gern und anderen Entscheidungstr&#228;gern im Gesundheitswesen von forschenden Pharma-Unternehmen verstanden und in deren Forschungs- und Entwicklungsentscheidungen reflektiert werden k&#246;nnen.</Pgraph><Pgraph>In diesem Zusammenhang kommt der systematischen Evaluation von Gesundheitsleistungen (&#8222;Health Technology Assessment&#8220; &#8211; HTA) im spezifischen Kontext nationaler Gesundheitssysteme sowie den auf dieser Basis getroffenen Entscheidungen &#252;ber deren finanzielle Erstattung und Verf&#252;gbarkeit besondere Bedeutung und Signalwirkung f&#252;r Investitionsentscheidungen forschender Pharma-Unternehmen zu. </Pgraph><Pgraph>Unabdingbare Voraussetzung f&#252;r eine gesellschaftlich positive Langfristwirkung von HTA auf die Dynamik von Innovationsprozessen ist die ad&#228;quate Abbildung von gesellschaftlichen Erwartungen an Leistungen des Gesundheitswesens im Kontext begrenzter &#246;konomischer Ressourcen. Dies erfordert es, HTA als systematischen multidisziplin&#228;ren Prozesses durchzuf&#252;hren, der den medizinischen, sozialen, &#246;konomischen, ethischen, legalen und organisatorischen Einfluss von Gesundheitsleistungen auf valide abgebildete Zielparameter f&#252;r das Gesundheitswesen absch&#228;tzt z.B. medizinische Outcomes, rechtliche Durchf&#252;hrbarkeit, gesamtwirtschaftliche Produktivit&#228;t, fairer Zugang). In diesem Sinne bezeichnet HTA die systematische Evaluation des Einflusses von Gesundheitsleistungen auf relevante Zielparameter im spezifischen Kontext eines (nationalen) Gesundheitssystems. </Pgraph><Pgraph>Dieses Idealbild von HTA findet sich jedoch nur selten in realen Gesundheitssystemen. In vielen L&#228;ndern konzentriert sich HTA im Wesentlichen auf die systematische Untersuchung des Einflusses von Gesundheitsleistungen auf einige wenige Entscheidungsparameter mit erwartbar guter Evidenzverf&#252;gbarkeit. Wesentliche Evidenz f&#252;r den Einfluss von Gesundheitsleistungen auf andere, allzu h&#228;ufig vernachl&#228;ssigte Entscheidungsparameter (Status Quo der Versorgungsqualit&#228;t, Pr&#228;ferenzen von Versicherten und Patienten), k&#246;nnen nur Daten aus dem Therapiealltag (&#8222;real world data&#8220; &#8211; RWD) liefern. Fehlende Ressourcen, ungel&#246;ste Probleme der Zug&#228;nglichkeit dieser Daten und eine teilweise unzureichend entwickelte oder  verbreitete Methodik der Aufbereitung und Analyse dieser Daten tragen wesentlich zur suboptimalen Nutzung von RWD bei.</Pgraph><Pgraph>In einigen L&#228;ndern fokussiert HTA nicht auf die Bewertung einer spezifischen Technologie im Kontext eines spezifischen (nationalen) Gesundheitssystems, sondern ist im Wesentlichen mit der Neubewertung eher kontextunspezifischer Aspekte wie der relativen klinischen Wirksamkeit und Sicherheit betraut. Angesichts der Begrenztheit nationaler HTA-Ressourcen deutet die gleichzeitig in vielen EU-Mitgliedsstaaten durchgef&#252;hrte Neubewertung klinischer Outcome-Parameter von Arzneimitteln auf der Basis der gleichen zum Zeitpunkt der Zulassung vorliegenden klinischen Studien auf ein beachtliches Potential f&#252;r die internationale Zusammenarbeit in diesem Feld hin. Der grenz&#252;berschreitenden Zusammenarbeit im Bereich der Evaluation der relativen klinischen Wirksamkeit von Gesundheitstechnologien hat sich das europ&#228;ische HTA-Netzwerk EUnetHTA verschrieben <TextLink reference="8"></TextLink>, <TextLink reference="9"></TextLink>. Mit den auf diese Weise eingesparten Ressourcen k&#246;nnte nationales HTA sich st&#228;rker auf die Untersuchung und Optimierung der nationalen Versorgungsrealit&#228;t konzentrieren, zu einer kontinuierlichen Verbesserung der Ergebnisqualit&#228;t im Gesundheitswesen beitragen und so dem urspr&#252;nglichen Ideal von HTA wieder n&#228;herkommen.</Pgraph><SubHeadline3>Zunehmende Bedeutung von RWD in regulatorischen Zulassungsprozessen als Herausforderung f&#252;r Preisfindungs- und Erstattungsentscheidungen</SubHeadline3><Pgraph>In den meisten L&#228;ndern wird das Potential von HTA als Grundlage von Desinvestitionsentscheidungen bei weitem nicht ausgesch&#246;pft. &#220;berwiegend wird HTA zur Unterst&#252;tzung von Entscheidungen eingesetzt, die die Aufnahme neuartiger Leistungen, z.B. vor allem von Arzneimitteln, in den Leistungskatalog solidarisch finanzierter Gesundheitssysteme regulieren. Nur selten wird HTA zur Unterst&#252;tzung von Optimierungsentscheidungen &#252;ber den Einsatz vermutlich (partiell) obsoleter Leistungen eingesetzt. Um den Einsatz von Gesundheitsleistungen im Laufe der Zeit zu optimieren, muss sich HTA wesentlich st&#228;rker als heute auf die Erhebung und Nutzung von Daten aus dem realen Versorgungsgeschehen konzentrieren. Nur auf der Basis dieser Daten wird es m&#246;glich sein, die am Versorgungsgeschehen beteiligten Akteure, aktiv in einen kontinuierlichen an Behandlungsergebnissen orientierten Lernprozess einzubeziehen. In vielen L&#228;ndern werden mittlerweile Daten &#252;ber die mit dem Einsatz von Arzneimitteln erzielten Behandlungsergebnisse erhoben. Im Zentrum der Nutzung dieser Daten steht h&#228;ufig jedoch die Frage nach finanzieller Kompensation f&#252;r nicht eingetretene Behandlungsergebnisse und nicht die von allen Beteiligten gemeinsam vorangetriebene Verbesserung der Versorgungsqualit&#228;t. So wird h&#228;ufig &#252;bersehen, dass informierte und motivierte Leistungserbringer und Patienten einen ganz wesentlichen Beitrag zur Erzielung nachhaltiger Behandlungserfolge leisten k&#246;nnen und auch m&#252;ssen. </Pgraph><SubHeadline3>Zunehmende Bedeutung von RWD in regulatorische Zulassungsprozessen als Herausforderung f&#252;r Preisfindungs- und Erstattungsentscheidungen</SubHeadline3><Pgraph>Auch im Rahmen der von der europ&#228;ischen Zulassungsbeh&#246;rde EMA und den beteiligten nationalen Zulassungsbeh&#246;rden angestrebten schrittweisen regulatorischen Zulassung f&#252;r bestimmte Arzneimittel (&#8222;adaptive licensing&#8220; oder &#8222;adaptive pathways&#8220;) wird der prospektiv geplante Einsatz von Daten aus dem Therapiealltag zur Schlie&#223;ung bestehender Evidenzl&#252;cken nach initialer Zulassung eine zentrale Rolle f&#252;r nachgelagerte Zulassungs- und Erstattungsentscheidungen spielen <TextLink reference="10"></TextLink>. Wesentlich f&#252;r den Erfolg dieses neuartigen, prospektiv geplanten schrittweisen Zulassungsprozesses wird die Entwicklung korrespondierender nationaler Preisfindungs- und Erstattungsprozesse sein. Nur wenn diese Prozesse die angestrebte fr&#252;here Verf&#252;gbarkeit bestimmter Arzneimittel f&#252;r priorisierte Patientengruppen mit besonderem Therapiebedarf in schwer behandelbaren Indikationen ad&#228;quat reflektieren, wird sich das Konzept der schrittweisen regulatorischen Zulassung durchsetzen k&#246;nnen. </Pgraph><Pgraph>Der klinisch-regulatorische Kontext innerhalb dessen bestimmte Patientengruppen mit von gesellschaftlich legitimierten Entscheidungstr&#228;gern determiniertem hohen Therapiebedarf im Rahmen von prospektiv geplanten schrittweisen Zulassungsverfahren priorisiert werden, kann die Verf&#252;gbarkeit von klinischer Evidenz zum Zeitpunkt der initialen Zulassung oder auch grunds&#228;tzlich so einschr&#228;nken, dass die den nachgelagerten Preisverhandlungen zugrundeliegenden hypothetischen maximalen Evidenzstandards nicht mehr erreicht werden k&#246;nnen. Einen wesentlichen Beitrag k&#246;nnte in diesem Zusammenhang der &#220;bergang von hypothetisch maximalen Evidenzstandard zum Konzept der &#8222;kontext-spezifisch erwartbaren Evidenz&#8220; im Rahmen von Preisfindungsprozessen liefern. Gem&#228;&#223; diesem Konzept wird im Rahmen der Preisfindung nicht ein hypothetisch maximaler Evidenzstandard zugrunde gelegt, sondern ein &#8222;kontext-spezifisches&#8220; Evidenzniveau, das angesichts des klinisch-regulatorischen Kontextes vom forschenden Pharma-Unternehmen zum Zeitpunkt der initialen Zulassung erwartet werden kann. Das Pharma-Unternehmen kann im Rahmen dieses Konzeptes zur weiteren Beibringung von Evidenz nach der initialen Zulassung verpflichtet werden, die je nach Fragestellung und praktischer Realisierbarkeit in weiteren randomisiert-kontrollierten Studien oder auch im Therapiealltag unter Routinebedingungen erhoben wird.</Pgraph><Pgraph>F&#252;r die erfolgreiche Einf&#252;hrung dieser neuartigen Zulassungsprozesse ist die konstruktive Zusammenarbeit aller beteiligten Stakeholder erforderlich. Nur so wird es m&#246;glich sein, in einem planvollen Prozess Konsequenzen f&#252;r die beteiligten Parteien fr&#252;hzeitig abzusch&#228;tzen und systematisch in einem umfassenden Evidenzentwicklungsplan zu adressieren. Dieser Plan beschreibt wie konventionelle klinische Studien, RWD und andere Verfahren der Evidenzgenerierung entscheidungsrelevante Fragen der beteiligten Entscheidungstr&#228;ger (Zulassungsbeh&#246;rde, HTA&#47;Kostentr&#228;ger, Leistungserbringer und Patienten) im Laufe des Produktlebenszyklus adressieren werden.</Pgraph><SubHeadline3>RWD als Grundlage bedingter Preisfindungs- und Erstattungsmodelle</SubHeadline3><Pgraph>In vielen L&#228;ndern werden innovative Verg&#252;tungsmodelle auf der Basis von RWD eingesetzt oder erprobt. Je nach Ausgestaltung erfolgt die Verg&#252;tung abh&#228;ngig vom konkreten Einsatz eines Arzneimittels in bestimmten Patientengruppen, f&#252;r die ein unterschiedlicher Mehrnutzen festgestellt wurde, oder aber auch abh&#228;ngig von definierten Behandlungsergebnissen. Mit derartigen Verg&#252;tungsmodellen wird versucht, das Potential eines Arzneimittels, einen relativen Mehrnutzen im Sinne relevanter Behandlungsergebnisse zu generieren, m&#246;glichst differenziert zu honorieren. Eine so differenzierte Honorierung von Gesundheitsleistungen kann wesentlich zum &#246;konomisch optimalen Einsatz von Gesundheitsleistungen und -technologien beitragen.</Pgraph></TextBlock>
    <TextBlock linked="yes" name="HTA und Real World Data &#8211; Relevanz f&#252;r den Gemeinsamen Bundesausschuss">
      <MainHeadline>HTA und Real World Data &#8211; Relevanz f&#252;r den Gemeinsamen Bundesausschuss</MainHeadline><Pgraph><UnorderedList><ListItem level="1"><Mark1>Matthias Perleth</Mark1></ListItem></UnorderedList></Pgraph><SubHeadline3>Vorbemerkung</SubHeadline3><Pgraph>Bei &#8222;real world&#8220;- oder &#8222;real life&#8220;-Daten handelt es sich um solche Daten, die au&#223;erhalb der kontrollierten Bedingungen von prospektiven klinischen Studien generiert werden. Damit sollen Daten aus in der Regel randomisierten kontrollierten Studien (RCTs) erg&#228;nzt werden, da diese an selektierten homogenen Patientenpopulationen unter Idealbedingungen durchgef&#252;hrt werden, und ihnen somit eine fehlende Verankerung in der &#8222;echten&#8220; Welt unterstellt wird. Dem kommt entgegen, dass zunehmend administrative Datenbest&#228;nde (Sekund&#228;rdaten) erschlossen werden, aber auch Register (krankheits- oder prozedurenspezifisch) eingerichtet werden, die ein Abbild der Versorgungsrealit&#228;t enthalten. Drittens werden &#8222;real world&#8220;-Daten f&#252;r Modellierungen verwendet, etwa im Kontext gesundheits&#246;konomischer Fragestellungen. Die International Society for Pharmacoeconomics and Out<TextGroup><PlainText>come</PlainText></TextGroup>s Research (ISPOR) hat sogar eine Task Force gegr&#252;ndet, die 2007 eine ausf&#252;hrliche Publikation zu dem Thema vorlegte, wobei der Fokus auf Kosten&#252;bernahme- und Finanzierungsentscheidungen gerichtet wurde <TextLink reference="11"></TextLink>. Diese f&#252;hrt an, &#8222;real world&#8220;-Daten w&#252;rden besser Auskunft geben zur &#8222;effectiveness&#8220; von medizinischen Methoden, der Wirksamkeit unter so genannten Alltagsbedingungen bzw. der Generalisierbarkeit von Studienergebnissen oder in der Formulierung der Task Force: &#8222;Yet, efficacy evidence in a particular group or subgroup is typically insufficient to project the size of the effectiveness impact in the population that would actually use a product.&#8221; </Pgraph><Pgraph>In diesem Beitrag geht es nicht darum, eine neue Definition zu pr&#228;sentieren oder vorhandene kritisch zu diskutieren, sondern darzustellen, ob und in welchem Zusammenhang &#8222;real world&#8220;-Daten im Kontext der Entscheidungsfindung im Gemeinsamen Bundesausschuss (G-BA) eine Rolle spielen (k&#246;nnen).</Pgraph><SubHeadline3>Hintergrund: Der Gemeinsame Bundesausschuss</SubHeadline3><Pgraph>Der Gemeinsame Bundesausschuss (G-BA) wurde 2004 als juristische Person des &#246;ffentlichen Rechts errichtet und konkretisiert den Leistungskatalog der GKV durch Entscheidungen zur Anwendbarkeit einzelner Technologien in Form von verbindlichen Richtlinien. Er hat weitgehende Zust&#228;ndigkeit f&#252;r die Bewertung von Arzneimitteln, nichtmedikament&#246;sen Untersuchungs- und Behandlungsmethoden, die Entwicklung von Disease Management-Programmen, Qualit&#228;tssicherung der station&#228;ren und ambulanten Versorgung, der Psychotherapie, der Versorgung mit Heil- und Hilfsmitteln, Zahnmedizin und der Bedarfsplanung im ambulanten Sektor. Er wird durch Vertreter des GKV-Spitzenverbands, der Leistungserbringer (ambulant t&#228;tige &#196;rztinnen und &#196;rzte, Psychotherapeutinnen und Psychotherapeuten, Krankenh&#228;user und Zahn&#228;rztinnen und Zahn&#228;rzte) sowie durch Patientenvertreterinnen und -vertreter (mit beratender Stimme) gebildet (<Hyperlink href="https:&#47;&#47;www.g-ba.de&#47;">https:&#47;&#47;www.g-ba.de&#47;</Hyperlink>).</Pgraph><Pgraph>Insbesondere f&#252;r die Bewertung des Zusatznutzens von Arzneimitteln wird immer wieder gefordert, nicht nur Daten aus RCTs zu ber&#252;cksichtigen. Seit 2011 hat der G-BA die gesetzliche Aufgabe, f&#252;r alle neu zugelassenen Arzneimittel mit neuen Wirkstoffen sofort nach Markteintritt eine (Zusatz-)Nutzenbewertung durchzuf&#252;hren (&#167; 35a SGB V). Deren Ergebnis ist die Entscheidungsgrundlage daf&#252;r, wieviel die gesetzliche Krankenversicherung nach entsprechenden Preisverhandlungen f&#252;r ein neues Arzneimittel mit einem neuen Wirkstoff zahlt. Im Grunde &#252;berpr&#252;ft der G-BA den von den Herstellern behaupteten zus&#228;tzlichen Nutzen des neuen Arzneimittels im Vergleich zum bisherigen Standard, den diese im Rahmen eines eigens erstellten Dossiers darlegen und mit Studiendaten untermauern. Entscheidend ist dabei, ob das neue Medikament mit dem Behandlungsstandard (die zweckm&#228;&#223;ige Vergleichstherapie) valide verglichen wurde. Hierf&#252;r sind RCTs der Standard. Dies und weitere Details sind in der Verfahrensordnung (VerfO) des G-BA geregelt <TextLink reference="12"></TextLink>.</Pgraph><Pgraph>Auch f&#252;r die Bewertung von Untersuchungs- und Behandlungsmethoden sieht die VerfO vor, dass deren Nutzen in der Regel im Rahmen von RCTs nachgewiesen wird (<TextGroup><PlainText>2. Kapitel</PlainText></TextGroup> &#167;13 Absatz 2). F&#252;r die Frage der Bewertung des patientenrelevanten Nutzens spielen &#8222;real world&#8220;-Daten demnach keine Rolle. F&#252;r die Entscheidungsfindung stellt sich zun&#228;chst die Frage nach der Generalisierbarkeit der Ergebnisse &#252;ber die relevanten Studienpopulationen hinaus nicht. Fehlende Evidenz wird in der Regel konstatiert, wenn die Studienlage zum Nutzen einer Methode (oder eines Arzneimittels) unzureichend ist, d.h., es fehlen RCTs. Dies kann <Mark2>nicht</Mark2> durch administrative Daten, Registerdaten, Beobachtungsstudien, Surveys oder sonstige Daten ersetzt werden. Die Anzahl der so genannten &#8222;Aussetzungsbeschl&#252;sse&#8220;, also der Beschl&#252;sse, die ein Beratungsverfahren wegen fehlender Evidenz f&#252;r einen bestimmten Zeitraum aussetzen, ist dementsprechend lang.</Pgraph><Pgraph>Dennoch stellt sich die Frage, ob die Ergebnisse aus RCTs auf die mutma&#223;liche Zielpopulation anwendbar sind. Windeler <TextLink reference="13"></TextLink> hat hierzu unter dem Stichwort externe Validit&#228;t das N&#246;tige festgehalten: Die Zielpopulation (die &#8222;real world&#8220;) stellt die Grundgesamtheit dar, aus der die Studienpopulation rekrutiert wurde. Sofern keine gewichtigen Gr&#252;nde dagegen sprechen, gilt die (inhaltliche, keine statistische) Annahme, dass die Studienergebnisse auch f&#252;r die Grundgesamtheit gelten, d.h. der Therapieeffekt erhalten bleibt. Die jeweils geltenden wesentlichen Bedingungen, unter denen die Therapieeffekte nachgewiesen wurden (und das ist bei nichtmedikament&#246;sen Methoden relevanter als bei Arzneimitteln), werden ggf. als Bestandteil der Richtlinie festgeschrieben, um die &#220;bertragbarkeit zu sichern (bspw. Strukturvorgaben und Qualit&#228;tsanforderungen). So genannte pragmatische RCTs mit sehr breit angelegten Einschlusskriterien bieten hinsichtlich der Frage der Praxistauglichkeit Vorteile und stellen somit einen m&#246;glichen Kompromiss dar.</Pgraph><SubHeadline3>Stellenwert von &#8222;Real world&#8220;-Daten im G-BA</SubHeadline3><Pgraph>Tabelle 1 <ImgLink imgNo="1" imgType="table"/> stellt f&#252;r die jeweiligen Zust&#228;ndigkeitsbereiche dar, welche Evidenzquellen (neben RCTs) bei Beratungen und der Entscheidungsfindung eine Rolle spielen k&#246;nnen. Dabei wird deutlich, dass eine Vielzahl von Datenquellen ausgewertet wird, von denen einige dem Bereich &#8222;real world&#8220; zugeordnet werden k&#246;nnen, bspw. Daten aus Krebsregistern oder epidemiologischen Studien. Diese Daten werden allerdings in der Regel abseits von Fragestellungen der Nutzenbewertung herangezogen, etwa im Kontext der Qualit&#228;tssicherung. Insbesondere im Rahmen von Evaluationsprojekten, die dazu dienen, die tats&#228;chliche Umsetzung von Richtlinien des G-BA in der Praxis zu evaluieren und &#196;nderungsbedarf zu identifizieren, werden &#8222;real world&#8220;-Daten ben&#246;tigt.</Pgraph><SubHeadline3>Fazit</SubHeadline3><Pgraph>Im Rahmen der Nutzenbewertung von Arzneimitteln und nichtmedikament&#246;sen Untersuchungs- und Behandlungsmethoden spielen &#8222;real world&#8220;-Daten in der Regel keine Rolle. Fragestellungen jenseits der Nutzenbewertung werden allerdings mit Daten aus Alltagsbedingungen informiert. Aktuell ist nicht abzusehen, dass sich diese Situation grunds&#228;tzlich &#228;ndert. Lediglich so genannte pragmatische RCTs w&#252;rden beide Welten im Rahmen der Nutzenbewertung ann&#228;hern. <LineBreak></LineBreak><LineBreak></LineBreak>Soweit der &#220;berblick zu HTA in Europa und dem Umgang mit Real World Data. Im Folgenden werden neue Aspekte der Verwendung von Surrogatparametern diskutiert, wobei insbesondere die Frage methodischer &#8222;Gaps&#8220; aufgeworfen wird. </Pgraph></TextBlock>
    <TextBlock linked="yes" name="Surrogatvalidierung im HTA &#8211; Mind the GAP">
      <MainHeadline>Surrogatvalidierung im HTA &#8211; Mind the GAP</MainHeadline><Pgraph><UnorderedList><ListItem level="1"><Mark1>Kirsten H. Herrmann</Mark1></ListItem></UnorderedList></Pgraph><Pgraph>Health Technology Assessments (HTA) geh&#246;ren international und auch im deutschen Gesundheitswesen zu den Standardinstrumenten der Entscheidungsfindung insbesondere zur Definition des Leistungskatalogs der Krankenkassen. Stakeholder wie zum Beispiel Krankenkassen, Leistungserbringer und Patienten sind aus unterschiedlichen Perspektiven interessiert, Folgen von Gesundheitstechnologien abzusch&#228;tzen. Insbesondere epidemiologische und biometrische Fragen und Methoden spielen eine Rolle, daneben werden systematische Reviews, Nutzen-Schaden-Abw&#228;gungen, gesundheits&#246;konomische Evaluationen und entscheidungsanalytische Modellierungen eingesetzt <TextLink reference="14"></TextLink>, <TextLink reference="1"></TextLink>. In unterschiedlichen L&#228;ndern werden diese Rollen unterschiedlich gewichtet. Vor diesem Hintergrund entwickeln sich zunehmende Bestrebungen nach Harmonisierung in der europ&#228;ischen Zusammenarbeit. Seit vielen Jahren ist das &#8222;European network for Health Technology Assessment&#8220; (EUnetHTA) im Bereich der Harmonisierung sehr aktiv <TextLink reference="15"></TextLink>. Im Rahmen der Zusammenarbeit werden verschiedene Punkte kontrovers diskutiert. Die Entscheidungsmechanismen verschiedener Gesundheitssysteme (steuerfinanziert, marktwirtschaftlich oder versicherungsbasiert) unterliegen verschiedenen rechtlichen Rahmenbedingungen und folglich werden M&#246;glichkeiten der Regulation, der Diffusion und Nutzung von Technologien unterschiedlich eingesetzt. </Pgraph><Pgraph>Von der Priorit&#228;tensetzung bei der Auswahl zu bewertender Technologien bis zur Methodik zur Erstellung von HTAs werden Schwerpunkte unterschiedlich gewichtet. Themen wie der methodologische Umgang mit Real World Data und Surrogatparametern werden seit vielen Jahren wiederkehrend diskutiert. Sichtweisen verschiedener Stakeholder k&#246;nnen variieren und folglich kontrovers diskutiert werden. Eine fr&#252;he Studie folgert in Bezug auf klinische Studien, dass Surrogate einen vorl&#228;ufigen Hinweis bieten k&#246;nnen, der dann durch weitere Studien belegt werden muss, bevor Innovationen eingesetzt werden <TextLink reference="16"></TextLink>. Ein neuerer Review untersucht den Nutzen von Surrogat Outcomes in Kosten-Effektivit&#228;ts-Modellen in HTAs in Gro&#223;britannien. In dieser Arbeit werden 35 Studien eingeschlossen, von denen 4 Studien das Kosten-Effektivit&#228;ts-Modell auf Surrogat Outcomes basieren. Die Transparenz der Quantifizierung und Extrapolation von Unsicherheit von Surrogat vs. endg&#252;ltiges Outcome variierte erheblich in diesen 4 Studien <TextLink reference="17"></TextLink>. </Pgraph><Pgraph>Am Beispiel der Surrogatparameter, die in den HTA-Verfahren vielfach im Bereich der Onkologie aktuell diskutiert werden, werden verschiedene L&#246;sungsans&#228;tze durchgespielt. So werden Ans&#228;tze untersucht, um Regressionsverfahren als Ersatz f&#252;r bivariate Modelle zur Bestimmung des Surrogatschwellenwerts bei korrelationsbasierten Validierungsverfahren einzusetzen. Die Autoren folgern, dass vereinfachte Modellans&#228;tze mit aggregierten Daten keine dem urspr&#252;nglichen bivariaten Modell auf Basis von individuelle Patientendaten gegen&#252;ber gleichwertige Ergebnisse liefern. Surrogate Threshold Effects, die sich unter Verwendung von Meta-Regressionen auf Basis aggregierter Daten ergeben, k&#246;nnen jedoch in den betrachteten F&#228;llen als konservativer Ersatz angesehen werden <TextLink reference="18"></TextLink>. Ergebnisse von Simulationsstudien diskutieren die M&#246;glichkeit der Surrogatvalidierung durch Korrelation und Surrogate Threshold Effect. Die durchgef&#252;hrten Simulationen zeigen, dass die im Rapid Report beschriebene Methodik, wonach die untere Grenze des Konfidenzintervalls ausschlaggebend f&#252;r eine hohe Korrelation bei der Surrogatvalidierung sein soll, eine in der Praxis kaum zu &#252;berwindende H&#252;rde darstellt <TextLink reference="19"></TextLink>. <LineBreak></LineBreak><LineBreak></LineBreak>In einem weiterem Vortrag untersuchten Dr. Christoph Sch&#252;rmann und Dr. Wiebke Sieben aus dem IQWiG, ob und welche Regressionsmodelle (einfache und gewichtete lineare Regression, Meta-Regression mit zuf&#228;lligen Effekten) einen Ersatz darstellen f&#252;r bivariate Modelle zur Bestimmung des Surrogatschwellenwerts bei korrelationsbasierten Validierungsverfahren.</Pgraph></TextBlock>
    <TextBlock linked="yes" name="Surrogatvalidierung durch Korrelation und Surrogate Threshold Effect &#8211; Ergebnisse von Simulationsstudien">
      <MainHeadline>Surrogatvalidierung durch Korrelation und Surrogate Threshold Effect &#8211; Ergebnisse von Simulationsstudien</MainHeadline><Pgraph><UnorderedList><ListItem level="1"><Mark1>Johanna Gillhaus, Ralf Goertz, Ulli Jeratsch, Friedhelm Leverkus</Mark1></ListItem></UnorderedList></Pgraph><SubHeadline3>Hintergrund</SubHeadline3><Pgraph>In onkologischen Studien wird oftmals statt des patientenrelevanten Endpunkts Gesamt&#252;berleben (overall survival, OS) der Endpunkt progressionsfreies &#220;berleben (progression-free survival, PFS) erfasst. F&#252;r eine Anerkennung von PFS als patientenrelevant im Verfahren der Nutzenbewertung gilt es, dieses als Surrogatendpunkt f&#252;r OS in der betrachteten Indikation zu validieren. Das Institut f&#252;r Qualit&#228;t und Wirtschaftlichkeit im Gesundheitswesen (IQWiG) hat im Rahmen eines Rapid Report Methoden zur Validierung von Surrogatendpunkten dargestellt und Empfehlungen zur Verwendung von korrelationsbasierten Verfahren ausgesprochen. In diesen Methoden werden die Einsch&#228;tzung der Aussagesicherheit der Studienergebnisse und der Zusammenhang zwischen den Effektsch&#228;tzern des Surrogats und des patientenrelevanten Endpunkts auf Studienebene einbezogen. Der Zusammenhang wird mit dem Korrelationskoeffizienten r bzw. dem Bestimmtheitsma&#223; R&#178; und entsprechendem Konfidenzintervall (KI) gemessen. F&#252;r den Nachweis der Validit&#228;t des Surrogats m&#252;ssen eine hohe Korrelation sowie eine hohe Aussagesicherheit der Studienergebnisse vorliegen. Im Falle einer mittleren Korrelation kann das Konzept des Surrogate Threshold Effects (STE) zur Festlegung von Schwellenwerten f&#252;r den Effektsch&#228;tzer des Surrogatendpunkts angewandt werden.</Pgraph><SubHeadline3>Methoden </SubHeadline3><Pgraph>In Simulationsstudien wird nun untersucht, welche Bedingungen f&#252;r eine erfolgreiche Surrogatvalidierung mit korrelationsbasierten Verfahren erf&#252;llt sein m&#252;ssen. Variierende Parameter sind die Effektsch&#228;tzer des Surrogats und des patientenrelevanten Endpunkts, die Korrelation zwischen den Effektsch&#228;tzern, die Patientenanzahl sowie die Anzahl der Studien. Es wird analysiert, in welchen Szenarien der Nachweis einer hohen Korrelation gelingt und falls nicht, welche Voraussetzungen vorliegen m&#252;ssen, dass anhand des Surrogats unter Einbeziehen des STE-Konzepts noch Schl&#252;sse auf den patientenrelevanten Endpunkt gezogen werden k&#246;nnen. Die Herausforderungen der vom IQWiG pr&#228;ferierten Methodik zur Surrogatvalidierung in der Praxis werden analysiert.</Pgraph><SubHeadline3>Ergebnisse</SubHeadline3><Pgraph>Die Simulation der Surrogatvalidierung &#252;ber das korrelationsbasierte Verfahren sowie die analytische Herleitung der Power zeigen, dass diese bei moderater Studienanzahl und starker zugrundeliegender wahrer Korrelation dennoch sehr gering ist. Die Power liegt f&#252;r n&#61;5 Studien und Korrelation &#961;&#61;0,9 unter 6&#37;. Es w&#228;re eine sehr hohe Korrelation von &#961;&#61;0,95 in mindestens n&#61;25 Studien erforderlich, um eine Power von 80&#37; zu erhalten. Dieses Szenario ist in der Realit&#228;t allerdings v&#246;llig unplausibel. In der Simulation zur Anwendung des STE-Konzepts liegt die Power nur bei etwa ein F&#252;nftel der betrachteten Szenarien &#252;ber 80&#37;. Dabei handelte es sich jedoch um Szenarien, in denen die Parameterkonstellationen aus hoher Studien- und Patientenanzahl und gro&#223;em Effekt des OS eher unrealistisch sind. Der Parameter der Korrelation &#961; zwischen den Effektsch&#228;tzern der Studien wirkt sich ebenso wie verschiedene Effekte des PFS kaum auf die Power des STE-Verfahrens aus. </Pgraph><SubHeadline3>Fazit </SubHeadline3><Pgraph>Die durchgef&#252;hrten Simulationen zeigen, dass die im Rapid Report beschriebene Methodik, wonach die untere Grenze des Konfidenzintervalls ausschlaggebend f&#252;r eine hohe Korrelation bei der Surrogatvalidierung sein soll, eine in der Praxis kaum zu &#252;berwindende H&#252;rde darstellt. Bei gering bis moderat angenommener Studienanzahl &#8211; wie es f&#252;r eine Validierung von Surrogatendpunkten im Rahmen der fr&#252;hen Nutzenbewertung realistisch erscheint &#8211; ist die Power selbst bei hoher, wahrer Korrelation &#228;u&#223;erst gering. Problematisch erscheint weiterhin die Empfehlung, die Aussagekraft der Studien in die Analyse mit einzubeziehen, auch wenn dies prinzipiell gerechtfertigt erscheint. Bei Betrachtung der Definition des Korrelationskoeffizienten und dessen Dichtefunktion wird zudem klar, dass die empirische Korrelation unter Annahme einer festen wahren Korrelation gar nicht von der Varianz der Einzelsch&#228;tzer, sondern nur von der Anzahl der Wertepaare abh&#228;ngt. Die Patientenanzahl hat somit keine Auswirkung auf das Konfidenzintervall der Korrelation. Dies gilt ebenso, wenn Modelle mit Gewichtung der Studien verwendet werden. Die Anwendung des STE-Konzeptes gem&#228;&#223; der im Rapid Report beschriebene Methodik ist ebenfalls zu restriktiv. Ein Vergleich des STE mit dem Punktsch&#228;tzer des Surrogatendpunkts w&#228;re eine Alternative, die in realistischen Szenarien sehr geringe &#945;-Fehler zeigte. Gegebenenfalls kann in weiteren Simulationen &#252;berpr&#252;ft werden, ob ein vorgeschalteter Test (z. B. ob der ein-&#963;-Bereich der Verteilung des HR<Subscript>OS</Subscript> unter 1 liegt) den &#945;-Fehler auch in diesen unrealistischen Szenarien kontrolliert.</Pgraph></TextBlock>
    <TextBlock linked="yes" name="Regressionsverfahren als Ersatz f&#252;r bivariate Modelle zur Bestimmung des Surrogate Threshold Effects (STE) bei korrelationsbasierten Validierungsverfahren">
      <MainHeadline>Regressionsverfahren als Ersatz f&#252;r bivariate Modelle zur Bestimmung des Surrogate Threshold Effects (STE) bei korrelationsbasierten Validierungsverfahren</MainHeadline><Pgraph><UnorderedList><ListItem level="1"><Mark1>Christoph Sch&#252;rmann, Wiebke Sieben</Mark1></ListItem></UnorderedList></Pgraph><Pgraph>Der Einsatz von Surrogatendpunkten in klinischen Studien mag vielversprechend sein, wenn beispielsweise die lange Zeit bis zum Eintreten des eigentlich interessierenden Ereignisses durch die Beobachtung eines zeitig fr&#252;her eintretenden Ereignisses verk&#252;rzt werden kann. Insbesondere in der Onkologie werden mit diesem Ziel Surrogatendpunkte wie das progressions- oder krankheitsfreie &#220;berleben erhoben, um damit R&#252;ckschl&#252;sse auf das eigentlich interessierende Gesamt&#252;berleben im Vergleich zweier Interventionen zu erlauben. Dies erfordert jedoch eine methodisch angemessene Validierung der verwendeten Surrogatendpunkte. Unter den hierf&#252;r vorhandenen Ans&#228;tzen sind insbesondere korrelationsbasierte Verfahren (<TextLink reference="20"></TextLink>, <TextLink reference="21"></TextLink> und darauf aufbauende Weiterentwicklungen) zu nennen, die in einem bivariaten statistischen Modell den Zusammenhang von Surrogat- und eigentlichem Endpunkt auf individueller und Studienebene analysieren. Hierzu sind allerdings individuelle Patientendaten (IPD) notwendig. Als Validierungsma&#223;e k&#246;nnen aus diesen Modellen einerseits Korrelationsma&#223;e wie der Korrelationskoffizient (auf Patienten- und Studienebene) oder das Bestimmtheitsma&#223; abgeleitet werden, andererseits auch Schwellenwerte f&#252;r Effekte auf den Surrogatendpunkt, aus deren &#220;ber- oder Unterschreiten in einer neuen klinischen Studie sich ein Effekt auf den eigentlichen Endpunkt ableiten l&#228;sst. Derartige Surrogate Threshold Effects (STEs) bieten in der Anwendungssituation den Vorteil, die St&#228;rke des Behandlungseffekts f&#252;r den eigentlichen Endpunkt besser charakterisieren zu k&#246;nnen, als dies durch Korrelationsma&#223;e m&#246;glich ist. Die Klasse dieser bivariaten Modelle ist in der Literatur mittlerweile intensiv untersucht und f&#252;r einige Indikationen und Interventionen auch beispielhaft angewendet worden <TextLink reference="22"></TextLink>, <TextLink reference="23"></TextLink>, <TextLink reference="24"></TextLink>. Daneben finden sich Anwendungen, die in Ermangelung individueller Patientendaten auf Regressionsmodelle auf Basis aggregierter Daten zur Beurteilung der Surrogatvalidit&#228;t zur&#252;ckgreifen <TextLink reference="25"></TextLink>, <TextLink reference="26"></TextLink>, <TextLink reference="27"></TextLink>. Bei diesen Ans&#228;tzen ist zun&#228;chst fraglich, ob diese zu gleichen Resultaten hinsichtlich des STEs wie die bivariaten Modelle auf IPD-Basis f&#252;hren.</Pgraph><Pgraph>In einer Simulationsstudie <TextLink reference="28"></TextLink> wurden individuelle Patientendaten f&#252;r zwei stetige Endpunkte generiert, wobei die Zahl der zur Validierung eingesetzten Studien, die Studienfallzahl, die Gr&#246;&#223;e der Behandlungseffekte sowohl auf Surrogat- und eigentlichen Endpunkt und die Korrelationen der Endpunkte auf individueller und Studienebene systematisch variiert wurden. F&#252;r jeden so erzeugten Datensatz wurden anschlie&#223;end die aus dem urspr&#252;nglichen, auf IPD basierenden bivariaten Modell ermittelten STEs und solche verglichen, die sich aus vereinfachten Modellen wie linearem Regressionsmodell, linearem gewichtetem Regressionsmodell und Meta-Regressionsmodell mit zuf&#228;lligen Effekten auf Basis von aggregierten Daten ergeben. Unabh&#228;ngig von den genannten Einflussfaktoren zeigt sich dabei, dass die linearen Regressionsmodelle nahezu ausschlie&#223;lich zu STEs f&#252;hren, die betragsm&#228;&#223;ig kleiner als die des urspr&#252;nglichen bivariaten Modellansatzes mit IPD sind, und diese damit untersch&#228;tzen. Umgekehrt liegen die STEs nach Meta-Regression fast immer oberhalb der Vergleichswerte. Die St&#228;rke des Unterschieds wird sowohl absolut als auch relativ im Wesentlichen durch die Korrelation der Behandlungseffekte auf Studienebene bestimmt, daneben auch durch die Anzahl der Studien des Validierungsdatensatzes. Die &#252;brigen untersuchten Faktoren hatten in den Modellen diesbez&#252;glich keinen relevanten Einfluss. Daraus l&#228;sst sich folgern, dass vereinfachte Modellans&#228;tze mit aggregierten Daten keine dem urspr&#252;nglichen bivariaten Modell auf Basis von IPD gegen&#252;ber gleichwertige Ergebnisse liefern. STEs, die sich unter Verwendung von Meta-Regressionen auf Basis aggregierter Daten ergeben, k&#246;nnen jedoch in den betrachteten F&#228;llen als konservativer Ersatz angesehen werden.</Pgraph></TextBlock>
    <TextBlock linked="yes" name="Anmerkung">
      <MainHeadline>Anmerkung</MainHeadline><SubHeadline>Interessenkonflikte</SubHeadline><Pgraph>Die Autoren erkl&#228;ren, dass keine Interessenkonflikte in Zusammenhang mit diesem Artikel vorliegen.</Pgraph></TextBlock>
    <References linked="yes">
      <Reference refNo="1">
        <RefAuthor>Perleth M</RefAuthor>
        <RefAuthor>Busse R</RefAuthor>
        <RefAuthor>Gerhardus A</RefAuthor>
        <RefAuthor>Gibis B</RefAuthor>
        <RefAuthor>L&#252;hmann D</RefAuthor>
        <RefAuthor>Zentner A</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2014</RefYear>
        <RefBookTitle>Health Technology Assessment: Konzepte, Methoden, Praxis f&#252;r Wissenschaft und Entscheidungsfindung</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Perleth M, Busse R, Gerhardus A, Gibis B, L&#252;hmann D, Zentner A, editors. Health Technology Assessment: Konzepte, Methoden, Praxis f&#252;r Wissenschaft und Entscheidungsfindung. 2nd ed. Berlin: Med. Wiss. Verl.-Ges; 2014.</RefTotal>
      </Reference>
      <Reference refNo="2">
        <RefAuthor>Shemilt I</RefAuthor>
        <RefAuthor>Mugford M</RefAuthor>
        <RefAuthor>Vale L</RefAuthor>
        <RefAuthor>Marsh K</RefAuthor>
        <RefAuthor>Donaldson C</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2010</RefYear>
        <RefBookTitle>Evidence-based Decisions and Economics: Health Care, Social Welfare, Education and Criminal Justice, 2nd edition</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Shemilt I, Mugford M, Vale L, Marsh K, Donaldson C. Evidence-based Decisions and Economics: Health Care, Social Welfare, Education and Criminal Justice, 2nd edition. Chichester: Wiley-Blackwell; 2010. DOI: 10.1002&#47;9781444320398</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1002&#47;9781444320398</RefLink>
      </Reference>
      <Reference refNo="3">
        <RefAuthor>Anonym</RefAuthor>
        <RefTitle>Directive 2011&#47;24&#47;EU of the European Parliament and of the Council of 9 March 2011 on the application of patients&#39; rights in cross-border healthcare</RefTitle>
        <RefYear>2011</RefYear>
        <RefJournal>Official Journal of the European Union</RefJournal>
        <RefPage>45-65</RefPage>
        <RefTotal>Directive 2011&#47;24&#47;EU of the European Parliament and of the Council of 9 March 2011 on the application of patients&#39; rights in cross-border healthcare. Official Journal of the European Union. 2011 &#91;cited 2016 Jun 16&#93;; L88&#47;45:45-65. Available from: http:&#47;&#47;eur-lex.europa.eu&#47;LexUriServ&#47;LexUriServ.do&#63;uri&#61;OJ:L:2011:088:0045:0065:EN:PDF</RefTotal>
        <RefLink>http:&#47;&#47;eur-lex.europa.eu&#47;LexUriServ&#47;LexUriServ.do&#63;uri&#61;OJ:L:2011:088:0045:0065:EN:PDF</RefLink>
      </Reference>
      <Reference refNo="4">
        <RefAuthor>European Commission</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear></RefYear>
        <RefBookTitle>Health Technology Assessment Network</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>European Commission. Health Technology Assessment Network. &#91;cited 2016 Jun 16&#93;. Available from: http:&#47;&#47;ec.europa.eu&#47;health&#47;technology&#95;assessment&#47;policy&#47;network&#47;index&#95;en.htm</RefTotal>
        <RefLink>http:&#47;&#47;ec.europa.eu&#47;health&#47;technology&#95;assessment&#47;policy&#47;network&#47;index&#95;en.htm</RefLink>
      </Reference>
      <Reference refNo="5">
        <RefAuthor>EU Health Technology Assessment Network</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2014</RefYear>
        <RefBookTitle>Strategy for EU Cooperation on Health Technology Assessment</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>EU Health Technology Assessment Network. Strategy for EU Cooperation on Health Technology Assessment. 2014 &#91;cited 2016 Jun 16&#93;. Available from: http:&#47;&#47;ec.europa.eu&#47;health&#47;technology&#95;assessment&#47;docs&#47;2014&#95;strategy&#95;eucooperation&#95;hta&#95;en.pdf</RefTotal>
        <RefLink>http:&#47;&#47;ec.europa.eu&#47;health&#47;technology&#95;assessment&#47;docs&#47;2014&#95;strategy&#95;eucooperation&#95;hta&#95;en.pdf</RefLink>
      </Reference>
      <Reference refNo="6">
        <RefAuthor>European Commission</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>HTA Network reflection paper on &#34;reuse of joint work in national HTA activities&#34;</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>European Commission. HTA Network reflection paper on &#34;reuse of joint work in national HTA activities&#34;. 2015 &#91;cited 2016 Jun 16&#93;. Available from: http:&#47;&#47;ec.europa.eu&#47;health&#47;technology&#95;assessment&#47;docs&#47;reuse&#95;jointwork&#95;national&#95;hta&#95;activities&#95;en.pdf</RefTotal>
        <RefLink>http:&#47;&#47;ec.europa.eu&#47;health&#47;technology&#95;assessment&#47;docs&#47;reuse&#95;jointwork&#95;national&#95;hta&#95;activities&#95;en.pdf</RefLink>
      </Reference>
      <Reference refNo="7">
        <RefAuthor>EUnetHTA</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2016</RefYear>
        <RefBookTitle>EUnetHTA Guidelines</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>EUnetHTA. EUnetHTA Guidelines. 2016 &#91;cited 2016 Jun 16&#93;. Available from: http:&#47;&#47;www.eunethta.eu&#47;eunethta-guidelines</RefTotal>
        <RefLink>http:&#47;&#47;www.eunethta.eu&#47;eunethta-guidelines</RefLink>
      </Reference>
      <Reference refNo="8">
        <RefAuthor>Kleijnen S</RefAuthor>
        <RefAuthor>George E</RefAuthor>
        <RefAuthor>Goulden S</RefAuthor>
        <RefAuthor>d&#39;Andon A</RefAuthor>
        <RefAuthor>Vitr&#233; P</RefAuthor>
        <RefAuthor>Osinska B</RefAuthor>
        <RefAuthor>Rdzany R</RefAuthor>
        <RefAuthor>Thirstrup S</RefAuthor>
        <RefAuthor>Corbacho B</RefAuthor>
        <RefAuthor>Nagy BZ</RefAuthor>
        <RefAuthor>Leufkens HG</RefAuthor>
        <RefAuthor>de Boer A</RefAuthor>
        <RefAuthor>Goettsch WG</RefAuthor>
        <RefTitle>Relative effectiveness assessment of pharmaceuticals: similarities and differences in 29 jurisdictions</RefTitle>
        <RefYear>2012</RefYear>
        <RefJournal>Value Health</RefJournal>
        <RefPage>954-60</RefPage>
        <RefTotal>Kleijnen S, George E, Goulden S, d&#39;Andon A, Vitr&#233; P, Osinska B, Rdzany R, Thirstrup S, Corbacho B, Nagy BZ, Leufkens HG, de Boer A, Goettsch WG. Relative effectiveness assessment of pharmaceuticals: similarities and differences in 29 jurisdictions. Value Health. 2012 Sep-Oct;15(6):954-60. DOI: 10.1016&#47;j.jval.2012.04.010</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1016&#47;j.jval.2012.04.010</RefLink>
      </Reference>
      <Reference refNo="9">
        <RefAuthor>EUnetHTA</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2016</RefYear>
        <RefBookTitle>Joint Assessments</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>EUnetHTA. Joint Assessments. 2016 &#91;cited 2016 May 3&#93;. Available from: http:&#47;&#47;www.eunethta.eu&#47;joint-assessments</RefTotal>
        <RefLink>http:&#47;&#47;www.eunethta.eu&#47;joint-assessments</RefLink>
      </Reference>
      <Reference refNo="10">
        <RefAuthor>Eichler HG</RefAuthor>
        <RefAuthor>Baird LG</RefAuthor>
        <RefAuthor>Barker R</RefAuthor>
        <RefAuthor>Bloechl-Daum B</RefAuthor>
        <RefAuthor>B&#248;rlum-Kristensen F</RefAuthor>
        <RefAuthor>Brown J</RefAuthor>
        <RefAuthor>Chua R</RefAuthor>
        <RefAuthor>Del Signore S</RefAuthor>
        <RefAuthor>Dugan U</RefAuthor>
        <RefAuthor>Ferguson J</RefAuthor>
        <RefAuthor>Garner S</RefAuthor>
        <RefAuthor>Goettsch W</RefAuthor>
        <RefAuthor>Haigh J</RefAuthor>
        <RefAuthor>Honig P</RefAuthor>
        <RefAuthor>Hoos A</RefAuthor>
        <RefAuthor>Huckle P</RefAuthor>
        <RefAuthor>Kondo T</RefAuthor>
        <RefAuthor>Le Cam Y</RefAuthor>
        <RefAuthor>Leufkens H</RefAuthor>
        <RefAuthor>Lim R</RefAuthor>
        <RefAuthor>Longson C</RefAuthor>
        <RefAuthor>Lumpkin M</RefAuthor>
        <RefAuthor>Maraganore J</RefAuthor>
        <RefAuthor>O&#39;Rourke B</RefAuthor>
        <RefAuthor>Oye K</RefAuthor>
        <RefAuthor>Pezalla E</RefAuthor>
        <RefAuthor>Pignatti F</RefAuthor>
        <RefAuthor>Raine J</RefAuthor>
        <RefAuthor>Rasi G</RefAuthor>
        <RefAuthor>Salmonson T</RefAuthor>
        <RefAuthor>Samaha D</RefAuthor>
        <RefAuthor>Schneeweiss S</RefAuthor>
        <RefAuthor>Siviero PD</RefAuthor>
        <RefAuthor>Skinner M</RefAuthor>
        <RefAuthor>Teagarden JR</RefAuthor>
        <RefAuthor>Tominaga T</RefAuthor>
        <RefAuthor>Trusheim MR</RefAuthor>
        <RefAuthor>Tunis S</RefAuthor>
        <RefAuthor>Unger TF</RefAuthor>
        <RefAuthor>Vamvakas S</RefAuthor>
        <RefAuthor>Hirsch G</RefAuthor>
        <RefTitle>From adaptive licensing to adaptive pathways: delivering a flexible life-span approach to bring new drugs to patients</RefTitle>
        <RefYear>2015</RefYear>
        <RefJournal>Clin Pharmacol Ther</RefJournal>
        <RefPage>234-46</RefPage>
        <RefTotal>Eichler HG, Baird LG, Barker R, Bloechl-Daum B, B&#248;rlum-Kristensen F, Brown J, Chua R, Del Signore S, Dugan U, Ferguson J, Garner S, Goettsch W, Haigh J, Honig P, Hoos A, Huckle P, Kondo T, Le Cam Y, Leufkens H, Lim R, Longson C, Lumpkin M, Maraganore J, O&#39;Rourke B, Oye K, Pezalla E, Pignatti F, Raine J, Rasi G, Salmonson T, Samaha D, Schneeweiss S, Siviero PD, Skinner M, Teagarden JR, Tominaga T, Trusheim MR, Tunis S, Unger TF, Vamvakas S, Hirsch G. From adaptive licensing to adaptive pathways: delivering a flexible life-span approach to bring new drugs to patients. Clin Pharmacol Ther. 2015 Mar;97(3):234-46. DOI: 10.1002&#47;cpt.59</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1002&#47;cpt.59</RefLink>
      </Reference>
      <Reference refNo="11">
        <RefAuthor>Garrison LP Jr</RefAuthor>
        <RefAuthor>Neumann PJ</RefAuthor>
        <RefAuthor>Erickson P</RefAuthor>
        <RefAuthor>Marshall D</RefAuthor>
        <RefAuthor>Mullins CD</RefAuthor>
        <RefTitle>Using real-world data for coverage and payment decisions: the ISPOR Real-World Data Task Force report</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>Value Health</RefJournal>
        <RefPage>326-35</RefPage>
        <RefTotal>Garrison LP Jr, Neumann PJ, Erickson P, Marshall D, Mullins CD. Using real-world data for coverage and payment decisions: the ISPOR Real-World Data Task Force report. Value Health. 2007 Sep-Oct;10(5):326-35. Available from: https:&#47;&#47;www.ispor.org&#47;workpaper&#47;RWD&#95;TF&#47;ISPORRealWorldDataTaskForceReport.pdf</RefTotal>
        <RefLink>https:&#47;&#47;www.ispor.org&#47;workpaper&#47;RWD&#95;TF&#47;ISPORRealWorldDataTaskForceReport.pdf</RefLink>
      </Reference>
      <Reference refNo="12">
        <RefAuthor>Gemeinsamer Bundesausschuss</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear></RefYear>
        <RefBookTitle>Verfahrensordnung des Gemeinsamen Bundesausschusses in der Fassung vom 18. Dezember 2008</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Gemeinsamer Bundesausschuss. Verfahrensordnung des Gemeinsamen Bundesausschusses in der Fassung vom 18. Dezember 2008. &#91;zuletzt ge&#228;ndert am 18. Dezember 2014, ver&#246;ffentlicht im Bundesanzeiger BAnz AT 15.04.2015 B2; cited 2016 Jun 16&#93;. Available from: https:&#47;&#47;www.g-ba.de&#47;downloads&#47;62-492-1002&#47;VerfO&#95;2014-12-18&#95;iK-2015-04-16.pdf</RefTotal>
        <RefLink>https:&#47;&#47;www.g-ba.de&#47;downloads&#47;62-492-1002&#47;VerfO&#95;2014-12-18&#95;iK-2015-04-16.pdf</RefLink>
      </Reference>
      <Reference refNo="13">
        <RefAuthor>Windeler J</RefAuthor>
        <RefTitle>Externe Validit&#228;t</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>Z Evid Fortbild Qual Gesundhwesen</RefJournal>
        <RefPage>253-9</RefPage>
        <RefTotal>Windeler J. Externe Validit&#228;t. Z Evid Fortbild Qual Gesundhwesen. 2008 &#91;cited 2016 Jun 16&#93;;102(4):253-9. Available from: http:&#47;&#47;www.ebm-netzwerk.de&#47;site&#47;was-ist-ebm&#47;images&#47;windeler-externe-valid.pdf</RefTotal>
        <RefLink>http:&#47;&#47;www.ebm-netzwerk.de&#47;site&#47;was-ist-ebm&#47;images&#47;windeler-externe-valid.pdf</RefLink>
      </Reference>
      <Reference refNo="14">
        <RefAuthor>Cochrane Deutschland</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2016</RefYear>
        <RefBookTitle>Health Technology Assessment (HTA)</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Cochrane Deutschland. Health Technology Assessment (HTA). 2016 &#91;cited 2016 Feb 6&#93;. Available from: http:&#47;&#47;www.cochrane.de&#47;de&#47;hta</RefTotal>
        <RefLink>http:&#47;&#47;www.cochrane.de&#47;de&#47;hta</RefLink>
      </Reference>
      <Reference refNo="15">
        <RefAuthor>EUnetHTA</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2016</RefYear>
        <RefBookTitle>European network for Health Technology Assessment</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>EUnetHTA. European network for Health Technology Assessment. 2016 &#91;cited 2016 Feb 6&#93;. Available from: http:&#47;&#47;www.eunethta.eu&#47;</RefTotal>
        <RefLink>http:&#47;&#47;www.eunethta.eu&#47;</RefLink>
      </Reference>
      <Reference refNo="16">
        <RefAuthor>G&#248;tzsche PC</RefAuthor>
        <RefAuthor>Liberati A</RefAuthor>
        <RefAuthor>Torri V</RefAuthor>
        <RefAuthor>Rossetti L</RefAuthor>
        <RefTitle>Beware of surrogate outcome measures</RefTitle>
        <RefYear>1996</RefYear>
        <RefJournal>Int J Technol Assess Health Care</RefJournal>
        <RefPage>238-46</RefPage>
        <RefTotal>G&#248;tzsche PC, Liberati A, Torri V, Rossetti L. Beware of surrogate outcome measures. Int J Technol Assess Health Care. 1996;12(2):238-46. DOI: 10.1017&#47;S0266462300009594</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1017&#47;S0266462300009594</RefLink>
      </Reference>
      <Reference refNo="17">
        <RefAuthor>Elston J</RefAuthor>
        <RefAuthor>Taylor RS</RefAuthor>
        <RefTitle>Use of surrogate outcomes in cost-effectiveness models: a review of United Kingdom health technology assessment reports</RefTitle>
        <RefYear>2009</RefYear>
        <RefJournal>Int J Technol Assess Health Care</RefJournal>
        <RefPage>6-13</RefPage>
        <RefTotal>Elston J, Taylor RS. Use of surrogate outcomes in cost-effectiveness models: a review of United Kingdom health technology assessment reports. Int J Technol Assess Health Care. 2009 Jan;25(1):6-13. DOI: 10.1017&#47;S0266462309090023</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1017&#47;S0266462309090023</RefLink>
      </Reference>
      <Reference refNo="18">
        <RefAuthor>Anonym</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>GMDS 2015: 60. Jahrestagung der Deutschen Gesellschaft f&#252;r Medizinische Informatik, Biometrie und Epidemiologie e. V. (GMDS); 06.09. - 09.09.2015; Krefeld</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>GMDS 2015: 60. Jahrestagung der Deutschen Gesellschaft f&#252;r Medizinische Informatik, Biometrie und Epidemiologie e. V. (GMDS); 06.09. - 09.09.2015; Krefeld. D&#252;sseldorf: German Medical Science GMS Publishing House; 2015. Available from: http:&#47;&#47;www.egms.de&#47;de&#47;meetings&#47;gmds2015&#47;</RefTotal>
        <RefLink>http:&#47;&#47;www.egms.de&#47;de&#47;meetings&#47;gmds2015&#47;</RefLink>
      </Reference>
      <Reference refNo="19">
        <RefAuthor>Buncke J</RefAuthor>
        <RefAuthor>Goertz R</RefAuthor>
        <RefAuthor>Jeratsch U</RefAuthor>
        <RefAuthor>Leverkus F</RefAuthor>
        <RefTitle>Surrogatvalidierung durch Korrelation und Surrogate Threshold Effect: Ergebnisse von Simulationsstudien</RefTitle>
        <RefYear>2015</RefYear>
        <RefBookTitle>GMDS 2015: 60. Jahrestagung der Deutschen Gesellschaft f&#252;r Medizinische Informatik, Biometrie und Epidemiologie e.V. (GMDS); 06.-09.09.2015; Krefeld</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Buncke J, Goertz R, Jeratsch U, Leverkus F. Surrogatvalidierung durch Korrelation und Surrogate Threshold Effect: Ergebnisse von Simulationsstudien. GMDS 2015: 60. Jahrestagung der Deutschen Gesellschaft f&#252;r Medizinische Informatik, Biometrie und Epidemiologie e.V. (GMDS); 06.-09.09.2015; Krefeld. D&#252;sseldorf: German Medical Science GMS Publishing House; 2015. DocAbstr. 139. DOI: 10.3205&#47;15gmds117</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.3205&#47;15gmds117</RefLink>
      </Reference>
      <Reference refNo="20">
        <RefAuthor>Burzykowski T</RefAuthor>
        <RefAuthor>Molenberghs G</RefAuthor>
        <RefAuthor>Buyse M</RefAuthor>
        <RefAuthor>Geys H</RefAuthor>
        <RefAuthor>Renard D</RefAuthor>
        <RefTitle>Validation of surrogate end points in multiple randomized clinical trials with failure time end points</RefTitle>
        <RefYear>2001</RefYear>
        <RefJournal>J R Stat Soc Ser C Appl Stat</RefJournal>
        <RefPage>405-22</RefPage>
        <RefTotal>Burzykowski T, Molenberghs G, Buyse M, Geys H, Renard D. Validation of surrogate end points in multiple randomized clinical trials with failure time end points. J R Stat Soc Ser C Appl Stat. 2001;50(4):405-22. DOI: 10.1111&#47;1467-9876.00244</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;1467-9876.00244</RefLink>
      </Reference>
      <Reference refNo="21">
        <RefAuthor>Burzykowski T</RefAuthor>
        <RefAuthor>Molenberghs G</RefAuthor>
        <RefAuthor>Buyse M</RefAuthor>
        <RefTitle></RefTitle>
        <RefYear>2005</RefYear>
        <RefBookTitle>The evaluation of surrogate endpoints</RefBookTitle>
        <RefPage></RefPage>
        <RefTotal>Burzykowski T, Molenberghs G, Buyse M, editors. The evaluation of surrogate endpoints. New York: Springer; 2005. (Statistics for Biology and Health). DOI: 10.1007&#47;b138566</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1007&#47;b138566</RefLink>
      </Reference>
      <Reference refNo="22">
        <RefAuthor>Burzykowski T</RefAuthor>
        <RefAuthor>Molenberghs G</RefAuthor>
        <RefAuthor>Buyse M</RefAuthor>
        <RefTitle>The validation of surrogate end points by using data from randomized clinical trials: A case-study in advanced colorectal cancer</RefTitle>
        <RefYear>2004</RefYear>
        <RefJournal>J R Stat Soc Ser A Stat Soc</RefJournal>
        <RefPage>103-24</RefPage>
        <RefTotal>Burzykowski T, Molenberghs G, Buyse M. The validation of surrogate end points by using data from randomized clinical trials: A case-study in advanced colorectal cancer. J R Stat Soc Ser A Stat Soc. 2004;167(1):103-24. DOI: 10.1111&#47;j.1467-985X.2004.00293.x</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1111&#47;j.1467-985X.2004.00293.x</RefLink>
      </Reference>
      <Reference refNo="23">
        <RefAuthor>Buyse M</RefAuthor>
        <RefAuthor>Burzykowski T</RefAuthor>
        <RefAuthor>Carroll K</RefAuthor>
        <RefAuthor>Michiels S</RefAuthor>
        <RefAuthor>Sargent DJ</RefAuthor>
        <RefAuthor>Miller LL</RefAuthor>
        <RefAuthor>Elfring GL</RefAuthor>
        <RefAuthor>Pignon JP</RefAuthor>
        <RefAuthor>Piedbois P</RefAuthor>
        <RefTitle>Progression-free survival is a surrogate for survival in advanced colorectal cancer</RefTitle>
        <RefYear>2007</RefYear>
        <RefJournal>J Clin Oncol</RefJournal>
        <RefPage>5218-24</RefPage>
        <RefTotal>Buyse M, Burzykowski T, Carroll K, Michiels S, Sargent DJ, Miller LL, Elfring GL, Pignon JP, Piedbois P. Progression-free survival is a surrogate for survival in advanced colorectal cancer. J Clin Oncol. 2007 Nov;25(33):5218-24. DOI: 10.1200&#47;JCO.2007.11.8836</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1200&#47;JCO.2007.11.8836</RefLink>
      </Reference>
      <Reference refNo="24">
        <RefAuthor>Oba K</RefAuthor>
        <RefAuthor>Paoletti X</RefAuthor>
        <RefAuthor>Alberts S</RefAuthor>
        <RefAuthor>Bang YJ</RefAuthor>
        <RefAuthor>Benedetti J</RefAuthor>
        <RefAuthor>Bleiberg H</RefAuthor>
        <RefAuthor>Catalano P</RefAuthor>
        <RefAuthor>Lordick F</RefAuthor>
        <RefAuthor>Michiels S</RefAuthor>
        <RefAuthor>Morita S</RefAuthor>
        <RefAuthor>Ohashi Y</RefAuthor>
        <RefAuthor>Pignon JP</RefAuthor>
        <RefAuthor>Rougier P</RefAuthor>
        <RefAuthor>Sasako M</RefAuthor>
        <RefAuthor>Sakamoto J</RefAuthor>
        <RefAuthor>Sargent D</RefAuthor>
        <RefAuthor>Shitara K</RefAuthor>
        <RefAuthor>Cutsem EV</RefAuthor>
        <RefAuthor>Buyse M</RefAuthor>
        <RefAuthor>Burzykowski T</RefAuthor>
        <RefAuthor> GASTRIC group</RefAuthor>
        <RefTitle>Disease-free survival as a surrogate for overall survival in adjuvant trials of gastric cancer: a meta-analysis</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>J Natl Cancer Inst</RefJournal>
        <RefPage>1600-7</RefPage>
        <RefTotal>Oba K, Paoletti X, Alberts S, Bang YJ, Benedetti J, Bleiberg H, Catalano P, Lordick F, Michiels S, Morita S, Ohashi Y, Pignon JP, Rougier P, Sasako M, Sakamoto J, Sargent D, Shitara K, Cutsem EV, Buyse M, Burzykowski T; GASTRIC group. Disease-free survival as a surrogate for overall survival in adjuvant trials of gastric cancer: a meta-analysis. J Natl Cancer Inst. 2013 Nov;105(21):1600-7. DOI: 10.1093&#47;jnci&#47;djt270</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1093&#47;jnci&#47;djt270</RefLink>
      </Reference>
      <Reference refNo="25">
        <RefAuthor>Miksad RA</RefAuthor>
        <RefAuthor>Zietemann V</RefAuthor>
        <RefAuthor>Gothe R</RefAuthor>
        <RefAuthor>Schwarzer R</RefAuthor>
        <RefAuthor>Conrads-Frank A</RefAuthor>
        <RefAuthor>Schnell-Inderst P</RefAuthor>
        <RefAuthor>Stollenwerk B</RefAuthor>
        <RefAuthor>Siebert U</RefAuthor>
        <RefTitle>Progression-free survival as a surrogate endpoint in advanced breast cancer</RefTitle>
        <RefYear>2008</RefYear>
        <RefJournal>Int J Technol Assess Health Care</RefJournal>
        <RefPage>371-83</RefPage>
        <RefTotal>Miksad RA, Zietemann V, Gothe R, Schwarzer R, Conrads-Frank A, Schnell-Inderst P, Stollenwerk B, Siebert U. Progression-free survival as a surrogate endpoint in advanced breast cancer. Int J Technol Assess Health Care. 2008;24(4):371-83. DOI: 10.1017&#47;S0266462308080495</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1017&#47;S0266462308080495</RefLink>
      </Reference>
      <Reference refNo="26">
        <RefAuthor>Flaherty KT</RefAuthor>
        <RefAuthor>Hennig M</RefAuthor>
        <RefAuthor>Lee SJ</RefAuthor>
        <RefAuthor>Ascierto PA</RefAuthor>
        <RefAuthor>Dummer R</RefAuthor>
        <RefAuthor>Eggermont AM</RefAuthor>
        <RefAuthor>Hauschild A</RefAuthor>
        <RefAuthor>Kefford R</RefAuthor>
        <RefAuthor>Kirkwood JM</RefAuthor>
        <RefAuthor>Long GV</RefAuthor>
        <RefAuthor>Lorigan P</RefAuthor>
        <RefAuthor>Mackensen A</RefAuthor>
        <RefAuthor>McArthur G</RefAuthor>
        <RefAuthor>O&#39;Day S</RefAuthor>
        <RefAuthor>Patel PM</RefAuthor>
        <RefAuthor>Robert C</RefAuthor>
        <RefAuthor>Schadendorf D</RefAuthor>
        <RefTitle>Surrogate endpoints for overall survival in metastatic melanoma: a meta-analysis of randomised controlled trials</RefTitle>
        <RefYear>2014</RefYear>
        <RefJournal>Lancet Oncol</RefJournal>
        <RefPage>297-304</RefPage>
        <RefTotal>Flaherty KT, Hennig M, Lee SJ, Ascierto PA, Dummer R, Eggermont AM, Hauschild A, Kefford R, Kirkwood JM, Long GV, Lorigan P, Mackensen A, McArthur G, O&#39;Day S, Patel PM, Robert C, Schadendorf D. Surrogate endpoints for overall survival in metastatic melanoma: a meta-analysis of randomised controlled trials. Lancet Oncol. 2014 Mar;15(3):297-304. DOI: 10.1016&#47;S1470-2045(14)70007-5</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1016&#47;S1470-2045(14)70007-5</RefLink>
      </Reference>
      <Reference refNo="27">
        <RefAuthor>Sidhu R</RefAuthor>
        <RefAuthor>Rong A</RefAuthor>
        <RefAuthor>Dahlberg S</RefAuthor>
        <RefTitle>Evaluation of progression-free survival as a surrogate endpoint for survival in chemotherapy and targeted agent metastatic colorectal cancer trials</RefTitle>
        <RefYear>2013</RefYear>
        <RefJournal>Clin Cancer Res</RefJournal>
        <RefPage>969-76</RefPage>
        <RefTotal>Sidhu R, Rong A, Dahlberg S. Evaluation of progression-free survival as a surrogate endpoint for survival in chemotherapy and targeted agent metastatic colorectal cancer trials. Clin Cancer Res. 2013 Mar;19(5):969-76. DOI: 10.1158&#47;1078-0432.CCR-12-2502</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1158&#47;1078-0432.CCR-12-2502</RefLink>
      </Reference>
      <Reference refNo="28">
        <RefAuthor>Sch&#252;rmann C</RefAuthor>
        <RefAuthor>Sieben W</RefAuthor>
        <RefTitle>Differences in surrogate threshold effect estimates between original and simplified correlation-based validation approaches</RefTitle>
        <RefYear>2016</RefYear>
        <RefJournal>Stat Med</RefJournal>
        <RefPage>1049-62</RefPage>
        <RefTotal>Sch&#252;rmann C, Sieben W. Differences in surrogate threshold effect estimates between original and simplified correlation-based validation approaches. Stat Med. 2016 Mar;35(7):1049-62. DOI: 10.1002&#47;sim.6778</RefTotal>
        <RefLink>http:&#47;&#47;dx.doi.org&#47;10.1002&#47;sim.6778</RefLink>
      </Reference>
    </References>
    <Media>
      <Tables>
        <Table format="png">
          <MediaNo>1</MediaNo>
          <MediaID>1</MediaID>
          <Caption><Pgraph><Mark1>Tabelle 1: Evidenzquellen</Mark1></Pgraph></Caption>
        </Table>
        <NoOfTables>1</NoOfTables>
      </Tables>
      <Figures>
        <NoOfPictures>0</NoOfPictures>
      </Figures>
      <InlineFigures>
        <NoOfPictures>0</NoOfPictures>
      </InlineFigures>
      <Attachments>
        <NoOfAttachments>0</NoOfAttachments>
      </Attachments>
    </Media>
  </OrigData>
</GmsArticle>