Leitlinien für Forschungsberichte: Eine Anwendung des CONSORT 2010 Statements

Einleitung

Vollständig, klar und transparent muss der Bericht über die Ergebnisse einer Studie sein, damit diese Studie vom Leser genau beurteilt werden kann [5]. Die Elemente, die für die Beurteilung der Qualität und der Resultate zentral sind, werden in Leitlinien für Forschungsberichte zusammengefasst. Das CONSORT Statement (Consolidated S tatement of Reporting Trials; konsolidierte Leitlinie zum Berichten randomisierter Studien im Parallelgruppendesign) kann als „Ur-Leitlinie” für Forschungsberichte angesehen werden [8]. Die Aktualisierung CONSORT 2010 besteht aus einer 25-Punkte- Checkliste sowie einem Flussdiagramm und ist eine Leitlinie für Berichte randomisierter Studien jeglicher Art. Allerdings wird darin auf das häufigste Studiendesign, individuell randomisierte Parallelgruppenvergleiche mit zwei Parallelgruppen fokussiert. Andere Studientypen wie Cluster-randomisierte Studien erfordern ein unterschiedliches Maß zusätzlicher Informationen. Diese sind in entsprechenden Erweiterungen verfügbar, welche von www.consort-statement.org heruntergeladen werden können. Diese Erweiterungen stehen allerdings nicht in deutscher Sprache zur Verfügung.

Die Leitlinien erfüllen zwei Aufgaben: Zum einen helfen sie Autoren von Fachartikeln, vollständige und transparente Berichte zu erstellen. Zum anderen können Leser Leitlinien-Elemente zur Einschätzung der Qualität einer publizierten Studie verwenden. Allerdings muss bei der kritischen Beurteilung eines Artikels stets der Unterschied zwischen der Qualität eines Artikels und der eigentliche Studie beachtet werden [5].

Hier wird zur Illustration der zweiten Aufgabe die neue 25-Punkte-Checkliste des CONSORT 2010 Statements auf die Publikation von Richter et al. angewendet [7] . Zusätzlich wird untersucht, inwieweit die Zusammenfassung dieser Veröffentlichung der Erweiterung des CONSORT Statements auf Zusammenfassungen in Zeitschriftenartikeln und Tagungsbänden entspricht [2,3].

Material und Methoden

Ausgangspunkt war die Veröffentlichung von Richter et al., die in ihrer Studie den Effekt einer Telefonintervention bei Typ-2-Diabetiker auf körperliche Aktivität und kardiovaskuläre Risikofaktoren in einem 3-Monatszeitraum untersuchten [7].

Die Autoren dieser Arbeit identifizierten und extrahierten aus der Arbeit von Richter et al. unabhängig voneinander die Textpassagen zu den 25 Punkten der CONSORT 2010 Checkliste. Zusätzlich führten sie eine Bewertung des Berichtens zu dem jeweiligen Punkt durch. Widersprüche wurden durch Gespräche in Konsens umgewandelt [7].

Ergebnisse

Tab. [1] zeigt die Ergebnisse zur Beurteilung der Zusammenfassung. Die Ergebnisse für die Checkliste des CONSORT 2010 Statements sind in Tab. [2] zusammengestellt.

<TD VALIGN="TOP">

Item

</TD><TD VALIGN="TOP">

Beschreibung

</TD><TD VALIGN="TOP">

Vorhanden (Bemerkungen)

</TD><TD VALIGN="TOP">

Titel

</TD><TD VALIGN="TOP">

Identifikation der Studie als randomisierte Studie

</TD><TD VALIGN="TOP">

–

(Bis vor wenigen Jahren wurde die Identifikation der Studie als randomisierte Studie nur in der Zusammenfassung gefordert. Die Studie wird aber in der gesamten Zusammenfassung nicht als randomisierte Studie identifiziert. Stattdessen entstand bei den Beurteilern beim Lesen der englischsprachigen Zusammenfassung aufgrund der Formulierung „The patients in a matching control group (n = 29) were not phoned” der Eindruck, dass es sich bei der Studie um eine gematchte Fall-Kontrollstudie handelt.)

</TD><TD VALIGN="TOP">

Studiendesign

</TD><TD VALIGN="TOP">

Beschreibung des Studiendesigns (z. B. Parallel-gruppendesign, Cluster-randomisierte Studie, Nicht-Unterlegenheitsstudie)

</TD><TD VALIGN="TOP">

–

</TD><TD VALIGN="TOP">

Methoden

</TD><TD VALIGN="TOP">

</TD><TD VALIGN="TOP">

</TD><TD VALIGN="TOP">

– Teilnehmer

</TD><TD VALIGN="TOP">

Eignungskriterien für Teilnehmer und die Settings, in denen die Daten gesammelt wurden (z. B. Uni-
versitätsklinika, Praxen niedergelassener Ärzte)

</TD><TD VALIGN="TOP">

–

(Es wurde nur die Information gegeben, dass es Patienten mit Typ-2-Diabetes sind.)

</TD><TD VALIGN="TOP">

– Interventionen

</TD><TD VALIGN="TOP">

Vorgesehene Interventionen für jede Gruppe

</TD><TD VALIGN="TOP">

×

</TD><TD VALIGN="TOP">

– Fragestellung

</TD><TD VALIGN="TOP">

Spezifische Fragestellung oder Hypothese

</TD><TD VALIGN="TOP">

–

</TD><TD VALIGN="TOP">

– Zielkriterium

</TD><TD VALIGN="TOP">

Klar definierter primärer Endpunkt des Berichts

</TD><TD VALIGN="TOP">

–

(Es werden viele Begriffe genannt, wie Bewegungsverhalten, Aktivitätsumfang, verschiedene anthropometrische Variablen sowie Blutfettparameter. Klare Zielkriterien werden nicht formuliert. Die Parameter wurden auch nicht in den Methoden sondern in den Ergebnissen genannt)

</TD><TD VALIGN="TOP">

– Randomisierung

</TD><TD VALIGN="TOP">

Wie Teilnehmer den Behandlungen zugeteilt wurden

</TD><TD VALIGN="TOP">

–

(Durch die Formulierung, dass Patienten mittels „Losverfahren” zugeordnet wurden, sowie die Tatsache, dass sich zunächst genau gleich viele Personen in den beiden Gruppen befanden, wird vermutet, dass es sich um eine trunkierte Randomisierung handelt)

</TD><TD VALIGN="TOP">

– Verblindung

</TD><TD VALIGN="TOP">

Ob oder ob nicht Teilnehmer, Behandler und Beurteiler der Zielkriterien im Hinblick auf Gruppenzuteilung verblindet waren

</TD><TD VALIGN="TOP">

–

(Dadurch, dass die Behandlung in einem Telefoninterview bestand, konnten die Behandler nicht verblindet sein)

</TD><TD VALIGN="TOP">

Ergebnisse

</TD><TD VALIGN="TOP">

</TD><TD VALIGN="TOP">

</TD><TD VALIGN="TOP">

– Anzahl randomisiert

</TD><TD VALIGN="TOP">

Anzahl der Teilnehmer, die in jede Gruppe randomisiert wurden

</TD><TD VALIGN="TOP">

×

</TD><TD VALIGN="TOP">

– Rekrutierung

</TD><TD VALIGN="TOP">

Status der Studie

</TD><TD VALIGN="TOP">

–

(Es kann aber davon ausgegangen werden, dass die Studie beendet ist)

</TD><TD VALIGN="TOP">

– Anzahl analysiert

</TD><TD VALIGN="TOP">

Anzahl der Teilnehmer je Gruppe, die analysiert wurden

</TD><TD VALIGN="TOP">

–

(In Tab. 3 werden für jede Analyse die Fallzahlen angegeben)

</TD><TD VALIGN="TOP">

– Zielkriterium

</TD><TD VALIGN="TOP">

Für den primären Endpunkt, das Ergebnis für jede Gruppe und die geschätzte Effektstärke und seine Genauigkeit

</TD><TD VALIGN="TOP">

–

(Die Ergebnisse wurden nur unspezifisch berichtet: „… kam es zu einer Abnahme der Parameter …”. Es wurden weder p-Werte berichtet, noch Signifikanzen benannt. Effektstärken und Genauigkeiten wurden nicht berichtet.)

</TD><TD VALIGN="TOP">

– Nebenwirkungen

</TD><TD VALIGN="TOP">

Wichtige unerwünschte Wirkungen oder Nebenwirkungen

</TD><TD VALIGN="TOP">

–

</TD><TD VALIGN="TOP">

Schlussfolgerungen

</TD><TD VALIGN="TOP">

Allgemeine Interpretation der Ergebnisse

</TD><TD VALIGN="TOP">

×

(Da allerdings die Zielkriterien in der Zusammenfassung nicht präzise formuliert wurden und keine statistischen Zahlen (p-Werte, Effektstärken mit Genauigkeit) berichtet wurden, lässt sich die Gültigkeit der Schlussfolgerung aus der Zusammenfassung nicht erschließen.

</TD><TD VALIGN="TOP">

Registrierung der Studie

</TD><TD VALIGN="TOP">

Registrierungsnummer und Name des Studienregisters

</TD><TD VALIGN="TOP">

–

</TD><TD VALIGN="TOP">

Finanzielle Unterstützung

</TD><TD VALIGN="TOP">

Quelle der finanziellen Unterstützung

</TD><TD VALIGN="TOP">

–

(Zwar geben die Autoren an, dass sie keine finanziellen Verbindungen mit einer Firma haben, deren Produkt in dem Beitrag eine wichtige Rolle spielt (oder mit einer Firma, die ein Konkurrenzprodukt vertreibt). Dennoch bleibt offen, wie die Studie finanziert wurde)

</TD>

Tab. 1 Zu verwendende Items, wenn über randomisierte Studien in Zeitschriften oder Zusammenfassungen für Tagungen berichtet wird (in Anlehnung an [2]), angewendet auf die Publikation von Richter et al. [7].

<TD VALIGN="TOP">

Item 1a. Titel und Zusammenfassung

</TD><TD VALIGN="TOP">

Beschreibung: Identifikation als randomisierte Studie im Titel.

</TD><TD VALIGN="TOP">

Bemerkung: Weder im Titel noch in der Zusammenfassung wird die Studie als randomisierte Studie identifiziert.

</TD><TD VALIGN="TOP">

Item 1b. Titel und Zusammenfassung

</TD><TD VALIGN="TOP">

Beschreibung: Strukturierte Zusammenfassung von Studiendesign, Methoden, Resultaten und Schlussfolgerungen (siehe auch CONSORT für Zusammenfassungen [4])

</TD><TD VALIGN="TOP">

Bemerkung: Die Bewertung der Zusammenfassung ist in Tab.  [1] erfolgt.

</TD><TD VALIGN="TOP">

Item 2a. Einleitung. Hintergrund und Ziele

</TD><TD VALIGN="TOP">

Beschreibung: Wissenschaftlicher Hintergrund und Begründung der Studie.

</TD><TD VALIGN="TOP">

S. 2203, Spalten 1 und 2: … Kognitive und Schulungsansätze waren bisher nicht ausreichend erfolgreich. 90 % der Patienten mit Diabetes mellitus Typ 2 sind adipös oder übergewichtig [30], S. 1: 72 % erreichen nicht das empfohlene Maß an körperlicher Aktivität [23]. Einen Lösungsansatz scheint die, vor allem in den USA seit einigen Jahren praktizierte, Methode der Telefonintervention zu bieten. …

</TD><TD VALIGN="TOP">

Bemerkung: Prägnante, präzise Beschreibung.

</TD><TD VALIGN="TOP">

Item 2b. Einleitung. Hintergrund und Ziele

</TD><TD VALIGN="TOP">

Beschreibung: Genaue Fragestellung oder Hypothesen.

</TD><TD VALIGN="TOP">

S. 2203, Spalte 2: Im Folgenden wird die Auswirkung einer 3-monatigen Telefonintervention auf Bewegungsverhalten und verschiedene kardiovaskuläre Risikofaktoren bei 41 Patienten mit Diabetes mellitus Typ 2 untersucht.

</TD><TD VALIGN="TOP">

Bemerkung: Es wird weder eine spezifische Frage noch eine operationalisierte Hypothese formuliert.

</TD><TD VALIGN="TOP">

Item 3a. Methoden. Studiendesign

</TD><TD VALIGN="TOP">

Beschreibung: Beschreibung des Studiendesigns (z. B. parallel, faktoriell) einschließlich des Zuteilungsverhältnisses.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 1: Durch Randomisierung mittels Losverfahren erfolgte die Einteilung in Interventions- und Kontrollgruppe.

</TD><TD VALIGN="TOP">

Bemerkung: Dieser Formulierung kann man entnehmen, dass es sich um ein Parallelgruppendesign gehandelt hat.

</TD><TD VALIGN="TOP">

Item 3b. Methoden. Studiendesign

</TD><TD VALIGN="TOP">

Beschreibung: Wichtige Änderungen der Methoden nach Studienbeginn (wie z. B. Eignungskriterien), mit Gründen.

</TD><TD VALIGN="TOP">

Bemerkung: Nicht beschrieben. Bis vor Kurzem wurde auch nicht erwartet, dieses zu erwähnen, wenn keine Änderungen in den Methoden nach Studienbeginn vorgenommen wurden.

</TD><TD VALIGN="TOP">

Item 4a. Methoden. Studienteilnehmer

</TD><TD VALIGN="TOP">

Beschreibung: Eignungskriterien der Teilnehmer.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 1: Einschlusskriterien waren das Vorliegen eines Typ-2-Diabetes, und es durften keine Kontraindikationen gegen sportliche Alltagsbelastungen vorliegen.

</TD><TD VALIGN="TOP">

Bemerkung: Keine.

</TD><TD VALIGN="TOP">

Item 4b. Methoden. Studienteilnehmer

</TD><TD VALIGN="TOP">

Beschreibung: Umgebung und Orte der Studiendurchführung.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 1: Die Rekrutierung der Probanden erfolgte in 2 Kieler Diabetesschwerpunktpraxen im Rahmen von strukturierten Diabetesschulungsprogrammen … Die sich direkt an die Schulung anschließende 12-wöchige Intervention bestand lediglich darin, die Probanden … anzurufen und anhand eines Fragebogens … zu befragen. Die Befragung wurde immer durch die gleiche Person mit dem gleichen Fragebogen durchgeführt.

</TD><TD VALIGN="TOP">

Bemerkung: Keine.

</TD><TD VALIGN="TOP">

Item 5. Methoden. Interventionen

</TD><TD VALIGN="TOP">

Beschreibung: Durchgeführte Interventionen in jeder Gruppe mit präzisen Details um Studienreplikation zu ermöglichen, einschließlich wie und wann die Interventionen durchgeführt wurden.

</TD><TD VALIGN="TOP">

P. 2204, Spalte 1: … im Rahmen von strukturierten Diabetesschulungsprogrammen nach den Empfehlungen der Deutschen Diabetes Gesellschaft (DDG). … Eine Diabetes- und weitere, z. B. antihypertensive Therapien erfolgten unabhängig von der Intervention im Rahmen der üblichen Betreuung durch die Hausarzt oder Diabetesschwerpunktpraxis. Die sich direkt an die Schulung anschließende 12-wöchige Intervention bestand lediglich darin, die Probanden der Interventionsgruppe einmal wöchentlich, die der Kontrollgruppe jeweils einmal in der ersten und in der letzten Woche anzurufen und anhand eines Fragebogens (Info 1) zu ihrem Bewegungsverhalten innerhalb der vergangenen Woche zu befragen. Die Befragung wurde immer durch die gleiche Person mit dem gleichen Fragebogen durchgeführt.

</TD><TD VALIGN="TOP">

Bemerkung: Die verwendete Intervention ist eine komplexe Intervention. Sie besteht aus Diabetesschulung plus Hausarztbetreuung oder Betreuung durch die Diabetesschwerpunktpraxis. Hinzu kommt die Telefonintervention, die die Intervention von Interesse ist.

</TD><TD VALIGN="TOP">

Zur Diabetesschulung wird erwähnt, dass sie strukturiert nach den Empfehlungen der DDG erfolgte. Es wird nicht von Standardisierungsbemühungen zwischen den beiden Zentren bzw. innerhalb der Zentren berichtet. Standardisierungsbemühungen hinsichtlich der Betreuung durch den Hausarzt bzw. die Diabetesschwerpunktpraxis werden nicht beschrieben. Detaillierte Informationen liegen zur Telefonintervention vor: „Die Befragung wurde immer durch die gleiche Person mit dem gleichen Fragebogen durchgeführt”, und der Fragebogen ist im Bericht enthalten.

</TD><TD VALIGN="TOP">

Item 6a. Methoden. Zielkriterien

</TD><TD VALIGN="TOP">

Beschreibung: Vollständig definierte, primäre und sekundäre Endpunkte, einschließlich wie und wann sie erhoben wurden.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 2, S. 2205, Spalte 1: Nach der standardisierten Schulung (Voruntersuchung) sowie 12 Wochen später (Nachuntersuchung) wurden folgende Daten erhoben: Größe, Gewicht, BMI, Körperfettanteil (Kaliperuntersuchung), Taillenumfang in Höhe des Bauchnabels, arterieller Blutdruck, Nüchternblutzucker, HbA1c-Wert, HDL-, LDL- und Gesamtcholesterin sowie Triglyceride. … Mehrere voneinander abhängige oder miteinander in Zusammenhang stehende Variablen wurden gleichberechtigt nebeneinander ausgewertet, …

</TD><TD VALIGN="TOP">

Bemerkung: Der Begriff Endpunkt wird nicht verwendet. Wann die Endpunkte erhoben wurden, wird beschrieben. Allerdings fehlen detaillierte Beschreibungen, wie die Endpunkte erhoben wurden.

</TD>

Tab. 2a Punkt für Punkt Betrachtung der Checkliste des CONSORT 2010 Statements [8] , angewendet auf die Publikation von Richter et al. [7].

<TD VALIGN="TOP">

Item 6b. Methoden. Zielkriterien

</TD><TD VALIGN="TOP">

Beschreibung: Alle Änderungen der Studienendpunkte nach Studienbeginn mit Angabe der Gründe.

</TD><TD VALIGN="TOP">

Bemerkung: Keine Beschreibung. Eine klare Beschreibung wäre gewesen: „Es gab keine Änderungen der Zielkriterien nach Studienbeginn.”

</TD><TD VALIGN="TOP">

Item 7a. Methoden. Fallzahl

</TD><TD VALIGN="TOP">

Beschreibung: Wie wurde die Fallzahl berechnet.

</TD><TD VALIGN="TOP">

Bemerkung: Eine Begründung der Fallzahl fehlt, obwohl weder weniger Patienten als erforderlich noch mehr als zwingend notwendig in eine klinische Studie eingeschlossen werden sollten. Auch fehlt eine Angabe der statistischen Macht der Studie.

</TD><TD VALIGN="TOP">

Item 7b. Methoden. Fallzahl

</TD><TD VALIGN="TOP">

Beschreibung: Falls zutreffend, Erklärung aller Zwischenanalysen und Stoppregeln.

</TD><TD VALIGN="TOP">

Bemerkung: Es gibt keine Hinweise zu Zwischenauswertungen oder Stoppregeln.

</TD><TD VALIGN="TOP">

Item 8a. Methoden. Randomisierung: Erzeugen der Sequenz

</TD><TD VALIGN="TOP">

Beschreibung: Methode zur Generierung der Zufallszuteilung.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 1: Durch Randomisierung mittels Losverfahren erfolgte die Einteilung in Interventions- und Kontrollgruppe.

</TD><TD VALIGN="TOP">

Bemerkung: Das Losverfahren wird nicht näher beschrieben. Aufgrund der ursprünglich identischen Fallzahl in beiden Gruppen könnte vermutet werden, dass eine trunkierte Randomisierung durchgeführt wurde.

</TD><TD VALIGN="TOP">

Item 8b. Methoden. Randomisierung: Erzeugen der Sequenz

</TD><TD VALIGN="TOP">

Beschreibung: Art der Randomisierung; Details aller Restriktionen (z. B. Blockbildung, Blocklänge).

</TD><TD VALIGN="TOP">

Bemerkung: Hierzu findet sich keine Beschreibung.

</TD><TD VALIGN="TOP">

Item 9. Methoden. Randomisierung: Geheimhaltung des Zuordnungs-Mechanismus

</TD><TD VALIGN="TOP">

Beschreibung: Mechanismen zur Umsetzung der Zuteilungssequenz (z. B. sequenziell nummerierte Behälter) und Beschreibung aller Schritte zur Verdeckung der Sequenz bis zur Interventionszuordnung.

</TD><TD VALIGN="TOP">

Bemerkung: Verfahren zur Geheimhaltung der Sequenz werden nicht beschrieben.

</TD><TD VALIGN="TOP">

Item 10. Methoden. Randomisierung: Implementation

</TD><TD VALIGN="TOP">

Beschreibung: Wer führte die Zufallszuteilung durch, wer nahm die Teilnehmer in die Studie auf und wer teilte die Teilnehmer den Interventionen zu.

</TD><TD VALIGN="TOP">

Bemerkung: Diese Aspekte werden in dem Bericht nicht beschrieben.

</TD><TD VALIGN="TOP">

Item 11a. Methoden. Verblindung

</TD><TD VALIGN="TOP">

Beschreibung: Falls durchgeführt, wer bei der Interventionszuordnung verblindet war (z. B. Teilnehmer, Ärzte, Therapeuten, diejenigen, die die Endpunkte beurteilten) und wie.

</TD><TD VALIGN="TOP">

Bemerkung: Zur Verblindung wird nichts berichtet. Die Behandler konnten im Telefoninterview nicht verblindet werden. Eine verblindete Nachuntersuchung hätte sich einfach realisieren lassen und ist möglicherweise erfolgt. In Abhängigkeit des Informationsmaterials und abhängig von einer entsprechenden Zustimmung durch die Ethikkommission hätte die Studie möglicherweise vollständig verblindet realisiert werden können.

</TD><TD VALIGN="TOP">

Item 11b. Methoden. Verblindung

</TD><TD VALIGN="TOP">

Beschreibung: Falls relevant, Beschreibung der Ähnlichkeit der Interventionen.

</TD><TD VALIGN="TOP">

Bemerkung: Hierzu wird nichts berichtet.

</TD><TD VALIGN="TOP">

Item 12a. Methoden. Statistische Verfahren

</TD><TD VALIGN="TOP">

Beschreibung: Statistische Methoden, die zum Vergleich der Gruppen hinsichtlich primärer und sekundäre Endpunkte eingesetzt wurden.

</TD><TD VALIGN="TOP">

S. 2205, Spalte 1: Die anderen Parameter wurden mittels Kolmogorov-Smirnov-Anpassungstest auf Normalverteilung geprüft, eine signifikante Abweichung von der Normalverteilung besteht bei p < 0,05. Bei Normalverteilung wurde mittels Levene-Test auf Homogenität der beiden Stichprobenvarianzen (Telefon- und Kontrollgruppe) getestet. Zur Prüfung auf signifikante Unterschiede zwischen beiden Gruppen wurde der t-Test nach Student für gleiche bzw. ungleiche Varianzen angewandt. Das Signifikanzniveau wurde auf eine Irrtumswahrscheinlichkeit von p < 0,05 festgelegt. … Mehrere voneinander abhängige oder miteinander in Zusammenhang stehende Variablen wurden gleichberechtigt nebeneinander ausgewertet, folglich wurde multipel getestet. Das Signifikanzniveau ist nicht entsprechend adjustiert worden. Die Interpretation der Ergebnisse muss also explorativ als Hinweis auf die Effekte der Telefonintervention erfolgen.

</TD><TD VALIGN="TOP">

Bemerkung: Wie oben beschrieben wurde, unterscheiden die Autoren nicht zwischen primären und sekundären Endpunkten. Es wurde nicht beschrieben, wann der t-Test für ungleiche Varianzen verwendet wurde und wann der für gleiche Varianzen. Möglicherweise wurde der Levene-Test als sogenannter Vorschalttest verwendet. Das bedeutet, dass der spezifische t-Test für gleiche bzw. ungleiche Varianzen in Abhängigkeit des p-Werts des Levene-Tests gewählt wurde. Ein solches Vorgehen wäre statistisch inkorrekt, und die beiden verschiedenen t-Tests könnten auch zu unterschiedlichen Ergebnissen führen. Auch bleibt unklar, warum die Autoren auf Normalverteilung getestet haben, wenn ausschließlich der t-Test Verwendung findet.

</TD><TD VALIGN="TOP">

Der letzte Satz „Die Interpretation der Ergebnisse muss also explorativ als Hinweis auf die Effekte der Telefonintervention erfolgen.” besagt, dass die Studie keine definitiven Schlussfolgerungen zur Wirksamkeit der Telefonintervention erlaubt. In der Zusammenfassung findet sich aber folgende Schlussfolgerung: „Mittels einer wöchentlichen telefonischen Abfrage des Bewegungsverhaltens über 3 Monate kann gesundheitsbewusstes Verhalten gesteigert und das kardiovaskuläre Risikoprofil verbessert werden”. Diese beiden Sätze widersprechen sich.

</TD><TD VALIGN="TOP">

Item 12b. Methoden. Statistische Verfahren

</TD><TD VALIGN="TOP">

Beschreibung: Methoden, die für zusätzliche Analysen eingesetzt wurden, wie Subgruppenanalysen, adjustierte Analysen.

</TD><TD VALIGN="TOP">

Bemerkung: Hierzu wurde in dem Artikel nichts erwähnt.

</TD>

Tab. 2b Punkt für Punkt Betrachtung der Checkliste des CONSORT 2010 Statements [8] , angewendet auf die Publikation von Richter et al. [7].

<TD VALIGN="TOP">

Item 13a. Ergebnisse. Patientfluss (ein Flussdiagramm wird dringend empfohlen)

</TD><TD VALIGN="TOP">

Beschreibung: Für jede Gruppe, Anzahl der Studienteilnehmer die randomisiert zugeteilt wurden, die die geplante Intervention erhielten und die hinsichtlich des primären Endpunktes analysiert wurden.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 1: Nach mündlicher und schriftlicher Information über die Studie erklärten sich 46 der Kursteilnehmer mittels ihrer Unterschrift auf einer Einverständniserklärung zur Teilnahme an der Untersuchung bereit.

</TD><TD VALIGN="TOP">

… gingen die Daten von 41 Personen in die Auswertung ein.

</TD><TD VALIGN="TOP">

Bemerkung: Ein Flussdiagramm steht nicht zur Verfügung. Die Information, wie viele Studienteilnehmer randomisiert wurden, wird nicht gegeben. Es sind mutmaßlich die 46 Patienten randomisiert worden, die ihr schriftliches Einverständnis zur Studienteilnahme gaben. Wie viele Patienten auf Eignung zur Studienteilnahme gescreent wurden, wie viele prinzipiell für eine Studienteilnahme geeignet gewesen wären, wie viele nicht an der Studie teilgenommen haben und welche Gründe für die Nichtteilnahme angegeben wurden, wird nicht berichtet.

</TD><TD VALIGN="TOP">

Die Anzahl der Personen, die in der Endauswertung berücksichtigt wurden, wird berichtet.

</TD><TD VALIGN="TOP">

Item 13b. Ergebnisse. Patientenfluss (ein Flussdiagramm wird dringend empfohlen)

</TD><TD VALIGN="TOP">

Beschreibung: Für jede Gruppe, Zahl der Studienausscheider und Ausschlüsse nach Randomisierung mit Angabe von Gründen.

</TD><TD VALIGN="TOP">

S. 2204, Spalte 1: Nach mündlicher und schriftlicher Information über die Studie erklärten sich 46 der Kursteilnehmer mittels ihrer Unterschrift auf einer Einverständniserklärung zur Teilnahme an der Untersuchung bereit. … Nach 2 Studienabbrüchen aus persönlichen organisatorischen Gründen (jeweils eine Person pro Gruppe) und 3 Ausschlüssen aufgrund eines Gestationsdiabetes, eines Bandscheibenvorfalls und des Nichterscheinens zur zweiten Blutentnahme (alle 3 Personen aus der Kontrollgruppe) gingen die Daten von 41 Personen in die Auswertung ein.

</TD><TD VALIGN="TOP">

Bemerkung: Diese Informationen wurden in den Methoden gegeben. Unklar ist, warum die Person mit Gestationsdiabetes von der Studie ausgeschlossen wurde. Unklar bleibt, ob der Bandscheibenvorfall eine „Kontraindikation gegen sportliche Alltagsbelastungen” darstellt.

</TD><TD VALIGN="TOP">

Dass die Person mit fehlender Nachbeobachtung ausgeschlossen wurde, ist nachvollziehbar. Im Sinne einer „intention-to-treat”-Auswertung hätte sie in der Studienpopulation verbleiben sollen.

</TD><TD VALIGN="TOP">

Item 14a. Ergebnisse. Rekrutierung

</TD><TD VALIGN="TOP">

Beschreibung: Zeitraum der Rekrutierung und Nachbeobachtung.

</TD><TD VALIGN="TOP">

Bemerkung: Daten zum Beginn und Ende der Rekrutierung bzw. der Nachbeobachtung werden nicht gegeben.

</TD><TD VALIGN="TOP">

Item 14b. Ergebnisse. Rekrutierung

</TD><TD VALIGN="TOP">

Beschreibung: Warum die Studie endete oder gestoppt wurde.

</TD><TD VALIGN="TOP">

Bemerkung: Eine Erklärung zum Studienende wird in der Publikation nicht gegeben. Da davon auszugehen ist, dass keine Fallzahlplanung stattfand, wurde die Studie nach Beobachtung der 41 rekrutierten Patienten beendet.

</TD><TD VALIGN="TOP">

Item 15. Ergebnisse. Ausgangsdaten

</TD><TD VALIGN="TOP">

Beschreibung: Eine Tabelle demografischer und klinischer Charakteristika für jede Gruppe.

</TD><TD VALIGN="TOP">

S. 2206: Tabelle 3.

</TD><TD VALIGN="TOP">

Bemerkung: Keine.

</TD><TD VALIGN="TOP">

Item 16. Ergebnisse. Anzahl analysiert

</TD><TD VALIGN="TOP">

Beschreibung: Für jede Gruppe Anzahl der Teilnehmer, die in jede Analyse eingeschlossen wurde und Angabe ob die Analyse den ursprünglich zugeteilten Gruppen entsprach.

</TD><TD VALIGN="TOP">

S. 2206, Tabelle 3.

</TD><TD VALIGN="TOP">

Bemerkung: Keine.

</TD><TD VALIGN="TOP">

Item 17a. Ergebnisse. Zielkriterien und Schätzung

</TD><TD VALIGN="TOP">

Beschreibung: Für jeden primären und sekundären Endpunkt, Ergebnisse für jede Gruppe und die geschätzte Effektgröße sowie ihre Präzision (z. B. 95 %-Konfidenzintervall).

</TD><TD VALIGN="TOP">

S. 2206, Tabelle 3.

</TD><TD VALIGN="TOP">

Bemerkung: Trotz der Ausführlichkeit der Tabelle werden weder p-Werte noch Konfidenzintervalle berichtet. Allerdings beinhaltet die Tabelle gruppenspezifische Mittelwerte und Standardabweichungen zusammen mit der Information, ob der p-Wert < 0,05 ist.

</TD><TD VALIGN="TOP">

Item 17b. Ergebnisse. Zielkriterien und Schätzung

</TD><TD VALIGN="TOP">

Beschreibung: Für binäre Zielkriterien ist die Angabe von absoluten und relativen Effektgrößen empfohlen.

</TD><TD VALIGN="TOP">

S. 2206, Tabelle 3.

</TD><TD VALIGN="TOP">

Bemerkung: Es werden gruppenspezifische absolute und relative Häufigkeiten berichtet, aus denen sich alle relevanten Effektgrößen herleiten lassen können.

</TD><TD VALIGN="TOP">

Item 18. Ergebnisse. Zusätzliche Analysen

</TD><TD VALIGN="TOP">

Beschreibung: Resultate von allen weiteren Analysen, einschließlich Subgruppenanalysen und adjustierten Analysen mit Angabe, ob diese vordefiniert oder exploratorisch durchgeführt wurden.

</TD><TD VALIGN="TOP">

Bemerkung: Hierzu wird in der Publikation nichts berichtet.

</TD><TD VALIGN="TOP">

Item 19. Ergebnisse. Nebenwirkungen

</TD><TD VALIGN="TOP">

Beschreibung: Alle wichtigen Schäden und unerwünschten Wirkungen in jeder Gruppe (siehe CONSORT für Schaden [4]).

</TD><TD VALIGN="TOP">

Bemerkung: Hierzu wird in der Publikation nichts berichtet.

</TD>

Tab. 2c Punkt für Punkt Betrachtung der Checkliste des CONSORT 2010 Statements [8] , angewendet auf die Publikation von Richter et al. [7].

<TD VALIGN="TOP">

Item 20. Diskussion. Limitierungen

</TD><TD VALIGN="TOP">

Beschreibung: Studienlimitierungen mit Angabe zu potentieller Verzerrung, Ungenauigkeiten und falls relevant Multiplizität von Analysen.

</TD><TD VALIGN="TOP">

S. 2205, Spalte 2: Eine Limitation dieser Studie liegt in der nicht erfolgten Objektivierung mittels Messmethoden wie Spiroergometrie oder Schrittzähler, wobei letztere als semiobjektiv anzusehen sind, da der Schrittzähler durch den Probanden gezielt beeinflussbar ist.

</TD><TD VALIGN="TOP">

Bemerkung: Zwar wird als Limitierung die nicht erfolgte Objektivierung mittels Messmethoden angesprochen. Dass die Studie aufgrund der geringen Fallzahl nur geringe Aussagekraft hat, wird nicht erwähnt. Andere Designaspekte der Studie, die potentielle Verzerrungsquellen darstellen, werden nicht erwähnt. Ebenso wird das Problem des multiplen Testens nicht diskutiert.

</TD><TD VALIGN="TOP">

Item 21. Diskussion. Generalisierbarkeit

</TD><TD VALIGN="TOP">

Beschreibung: Generalisierbarkeit (externe Validität, Anwendbarkeit) der Studienergebnisse.

</TD><TD VALIGN="TOP">

Bemerkung: Nicht beschrieben.

</TD><TD VALIGN="TOP">

Item 22. Diskussion. Interpretation

</TD><TD VALIGN="TOP">

Beschreibung: Interpretation konsistent mit den Ergebnissen, Abwägung des Nutzens und Schadens, Berücksichtigung anderer relevanter Evidenz.

</TD><TD VALIGN="TOP">

S. 2207, Box „Konsequenz für Klinik und Praxis”. Außerdem S. 2207, Spalte 2: … Größtenteils in den USA durchgeführte Studien zeigen, dass … Die Ergebnisse einer Metaanalyse weisen einerseits darauf hin, dass … Das Ziel einer folgenden Untersuchung sollte die Evaluierung einer mit unserer relativ zeit- und kostengünstigen Intervention vergleichbaren Maßnahme an einem größeren Patientenkollektiv über einen Zeitraum von mehreren Jahren sein.

</TD><TD VALIGN="TOP">

Bemerkung: Keine.

</TD><TD VALIGN="TOP">

Item 23. Weitere Informationen. Registrierung

</TD><TD VALIGN="TOP">

Beschreibung: Registrierungsnummer und Name des Studienregisters.

</TD><TD VALIGN="TOP">

Bemerkung: Nicht beschrieben. Dieser Punkt ist erst mit den CONSORT 2010 Empfehlungen [8] aufgenommen worden.

</TD><TD VALIGN="TOP">

Item 24. Weitere Informationen. Protokoll

</TD><TD VALIGN="TOP">

Beschreibung: Wo das vollständige Protokoll eingesehen werden kann, falls verfügbar.

</TD><TD VALIGN="TOP">

Bemerkung: Nicht beschrieben. Dieser Punkt ist erst mit den CONSORT 2010 Empfehlungen [8] aufgenommen worden.

</TD><TD VALIGN="TOP">

Item 25. Weitere Informationen. Finanzierung der Studie

</TD><TD VALIGN="TOP">

Beschreibung: Quellen der Finanzierung und anderer Unterstützung (wie Lieferung von Medikamenten), Rolle des Geldgebers.

</TD><TD VALIGN="TOP">

S. 2207, Autorenerklärung.

</TD><TD VALIGN="TOP">

Bemerkung: In der Autorenerklärung der Deutschen Medizinischen Wochenschrift wird nur beschrieben, dass die Autoren keine finanziellen Verbindungen mit einer Firma haben, deren Produkt in dem Beitrag eine wichtige Rolle spielt. Die Finanzierungsquellen der Studie werden nicht genannt.

</TD>

Tab. 2d Punkt für Punkt Betrachtung der Checkliste des CONSORT 2010 Statements [8] , angewendet auf die Publikation von Richter et al. [7].

Diskussion

Die Interpretation und Bewertung klinischer Studien durch den Leser hängt entscheidend von der Berichtsqualität ab. Im Gegensatz zu dieser scheinbar offensichtlichen Aussage enthielten und enthalten nicht alle Publikationen die Angaben, die zu einer kritischen Bewertung einer Studie notwendig sind [5]. Dieses wurde seit Anfang der 1990er Jahre offensichtlich, als im Rahmen der aufkommenden Evidenzbasierten Medizin systematische Reviews die kritische Bewertung publizierter Studienergebnisse erforderlich machten [1]. Als Konsequenz daraus wurde eine Reihe von Leitlinien für Forschungsberichte entwickelt.

Die Anwendung des CONSORT 2010 Statements auf die Publikation von Richter et al. [7] zeigt, dass sich Leser bei der kritischen Evaluation von Fachartikeln an diesen Leitlinien orientieren können, um die Qualität und Übertragbarkeit einer Studie einzuschätzen. Allerdings muss bei der kritischen Beurteilung eines Artikels der Unterschied zwischen der Qualität des Berichtens und der Qualität der eigentlichen Studie unterschieden werden.

Konsequenz für Klinik und Praxis

• Die zentralen Leitlinien für Forschungsberichte liegen in deutscher Sprache frei verfügbar vor (https://www.thieme-connect.de/ejournals/toc/dmw/104011. Sie helfen Autoren von Fachartikeln, vollständige und transparente Berichte zu erstellen.

• Leser können Leitlinien-Elemente zur Einschätzung der Qualität einer publizierten Studie verwenden. Dabei müssen sie zwischen der Qualität des Berichts und der Qualität der Studie unterscheiden.

Danksagung: Diese Arbeit entstand während des Forschungsfreisemesters von AZ an dem Institut Montefiore der Universität Lüttich (Belgien). AZ dankt den Kollegen am Institut Montefiore sehr herzlich für die Möglichkeit, dort zu arbeiten. Die Arbeit entstand während der Vorbereitung der Autoren auf den Kursteil Evidenzbasierte Medizin im Rahmen des Kurses Ärztliches Qualitätsmanagement an der Akademie für Fortbildung und Weiterbildung der Landesärztekammer Hessen (Sigrid Blehle, Dr. Roland Kaiser).

Autorenerklärung: Die Autoren erhalten ein Honorar von der Akademie für Fortbildung und Weiterbildung der Landesärztekammer Hessen für das Erstellen von Unterlagen für den Kursteil Evidenzbasierte Medizin im Rahmen des Kurses Ärztliches Qualitätsmanagement.

Literaturverzeichnis

• 1 Häussler B. Definition, Vorgehensweise und Ziele der evidenzbasierten Medizin.  Dtsch Med Wochenschr. 2005;  130 Suppl 2 S66-71
• 2 Hopewell S, Clarke M, Moher D. et al . CONSORT for reporting randomised trials in journal and conference abstracts.  Lancet. 2008;  371 281-283
• 3 Hopewell S, Clarke M, Moher D. et al . CONSORT for reporting randomized controlled trials in journal and conference abstracts: explanation and elaboration.  PLoS Med. 2008;  5 e20
• 4 Ioannidis J P, Evans S J, Gøtzsche P C. et al . Better reporting of harms in randomized trials: an extension of the CONSORT statement.  Ann Intern Med. 2004;  141 781-788
• 5 Meerpohl J J, Blümle A, Antes G, Elm E. Leitlinien für Forschungsberichte sind auch für Leser medizinischer Fachartikel hilfreich: CONSORT, STARD, STROBE & Co.  Dtsch Med Wochenschr. 2009;  134 2078-2083
• 6 Moher D, Hopewell S, Schulz K F. et al . CONSORT 2010 explanation and elaboration: updated guidelines for reporting parallel group randomised trials.  BMJ. 2010;  340 c869
• 7 Richter H, Kraft K, Kleinwechter H. et al . Telefonintervention bei Typ-2-Diabetikern: Zunahme der körperlichen Aktivität und Reduktion von kardiovaskulären Risikofaktoren.  Dtsch Med Wochenschr. 2008;  133 2203-2208
• 8 Pittler M H, Blümle A, Meerpohl J J, Antes G. CONSORT 2010: Aktualisierte Leitlinie für Berichte randomisierter Studien im Parallelgruppen-Design.  Dtsch Med Wochenschr. 2011;  136 e20-e23