Sind diese Umfragen wissenschaftlich?
Es gibt im Allgemeinen zwei Kriterien, die Sozialwissenschaftler verwenden, um die Qualität einer Umfrage zu bewerten: ihre Gültigkeit und ihre Zuverlässigkeit. Die Validität bezieht sich darauf, ob die Umfrage tatsächlich das misst, was sie vorgibt zu tun. Die Zuverlässigkeit bezieht sich darauf, ob die durch die Umfrage gewonnenen Informationen bei einer erneuten Durchführung der Umfrage wiederholt werden könnten.
Wir haben starke Belege dafür, dass unsere Umfragen sowohl gültig als auch zuverlässig sind. Die Fragen in den Umfragen werden professionell von Experten der CR-Umfrageabteilung in Absprache mit unseren Automobilingenieuren und Statistikern entworfen. Die Mitglieder unseres Umfrageteams verfügen über fortgeschrittene Abschlüsse und langjährige Erfahrung in der Durchführung aller Arten von Verbraucherumfragen. Die Umfragen verwenden eine unterstützte Antworttechnik, die die Befragten durch genau definierte spezifische Fragen führt und jedem Befragten die gleiche Perspektive bei der Beantwortung der Fragen bietet. Die von uns ermittelten Daten stimmen gut mit anderen auf dem Markt verfügbaren Quellen für Reparatur- und Zuverlässigkeitsinformationen überein. Von Jahr zu Jahr sind die Berichte unserer Mitglieder über ihre Erfahrungen mit Problemen ziemlich konsistent; wenn es bei einem bestimmten Modell einen Unterschied gibt, können wir ihn oft auf bekannte Probleme mit einer bestimmten Komponente eines Fahrzeugs zurückführen.
Basieren die Umfragen auf einer repräsentativen Stichprobe?
Eine Stichprobe gilt als repräsentativ für eine Grundgesamtheit, wenn die relevanten Merkmale der Grundgesamtheit in der Stichprobe enthalten sind. Bei der Bewertung der Qualität einer Stichprobe ist es daher wichtig, die Grundgesamtheit zu berücksichtigen. Die Stichprobe unserer Umfrage wird aus der Grundgesamtheit der Mitglieder von Consumer Reports gezogen. Obwohl alle Mitglieder eingeladen sind, an den Umfragen teilzunehmen, ist die Teilnahme freiwillig, und es besteht immer die Möglichkeit, dass diejenigen, die antworten, in irgendeiner Weise einzigartig sind. Ein Grund dafür ist, dass es sich bei unseren Umfragen um Sammelumfragen handelt, bei denen die Mitglieder nicht nur zu ihren Autos befragt werden, sondern auch zu einem Dutzend anderer Produkte und wichtiger Dienstleistungen, die sie in Anspruch genommen haben (z. B. Versicherungen, Kabeldienste, Mobiltelefonverträge und Fluggesellschaften). Viele Mitglieder geben in ihren Umfragen an, dass sie im vergangenen Jahr keinerlei Probleme mit ihren Autos hatten. Dies gilt für alle Automarken und -modelle. Es sind also nicht nur die Autobesitzer, die sich über ihre Autos beschweren, die die Umfragen zurücksenden.
Jede Umfrage hat eine Art Stichprobenrahmen, der die befragten Personen einschränkt. Wir haben unsere Mitglieder als Stichprobenrahmen gewählt. Im Durchschnitt sind CR-Mitglieder gebildeter und wohlhabender als die Allgemeinbevölkerung. Mit dem Wachstum von Consumer Reports online wurde in den letzten Jahren ein breiteres demografisches Spektrum von Personen befragt. In unseren Fragen zur Zuverlässigkeit werden die Befragten jedoch nicht nach ihrer Einstellung oder Meinung zur Zuverlässigkeit ihrer Autos gefragt, wo man erwarten könnte, dass verschiedene Gruppen von Personen unterschiedliche Ansichten haben. Stattdessen fragen wir nach faktischen Informationen darüber, ob spezifisch definierte Probleme aufgetreten sind; diese Art von Fragen sind weniger empfindlich gegenüber den Merkmalen der Stichprobe selbst.
Außerdem stimmen unsere Ergebnisse gut mit anderen auf dem Markt verfügbaren Quellen für Zuverlässigkeitsinformationen überein.
Ihre Umfrageergebnisse stimmen nicht mit meinen Erfahrungen überein. Sind Ihre Umfragen falsch?
Selbst bei den unzuverlässigsten Modellen haben einige Autobesitzer Glück und haben während der 12 Monate, die von der Umfrage erfasst werden, nur wenige oder gar keine Probleme. Bei einem der schlechtesten Modelle in unseren jüngsten Umfragen berichteten beispielsweise etwa 55 Prozent der Besitzer über Probleme in mindestens einem Problembereich in den letzten 12 Monaten; das bedeutet natürlich, dass etwa 45 Prozent der Besitzer keine Probleme meldeten. Ihr Nachbar oder Freund könnte einer dieser glücklichen Besitzer sein. Natürlich kann auch das Gegenteil passieren – selbst bei einem Modell, das in der Regel recht zuverlässig ist, gibt es gelegentlich eine „Zitrone“.
Da die durchschnittliche Anzahl der Probleme bei den meisten Modellen gering ist, überbetont Consumer Reports Unterschiede, die möglicherweise nicht wichtig sind?
Abgesehen von der statistischen Signifikanz glauben wir, dass diese Unterschiede auch für Autokäufer von Bedeutung sind. Wir denken, dass Autokäufer erwarten sollten, dass ein neues Auto in den ersten Monaten oder Jahren völlig problemlos ist. Der Unterschied zwischen zwei Bewertungen mag zwar gering sein, aber ein Muster von mehreren nicht perfekten Problemstellen bei einem fabrikneuen Auto sollte Anlass zur Sorge geben und ist kein gutes Zeichen für die langfristige Zuverlässigkeit eines Modells. Wir haben nicht viele Modelle in unserer Umfrage gesehen, die völlig problemlos sind. Der 2019er Mazda MX-5 Miata hat nur sehr wenige Probleme und ist fast 40 Mal besser als der Volkswagen GTI, der die meisten Probleme unter den 2019er Modellen hat. Diese Unterschiede zwischen den Modellen sind wichtig für Autokäufer, die sich für ein Fahrzeug entscheiden. Wir präsentieren diese Bewertungen für Problemstellen in erster Linie, damit die Verbraucher die relative Häufigkeit von Problemen zwischen den Modellen vergleichen können. Es gibt zwar keine Garantien, aber Sie können Ihre Chancen, ein zuverlässiges Auto zu kaufen, erhöhen, wenn Sie sich für ein Modell entscheiden, bei dem es in der Vergangenheit weniger Probleme gab.
Einige Leute pflegen ihre Autos anders als andere. Wie wirkt sich das auf die Bewertungen aus?
Der größte Problembereich bei neueren Modellen ist die Elektronik im Fahrzeug: Infotainment, Unterhaltung, Telefonkopplung und Navigationssysteme. Weitere Problembereiche sind das Klimasystem (Klimakompressor, Kondensator, Heizung) und die elektrische Ausrüstung (Karosseriesteuerungsmodul, Messgeräte und Warnleuchten). Die Wartung hat keinen Einfluss auf diese Bereiche. Probleme in diesen Bereichen spiegeln eher das Design oder die Qualität wider.
Wie berücksichtigen Sie Unterschiede in der Laufleistung?
Fahrzeuge mit höherer Laufleistung haben höchstwahrscheinlich mehr Probleme als Fahrzeuge desselben Alters mit geringerer Laufleistung. Wir passen unsere Analysen an, um die Unterschiede zwischen den Modellen aufgrund der unterschiedlichen Laufleistung zu minimieren. Unsere Daten werden durch Einteilung der Fahrzeuge jedes Modells in Gruppen mit hohem, mittlerem und niedrigem Kilometerstand und durch Anwendung der statistischen Technik der direkten Standardisierung standardisiert.