Zijn dit wetenschappelijke enquêtes?
Er zijn over het algemeen twee criteria die sociale wetenschappers gebruiken om de kwaliteit van een enquête te evalueren: de validiteit en de betrouwbaarheid. De validiteit heeft betrekking op de vraag of de enquête werkelijk meet wat zij zegt te meten. Betrouwbaarheid heeft betrekking op de vraag of de informatie die de enquête oplevert, kan worden herhaald als de enquête opnieuw zou worden uitgevoerd.
Wij beschikken over sterke aanwijzingen dat onze enquêtes zowel geldig als betrouwbaar zijn. De vragen in de enquêtes worden op professionele wijze ontworpen door deskundigen van de afdeling Enquêtes van CR, in overleg met onze automobielingenieurs en statistici. De leden van ons enquêteteam hebben geavanceerde diploma’s en vele jaren ervaring in het uitvoeren van allerlei soorten consumentenonderzoeken. Bij de enquêtes wordt gebruik gemaakt van een hulp-responstechniek die de respondenten door welomschreven specifieke items leidt en elke respondent hetzelfde perspectief biedt bij het beantwoorden van de vragen. De gegevens die wij rapporteren sluiten goed aan bij andere bronnen van reparatie- en betrouwbaarheidsinformatie die op de markt beschikbaar zijn. Van jaar tot jaar zijn de rapporten van onze leden over hun probleemervaringen vrij consistent; wanneer er een verschil is bij een bepaald model, kunnen we dit vaak toeschrijven aan bekende problemen met een bepaald onderdeel van een auto.
zijn de enquêtes gebaseerd op een representatieve steekproef?
Een steekproef wordt als representatief voor een populatie beschouwd als de relevante kenmerken van de populatie in de steekproef worden weerspiegeld. Bij de beoordeling van de kwaliteit van een steekproef is het dus van cruciaal belang rekening te houden met de populatie die van belang is. Onze steekproef voor de enquête is getrokken uit de populatie van leden van Consumer Reports. Hoewel alle leden worden uitgenodigd om deel te nemen aan de enquêtes, is deelname vrijwillig en is er altijd de mogelijkheid dat degenen die reageren op een bepaalde manier uniek zijn. Zo hebben leden zich soms afgevraagd of degenen die reageren degenen zijn die een klacht hebben over hun auto’s.
Een van de redenen hiervoor is dat onze enquêtes omnibusenquêtes zijn, waarin leden niet alleen naar hun auto’s wordt gevraagd, maar ook naar ongeveer een dozijn andere producten en belangrijke diensten die zij hebben gebruikt (zoals verzekeringen, kabeldiensten, mobiele telefoonplannen en luchtvaartmaatschappijen). Veel leden sturen enquêtes terug waarin zij melden dat zij het afgelopen jaar helemaal geen problemen met hun auto hebben gehad. Dit geldt voor alle merken en modellen van auto’s. Eigenaars met klachten over hun auto’s zijn dus niet de enigen die de enquêtes terugsturen.
Elk onderzoek heeft een soort steekproefkader dat de ondervraagde personen beperkt. Wij kiezen onze leden als steekproefkader. Gemiddeld genomen zijn CR-leden hoger opgeleid en welvarender dan de algemene bevolking. Met de groei van Consumer Reports online, is er de laatste jaren een breder demografisch spectrum van personen ondervraagd. Onze betrouwbaarheidsvragen vragen de respondenten echter niet naar hun houding of mening over de betrouwbaarheid van hun auto’s, waarbij men zou kunnen verwachten dat verschillende groepen individuen verschillende perspectieven hebben. In plaats daarvan vragen we naar feitelijke informatie over de vraag of zich specifiek omschreven problemen hebben voorgedaan; dit soort vragen is minder gevoelig voor de aard van de kenmerken van de steekproef zelf.
Daarnaast komen onze resultaten goed overeen met andere bronnen van betrouwbaarheidsinformatie die op de markt beschikbaar zijn.
Uw enquêteresultaten komen niet overeen met mijn ervaring. Zijn uw enquêtes fout?
Zelfs bij de meest onbetrouwbare modellen hebben sommige individuele autobezitters geluk en ondervinden ze weinig of geen problemen tijdens de 12 maanden waarop de enquête betrekking heeft. Bijvoorbeeld, in een van de slechtste modellen in onze recente enquêtes, meldde ongeveer 55 procent van de eigenaren problemen op ten minste één probleemgebied in de afgelopen 12 maanden; natuurlijk betekent dit dat ongeveer 45 procent van de eigenaren geen problemen meldde. Uw buurman of vriend kan een van die gelukkige eigenaars zijn. Natuurlijk kan het tegenovergestelde ook gebeuren – zelfs in een model dat over het algemeen vrij betrouwbaar is, is er af en toe een “citroen.”
Since the Average Number of Problems Is Small for Most Models, Is Consumer Reports Overly Exposure Differences That May Not Be Important?
Naast statistische significantie, geloven wij dat deze verschillen ook van betekenis zijn voor autokopers. Wij denken dat autokopers zouden moeten verwachten dat een nieuwe auto volledig probleemvrij is in de eerste maanden of jaren dat hij in gebruik is. Het verschil tussen twee beoordelingen mag dan klein zijn, maar een patroon van verschillende minder-dan-perfecte probleempunten in een gloednieuwe auto zou reden tot bezorgdheid moeten zijn en voorspelt niet veel goeds voor de betrouwbaarheid van een model op lange termijn. We hebben in ons onderzoek nog niet veel modellen gezien die volledig probleemloos zijn. De 2019 Mazda MX-5 Miata heeft zeer weinig problemen en is bijna 40 keer beter dan de Volkswagen GTI, die de meeste problemen heeft onder de 2019-modellen. Die verschillen tussen modellen zijn belangrijk voor autokopers om te overwegen bij het kiezen van een auto. We presenteren deze scores voor probleempunten in de eerste plaats om consumenten in staat te stellen de relatieve incidentie van problemen tussen modellen te vergelijken. Hoewel er geen garanties zijn, kunt u uw kansen op het kopen van een betrouwbare auto verbeteren als u een model kiest dat in het verleden een lager percentage problemen heeft gehad.
Sommige mensen onderhouden hun auto’s anders dan anderen. Hoe beïnvloedt dit de beoordelingen?
Het grootste groeiende probleemgebied in late-model auto’s is de elektronica in de auto: infotainment, entertainment, telefoonkoppeling en navigatiesystemen. Andere probleemgebieden zijn het klimaatsysteem (airco-compressor, condensor, verwarmingssysteem), en de elektrische apparatuur (body control module, meters en waarschuwingslampjes). Onderhoud heeft geen invloed op deze onderdelen. Problemen op die gebieden zijn waarschijnlijk meer een weerspiegeling van het inherente ontwerp of de kwaliteit.
Hoe houdt u rekening met verschillen in kilometerstand?
Voertuigen met een hogere kilometerstand zullen hoogstwaarschijnlijk meer problemen ondervinden dan voertuigen van dezelfde leeftijd met een lagere kilometerstand. Wij passen onze analyses aan om verschillen tussen modellen als gevolg van verschillende kilometerstanden tot een minimum te beperken. Onze gegevens zijn gestandaardiseerd naar kilometerstand door auto’s van elk model te verdelen in groepen met een hoge, gemiddelde en lage kilometerstand, en de statistische techniek van directe standaardisatie toe te passen.
