Er disse undersøgelser videnskabelige?
Der er generelt to kriterier, som samfundsforskere bruger til at vurdere kvaliteten af en undersøgelse: dens validitet og dens pålidelighed. Validitet henviser til, om undersøgelsen faktisk måler det, som den siger, at den gør. Pålidelighed henviser til, om de oplysninger, der fremkommer ved undersøgelsen, kan gentages, hvis undersøgelsen gennemføres igen.
Vi har stærke beviser for, at vores undersøgelser er både gyldige og pålidelige. Spørgsmålene i undersøgelserne er professionelt udformet af eksperter i CR’s undersøgelsesafdeling i samråd med vores bilteknologer og statistikere. Medlemmerne af vores undersøgelseshold har videregående uddannelser og mange års erfaring med at gennemføre alle former for forbrugerundersøgelser. Undersøgelserne anvender en støttet besvarelsesteknik, der leder respondenterne gennem veldefinerede specifikke emner og giver hver respondent det samme perspektiv ved besvarelsen af spørgsmålene. De data, vi rapporterer, stemmer godt overens med andre kilder til oplysninger om reparation og pålidelighed, der findes på markedet. Fra år til år er vores medlemmers rapporter om deres problemoplevelser ret ensartede; når der er en forskel på en bestemt model, kan vi ofte henføre den til kendte problemer med en bestemt komponent i en bil.
Er undersøgelserne baseret på en repræsentativ stikprøve?
En stikprøve anses for at være repræsentativ for en population, hvis de relevante karakteristika for populationen afspejles i stikprøven. Det er derfor af afgørende betydning at tage hensyn til den population, der er af interesse, når man skal vurdere kvaliteten af en stikprøve. Vores undersøgelsesprøve er udtaget fra populationen af Consumer Reports medlemmer. Selv om alle medlemmer opfordres til at deltage i undersøgelserne, er deltagelsen frivillig, og der er altid mulighed for, at de, der svarer, er unikke på en bestemt måde. F.eks. har medlemmerne nogle gange stillet spørgsmålstegn ved, om de, der svarer, er dem, der har en klage over deres biler.
En af grundene hertil er, at vores undersøgelser er omnibusundersøgelser, hvor medlemmerne ikke kun spørges om deres biler, men også om et dusin andre produkter og større tjenester, som de har benyttet (f.eks. forsikringer, kabeltjenester, mobiltelefonabonnementer og flyselskaber). Mange medlemmer returnerer spørgeskemaer og rapporterer, at de ikke har haft nogen problemer med deres biler i det seneste år. Dette gælder for alle bilmærker og -modeller. Så ejere med klager over deres biler er ikke de eneste, der returnerer undersøgelserne.
Alle undersøgelser har en eller anden form for stikprøveramme, der begrænser de personer, der bliver undersøgt. Vi vælger vores medlemmer som vores stikprøveramme. I gennemsnit har CR-medlemmer en tendens til at være mere veluddannede og velhavende end den generelle befolkning. Med væksten af Consumer Reports online er der i de seneste år blevet foretaget en undersøgelse af et bredere demografisk spektrum af personer. I vores spørgsmål om pålidelighed spørger vi imidlertid ikke respondenterne om deres holdninger eller meninger om deres bilers pålidelighed, hvor man kunne forvente, at forskellige grupper af personer ville have forskellige perspektiver. I stedet spørger vi om faktuelle oplysninger om, hvorvidt der er opstået specifikt definerede problemer; denne type spørgsmål er mindre følsomme over for karakteristika ved selve stikprøven.
Dertil kommer, at vores resultater stemmer godt overens med andre kilder til pålidelighedsoplysninger, der er tilgængelige på markedet.
Dine undersøgelsesresultater stemmer ikke overens med mine erfaringer. Er jeres undersøgelser forkerte?
Selv i de mest upålidelige modeller er nogle individuelle bilejere heldige og oplever få eller ingen problemer i løbet af de 12 måneder, der er omfattet af undersøgelsen. I en af de dårligste modeller i vores seneste undersøgelser rapporterede f.eks. ca. 55 % af ejerne om problemer på mindst ét problemområde i løbet af de foregående 12 måneder; det betyder naturligvis, at ca. 45 % af ejerne ikke rapporterede om problemer. Din nabo eller ven er måske en af disse heldige ejere. Selvfølgelig kan det modsatte også ske – selv i en model, der har tendens til at være ret pålidelig, er der lejlighedsvis en “citron”.”
Da det gennemsnitlige antal problemer er lille for de fleste modeller, overbetoner Consumer Reports så forskelle, der måske ikke er vigtige?
Og ud over den statistiske betydning mener vi, at disse forskelle også er meningsfulde for bilkøbere. Vi mener, at bilkøbere bør forvente, at en ny bil er helt problemfri i de første måneder eller år, den er i brug. Selv om forskellen mellem to vurderinger kan være lille, bør et mønster med flere mindre end perfekte problemfelter i en helt ny bil give anledning til bekymring og lover ikke godt for en models pålidelighed på lang sigt. Vi har ikke set mange modeller i vores undersøgelse, som er helt problemfri. 2019 Mazda MX-5 Miata har meget få problemer og er næsten 40 gange bedre end Volkswagen GTI, som har de fleste problemer blandt 2019-modellerne. Disse forskelle mellem modellerne er vigtige for bilkøbere at overveje, når de skal vælge bil. Vi præsenterer disse scoringer for problemområder primært for at give forbrugerne mulighed for at sammenligne den relative forekomst af problemer blandt modellerne. Selv om der ikke er nogen garantier, kan du forbedre dine chancer for at købe en pålidelig bil, hvis du vælger en model, der tidligere har haft en lavere forekomst af problemer.
Nogle mennesker vedligeholder deres biler anderledes end andre. Hvordan påvirker dette bedømmelserne?
Det største voksende problemområde i senmodellerede biler er elektronikken i bilen: infotainment, underholdning, telefonparring og navigationssystemer. Andre problemområder omfatter klimasystemet (A/C-kompressor, kondensator, varmesystem) og strømforsyningsudstyr (karrosserikontrolmodul, målere og advarselslamper). Vedligeholdelse påvirker ikke disse punkter. Problemer på disse områder afspejler måske snarere den iboende konstruktion eller kvalitet.
Hvordan tager man højde for kilometerforskelle?
Køretøjer med et højere kilometertal vil højst sandsynligt opleve flere problemer end køretøjer af samme alder med et lavere kilometertal. Vi justerer vores analyser for at minimere forskelle mellem modellerne på grund af varierende kilometertal. Vores data er standardiseret efter kilometertal ved at opdele biler af hver model i grupper med højt, middelhøjt og lavt kilometertal og ved at anvende den statistiske teknik med direkte standardisering.
