Jsou tyto průzkumy vědecké?
Existují obecně dvě kritéria, která sociologové používají k hodnocení kvality průzkumu: jeho platnost a spolehlivost. Validita se týká toho, zda průzkum skutečně měří to, co tvrdí, že měří. Spolehlivost se týká toho, zda by se informace získané průzkumem mohly opakovat, pokud by se průzkum prováděl znovu.
Máme přesvědčivé důkazy o tom, že naše průzkumy jsou platné i spolehlivé. Otázky v průzkumech jsou profesionálně navrženy odborníky z oddělení průzkumů CR po konzultaci s našimi automobilovými inženýry a statistiky. Členové našeho průzkumného týmu mají vysokoškolské vzdělání a dlouholeté zkušenosti s prováděním nejrůznějších spotřebitelských průzkumů. Průzkumy využívají techniku asistované odpovědi, která vede respondenty přes přesně definované specifické položky a poskytuje každému respondentovi stejný pohled při odpovídání na otázky. Námi uváděné údaje se dobře shodují s jinými zdroji informací o opravách a spolehlivosti, které jsou na trhu k dispozici. Rok od roku jsou zprávy našich členů o jejich zkušenostech s problémy poměrně konzistentní; pokud se objeví rozdíl u konkrétního modelu, můžeme jej často připsat známým problémům s určitou součástí vozu.
Jsou průzkumy založeny na reprezentativním vzorku?
Vzorek je považován za reprezentativní pro populaci, pokud se v něm odrážejí příslušné charakteristiky populace. Zohlednění zájmové populace je tedy při hodnocení kvality vzorku rozhodující. Vzorek našeho průzkumu je vybrán z populace členů Consumer Reports. Ačkoli jsou všichni členové vyzváni k účasti na průzkumech, účast je dobrovolná a vždy existuje možnost, že ti, kteří odpovídají, jsou v určitém ohledu jedineční. Například členové někdy zpochybňují, zda ti, kteří odpovídají, jsou ti, kteří si stěžují na své automobily.
Jedním z důvodů je to, že naše průzkumy jsou souhrnné a ptají se členů nejen na jejich automobily, ale i na tucet dalších produktů a významných služeb, které využívají (například pojištění, kabelové služby, mobilní telefonní tarify a letecké společnosti). Mnozí členové v průzkumech uvádějí, že v uplynulém roce neměli se svými vozy žádné problémy. To platí pro všechny značky a modely automobilů. Majitelé, kteří si na své vozy stěžují, tedy nejsou jediní, kdo průzkumy vrací.
Každý průzkum má nějaký výběrový rámec, který omezuje okruh dotazovaných osob. My si jako výběrový rámec vybíráme naše členy. Členové CR jsou v průměru vzdělanější a zámožnější než běžná populace. S nárůstem internetového zpravodajství Consumer Reports bylo v posledních letech dotazováno širší demografické spektrum osob. Naše otázky týkající se spolehlivosti se však respondentů neptají na jejich postoje nebo názory na spolehlivost jejich automobilů, kde by se dalo očekávat, že různé skupiny jednotlivců budou mít odlišný pohled na věc. Místo toho se ptáme na faktické informace o tom, zda se vyskytly konkrétně definované problémy; tyto typy otázek jsou méně citlivé na povahu charakteristik samotného vzorku.
Naše výsledky navíc dobře odpovídají jiným zdrojům informací o spolehlivosti, které jsou na trhu k dispozici.
Vaše výsledky průzkumu neodpovídají mým zkušenostem. Mýlí se vaše průzkumy?“
I u těch nejnespolehlivějších modelů mají někteří jednotliví majitelé vozů štěstí a během 12 měsíců, na které se průzkum vztahuje, se setkají s několika málo problémy nebo se nesetkají s žádnými. Například u jednoho z nejhorších modelů v našich nedávných průzkumech asi 55 % majitelů uvedlo problémy alespoň v jedné problémové oblasti za posledních 12 měsíců; to ovšem znamená, že asi 45 % majitelů neuvedlo žádné problémy. Váš soused nebo známý může být jedním z těchto šťastných majitelů. Samozřejmě se může stát i opak – i u modelu, který bývá poměrně spolehlivý, se občas vyskytne „citrón“.
Je průměrný počet problémů u většiny modelů malý, nezdůrazňuje Consumer Reports příliš rozdíly, které nemusí být důležité?
Kromě statistické významnosti se domníváme, že tyto rozdíly mají význam i pro kupující automobilů. Domníváme se, že kupující automobilů by měli očekávat, že nový vůz bude v prvních měsících nebo letech provozu zcela bezproblémový. I když rozdíl mezi dvěma hodnoceními může být malý, vzorec několika méně než dokonalých problémových míst u zcela nového vozu by měl být důvodem k obavám a nevěstí nic dobrého pro dlouhodobou spolehlivost modelu. V našem průzkumu jsme se nesetkali s mnoha modely, které by byly zcela bezproblémové. Mazda MX-5 Miata 2019 má velmi málo problémů a je na tom téměř 40krát lépe než Volkswagen GTI, který má mezi modely 2019 nejvíce problémů. Tyto rozdíly mezi modely jsou pro kupující automobilů důležité, aby je při výběru vozu zvážili. Tato hodnocení problémových míst uvádíme především proto, aby si spotřebitelé mohli porovnat relativní výskyt problémů mezi jednotlivými modely. Přestože neexistují žádné záruky, můžete zvýšit své šance na koupi spolehlivého vozu, pokud si vyberete model, který měl v minulosti nižší míru problémů.
Někteří lidé udržují svá auta jinak než ostatní. Jak to ovlivňuje hodnocení?“
Největší rostoucí problémovou oblastí u pozdních modelů automobilů je elektronika ve voze: informační a zábavní systémy, systémy pro párování telefonů a navigační systémy. Mezi další problémové oblasti patří klimatizační systém (kompresor klimatizace, kondenzátor, systém topení) a elektrická výbava (modul řízení karoserie, měřicí přístroje a výstražná světla). Údržba se těchto položek netýká. Problémy v těchto oblastech mohou spíše odrážet vrozenou konstrukci nebo kvalitu.
Jak zohlednit rozdíly v počtu najetých kilometrů?
Vozidla s vyšším počtem najetých kilometrů budou mít s největší pravděpodobností více problémů než stejně stará vozidla s nižším počtem najetých kilometrů. Naše analýzy upravujeme tak, abychom minimalizovali rozdíly mezi modely způsobené různým počtem najetých kilometrů. Naše data jsou standardizována podle počtu najetých kilometrů rozdělením vozů každého modelu do skupin s vysokým, středním a nízkým počtem najetých kilometrů a použitím statistické techniky přímé standardizace.
.