Czy są to badania naukowe?
Są generalnie dwa kryteria, których naukowcy społeczni używają do oceny jakości badań: ich ważności i wiarygodności. Ważność odnosi się do tego, czy badanie rzeczywiście mierzy to, co mówi, że mierzy. Wiarygodność odnosi się do tego, czy informacje wygenerowane przez ankietę mogą być powtórzone, jeśli ankieta zostanie przeprowadzona ponownie.
Mamy mocne dowody na to, że nasze ankiety są zarówno ważne jak i wiarygodne. Pytania w ankietach są profesjonalnie opracowywane przez ekspertów z Działu Badań CR, w porozumieniu z naszymi inżynierami motoryzacyjnymi i statystykami. Członkowie naszego zespołu ankieterów posiadają zaawansowane stopnie naukowe i wieloletnie doświadczenie w przeprowadzaniu wszelkiego rodzaju badań konsumenckich. Ankiety wykorzystują technikę wspomaganych odpowiedzi, która prowadzi respondentów przez dobrze zdefiniowane konkretne pozycje i daje każdemu respondentowi taką samą perspektywę w udzielaniu odpowiedzi na pytania. Dane, które podajemy są zgodne z innymi dostępnymi na rynku źródłami informacji o naprawach i niezawodności. Z roku na rok, raporty naszych członków dotyczące ich doświadczeń z problemami są dość spójne; kiedy występuje różnica w konkretnym modelu, często możemy przypisać ją do znanych problemów z konkretnym komponentem samochodu.
Czy ankiety są oparte na reprezentatywnej próbie?
Próba jest uważana za reprezentatywną dla populacji, jeśli odpowiednie cechy populacji są odzwierciedlone w próbie. Tak więc, rozważenie interesującej nas populacji jest krytyczne w ocenie jakości próby. Nasza próba badawcza pochodzi z populacji członków Consumer Reports. Chociaż wszyscy członkowie są zapraszani do udziału w ankietach, udział jest dobrowolny i zawsze istnieje możliwość, że ci, którzy odpowiedzą, są wyjątkowi pod jakimś szczególnym względem. Na przykład, członkowie czasami pytali, czy ci, którzy odpowiadają na ankietę, są tymi, którzy mają do złożenia skargę na swoje samochody.
Jednym z powodów jest to, że nasze ankiety są ankietami zbiorczymi, w których pytamy członków nie tylko o ich samochody, ale o kilkanaście innych produktów i głównych usług, z których korzystali (takich jak ubezpieczenia, usługi kablowe, plany telefonii komórkowej i linie lotnicze). Wielu członków zwraca ankiety informując, że w ciągu ostatniego roku nie mieli żadnych problemów ze swoimi samochodami. Dotyczy to wszystkich marek i modeli samochodów. Tak więc, właściciele ze skargami na swoje samochody nie są jedynymi, którzy zwracają ankiety.
Każda ankieta ma jakiś rodzaj ramki próbkowania, która ogranicza badanych ludzi. My wybieramy naszych członków jako naszą ramę próbkowania. Przeciętnie członkowie CR są bardziej wykształceni i zamożni niż ogół populacji. Wraz z rozwojem Consumer Reports online, w ostatnich latach badano szerszy zakres demograficzny osób. Jednakże nasze pytania dotyczące niezawodności nie pytają respondentów o ich nastawienie lub opinie na temat niezawodności ich samochodów, w przypadku których można by się spodziewać, że różne grupy osób będą miały różne punkty widzenia. Zamiast tego pytamy o faktyczne informacje na temat tego, czy wystąpiły konkretnie zdefiniowane problemy; tego typu pytania są mniej wrażliwe na charakterystykę samej próby.
Ponadto, nasze wyniki są zgodne z innymi źródłami informacji o niezawodności dostępnymi na rynku.
Your Survey Results Do Not Match With My Experience. Are Your Surveys Wrong?
Even in the most unreliable models, some individual car owners are lucky and experience few or no problems during the 12 months covered by the survey. Na przykład, w jednym z najgorszych modeli w naszych ostatnich badaniach, około 55 procent właścicieli zgłosiło problemy w co najmniej jednym obszarze problemowym w ciągu ostatnich 12 miesięcy; oczywiście, oznacza to, że około 45 procent właścicieli zgłosiło brak problemów. Twój sąsiad lub przyjaciel może być jednym z tych szczęśliwych właścicieli. Oczywiście, odwrotna sytuacja może się również zdarzyć – nawet w modelu, który ma tendencję do bycia dość niezawodnym, zdarza się okazjonalna „cytryna”.”
Since the Average Number of Problems Is Small for Most Models, Is Consumer Reports Overemphasizing Differences That May Not Be Important?
Poza istotnością statystyczną, wierzymy, że te różnice są również znaczące dla nabywców samochodów. Uważamy, że nabywcy samochodów powinni oczekiwać, że nowy samochód będzie całkowicie bezproblemowy w pierwszych miesiącach lub latach użytkowania. Podczas gdy różnica pomiędzy dwoma ocenami może być niewielka, wzór kilku mniej niż doskonałych punktów problemowych w zupełnie nowym samochodzie powinien być powodem do niepokoju i nie wróży dobrze długoterminowej niezawodności modelu. Nie widzieliśmy wielu modeli w naszym badaniu, które są całkowicie bezproblemowe. Mazda MX-5 Miata 2019 ma bardzo mało problemów i jest prawie 40 razy lepsza od Volkswagena GTI, który ma najwięcej problemów wśród modeli 2019. Te różnice między modelami są ważne dla nabywców samochodów, aby wziąć pod uwagę przy wyborze samochodu. Prezentujemy te wyniki dla miejsc występowania problemów przede wszystkim po to, aby umożliwić konsumentom porównanie względnej częstości występowania problemów wśród modeli. Chociaż nie ma żadnych gwarancji, możesz zwiększyć swoje szanse na zakup niezawodnego samochodu, jeśli wybierzesz model, który miał niższy wskaźnik problemów w przeszłości.
Niektórzy ludzie utrzymują swoje samochody inaczej niż inni. How Does This Affect the Ratings?
Największym rosnącym obszarem obaw w samochodach późnych modeli jest elektronika samochodowa: infotainment, rozrywka, parowanie telefonów i systemy nawigacji. Inne obszary problemowe obejmują układ klimatyzacji (sprężarka klimatyzacji, skraplacz, układ ogrzewania) oraz wyposażenie elektryczne (moduł sterowania nadwoziem, wskaźniki i lampki ostrzegawcze). Obsługa techniczna nie ma wpływu na te elementy. Problemy w tych obszarach mogą bardziej odzwierciedlać nieodłączną konstrukcję lub jakość.
How Do You Account for Mileage Differences?
Pojazdy z większym przebiegiem najprawdopodobniej doświadczą więcej problemów niż pojazdy w tym samym wieku z mniejszym przebiegiem. Dostosowujemy nasze analizy, aby zminimalizować różnice między modelami spowodowane różnym przebiegiem. Nasze dane są znormalizowane pod względem przebiegu poprzez podzielenie samochodów każdego modelu na grupy o wysokim, średnim i niskim przebiegu oraz zastosowanie techniki statystycznej bezpośredniej standaryzacji.
.
