Sono indagini scientifiche?
Ci sono generalmente due criteri che gli scienziati sociali usano per valutare la qualità di un’indagine: la sua validità e la sua affidabilità. La validità si riferisce al fatto che il sondaggio misura effettivamente ciò che dice di fare. L’affidabilità si riferisce al fatto che le informazioni generate dal sondaggio potrebbero essere ripetute se il sondaggio dovesse essere condotto di nuovo.
Abbiamo forti prove che i nostri sondaggi sono sia validi che affidabili. Le domande dei sondaggi sono progettate in modo professionale dagli esperti del dipartimento di sondaggi di CR, in consultazione con i nostri ingegneri automobilistici e statistici. I membri del nostro team di indagine hanno lauree avanzate e molti anni di esperienza nella conduzione di tutti i tipi di indagini sui consumatori. I sondaggi utilizzano una tecnica di risposta assistita che conduce gli intervistati attraverso voci specifiche ben definite e dà ad ogni intervistato la stessa prospettiva nel rispondere alle domande. I dati che riportiamo corrispondono bene ad altre fonti di informazioni sulle riparazioni e sull’affidabilità disponibili sul mercato. Di anno in anno, i rapporti dei nostri membri sulle loro esperienze di problemi sono abbastanza coerenti; quando c’è una differenza su un particolare modello, possiamo spesso attribuirla a problemi noti con un particolare componente di un’auto.
Le indagini sono basate su un campione rappresentativo?
Un campione è considerato rappresentativo di una popolazione se le caratteristiche rilevanti della popolazione sono riflesse nel campione. Quindi, considerare la popolazione di interesse è fondamentale per valutare la qualità di un campione. Il nostro campione del sondaggio è tratto dalla popolazione dei membri di Consumer Reports. Mentre tutti i membri sono invitati a partecipare ai sondaggi, la partecipazione è volontaria e c’è sempre la possibilità che coloro che rispondono siano unici in qualche modo particolare. Per esempio, i membri a volte si sono chiesti se coloro che rispondono sono quelli che hanno un reclamo da fare sulla loro auto.
Una ragione di questo è che le nostre indagini sono indagini omnibus, chiedendo ai membri non solo le loro auto, ma circa una dozzina di altri prodotti e servizi principali che hanno usato (come l’assicurazione, servizi via cavo, piani di telefonia mobile e compagnie aeree). Molti membri restituiscono i sondaggi riferendo che non hanno avuto alcun problema con le loro auto nell’ultimo anno. Questo è vero per tutte le marche e modelli di auto. Quindi, i proprietari che si lamentano delle loro auto non sono gli unici che restituiscono i sondaggi.
Ogni sondaggio ha una sorta di struttura di campionamento che limita le persone intervistate. Noi scegliamo i nostri membri come quadro di campionamento. In media, i membri di CR tendono ad essere più istruiti e benestanti della popolazione generale. Con la crescita di Consumer Reports online, negli ultimi anni è stata intervistata una gamma demografica più ampia di individui. Tuttavia, le nostre domande sull’affidabilità non chiedono agli intervistati i loro atteggiamenti o le loro opinioni sull’affidabilità delle loro auto, dove ci si potrebbe aspettare che gruppi diversi di individui abbiano prospettive diverse. Invece, chiediamo informazioni concrete sul verificarsi di problemi specificamente definiti; questi tipi di domande sono meno sensibili alla natura delle caratteristiche del campione stesso.
Inoltre, i nostri risultati corrispondono bene ad altre fonti di informazioni sull’affidabilità disponibili sul mercato.
I risultati del vostro sondaggio non corrispondono alla mia esperienza. I vostri sondaggi sono sbagliati?
Anche nei modelli più inaffidabili, alcuni proprietari di auto individuali sono fortunati e hanno pochi o nessun problema durante i 12 mesi coperti dal sondaggio. Per esempio, in uno dei modelli peggiori nelle nostre recenti indagini, circa il 55% dei proprietari ha riportato problemi in almeno un’area di disturbo nei 12 mesi precedenti; naturalmente, questo significa che circa il 45% dei proprietari non ha riportato alcun problema. Il vostro vicino o amico potrebbe essere uno di quei fortunati proprietari. Naturalmente, il contrario può accadere come bene anche in un modello che tende ad essere abbastanza affidabile, c’è un occasionale “limone.”
Siccome il numero medio di problemi è piccolo per la maggior parte dei modelli, è Consumer Reports Overemphasizing differenze che possono non essere importanti?
Al di là della significatività statistica, crediamo che queste differenze sono anche significative per gli acquirenti di auto. Pensiamo che gli acquirenti di auto dovrebbero aspettarsi che una nuova auto sia completamente priva di problemi nei suoi primi mesi o anni di servizio. Mentre la differenza tra due valutazioni può essere piccola, un modello di diversi punti di problemi meno che perfetti in un’auto nuova di zecca dovrebbe essere motivo di preoccupazione e non è di buon auspicio per l’affidabilità a lungo termine di un modello. Non abbiamo visto molti modelli nella nostra indagine che sono completamente privi di problemi. La Mazda MX-5 Miata del 2019 ha pochissimi problemi ed è quasi 40 volte meglio della Volkswagen GTI, che ha i più alti problemi tra i modelli 2019. Queste differenze tra i modelli sono importanti per gli acquirenti di auto da considerare nella scelta di un’auto. Presentiamo questi punteggi per i punti problematici principalmente per consentire ai consumatori di confrontare l’incidenza relativa dei problemi tra i modelli. Anche se non ci sono garanzie, è possibile migliorare le probabilità di acquistare un’auto affidabile se si sceglie un modello che ha avuto un tasso inferiore di problemi in passato.
Alcune persone mantengono le loro auto in modo diverso dagli altri. Questo come influisce sulle valutazioni?
La più grande area di preoccupazione crescente nelle auto di ultimo modello è l’elettronica di bordo: infotainment, intrattenimento, accoppiamento del telefono e sistemi di navigazione. Altre aree problematiche includono il sistema climatico (compressore A/C, condensatore, sistema di riscaldamento), e l’equipaggiamento elettrico (modulo di controllo del corpo, indicatori e spie). La manutenzione non influisce su questi elementi. I problemi in quelle aree potrebbero più probabilmente riflettere il design o la qualità intrinseca.
Come tenete conto delle differenze di chilometraggio?
I veicoli con un chilometraggio più alto probabilmente avranno più problemi dei veicoli della stessa età con un chilometraggio inferiore. Regoliamo le nostre analisi per minimizzare le differenze tra i modelli dovute al variare del chilometraggio. I nostri dati sono standardizzati per chilometraggio dividendo le auto di ogni modello in gruppi di alto, medio e basso chilometraggio, e utilizzando la tecnica statistica di standardizzazione diretta.
