Steekproefkader en steekproeffout

In onze eerste blogpost over steekproefoverwegingen, hebben we geschetst hoe steekproeven worden geselecteerd met behulp van kansberekening of niet-kansberekening. Hier gaan we in op de vraag waar steekproeven vandaan komen – het steekproefkader – en de veelgebruikte steekproefkaders die GeoPoll gebruikt in ons eigen onderzoek.

Wat is een steekproefkader?

Het steekproefkader is de specifieke bron van respondenten die wordt gebruikt om de steekproef uit te trekken. Dit kan een kaart zijn waarop specifieke gebieden zijn aangegeven, een lijst van geregistreerde kiezers, een telefoonboek, of een andere bron die specifiek bepaalt wie wel en wie niet in de steekproef wordt opgenomen. Het steekproefkader moet representatief zijn voor het steekproefuniversum, dat is de ruimere definitie van de steekproefsamenstelling. Als een onderzoeker bijvoorbeeld de attitudes van studenten aan een specifieke universiteit wil bestuderen, kunnen de definities er als volgt uitzien:

• Steekproefuniversum: Huidige studenten aan universiteit X
• Steekproefkader: Lijst van alle 10.000 momenteel ingeschreven studenten verstrekt door het toelatingsbureau
• Steekproef: 400 willekeurig geselecteerde studenten uit de lijst van ingeschreven studenten die deelnemen aan het onderzoek.

In een algemeen bevolkingsonderzoek kan het steekproefkader ‘alle huishoudens in land A’ zijn, waaruit een onderzoeker willekeurig kan selecteren welke huishoudens deelnemen aan een onderzoek.

Sampling Error or Non-Sampling Error

Wanneer we het hebben over een steekproefkader en de representativiteit ervan voor de totale onderzochte populatie, moeten we ook rekening houden met wie niet in het steekproefkader is opgenomen. Vaak zijn degenen die niet aan een onderzoek hebben deelgenomen net zo belangrijk als degenen die wel vertegenwoordigd waren, omdat zonder hen belangrijke items scheefgetrokken kunnen zijn of gemist kunnen worden. Er zijn een paar soorten steekproeffouten, ook wel niet-steekproeffouten genoemd:

• Dekkingsfout: Wanneer een steekproefkader de voor een studie vereiste populatie onvoldoende dekt, is er sprake van een dekkingsfout. Als bijvoorbeeld een nationale enquête per telefoon wordt gehouden en het steekproefkader uit een telefoonboek wordt gehaald, maar niet alle huishoudens in het telefoonboek zijn opgenomen. Bij een telefonische of internetenquête worden ook degenen uitgesloten die geen telefoon of internet gebruiken.
• Non-responsfout: Deze fout beschrijft degenen die werden gecontacteerd voor een enquête maar niet konden of niet wilden deelnemen. Het kan gaan om mensen die zijn geselecteerd voor een telefonisch of persoonlijk interview en de telefoon niet opnemen of de deur niet opendoen, of om mensen die wel antwoorden maar weigeren deel te nemen.
• Fout bij interviewer: Deze fout treedt op wanneer een interviewer ten onrechte een antwoord registreert voor een deelnemer aan een onderzoek. Dit is een vorm van interviewer bias die kan worden geïntroduceerd in telefonische en in-person interviews. Deze bias kan te wijten zijn aan de toon van de stem of aan andere kenmerken en kan de waarschijnlijkheid van een respondent om deel te nemen of zijn eigenlijke antwoorden beïnvloeden. GeoPoll heeft bijvoorbeeld vastgesteld dat vrouwen zich meer op hun gemak voelen bij het beantwoorden van vragen van vrouwelijke interviewers.
• Verwerkingsfout: Deze fout verwijst naar de technische verwerking van de datapunten van een onderzoek en fouten die optreden wanneer gegevens worden verzameld met behulp van een technologieplatform, of tijdens het invoeren van gegevens, evenals het coderen, opschonen en bewerken van gegevens.
• Responsfout: Deze fout beschrijft degenen die deelnemen aan een onderzoek die opzettelijk of per ongeluk onnauwkeurige antwoorden geven op de vragen van een onderzoek. Dit kan om verschillende redenen gebeuren, die te maken hebben met het begrip en het geheugen van de deelnemers aan het onderzoek. Daarnaast kunnen antwoordfouten ontstaan door sociale wenselijkheid, die in een onderzoek kan worden geïntroduceerd wanneer een deelnemer antwoordt op een manier waarvan hij denkt dat die acceptabeler en nauwkeuriger is voor zijn opvatting over de doelstelling van het onderzoek of op een manier die in overeenstemming is met de sociale normen. Sociale wenselijkheid kan in elke studie worden geïntroduceerd, maar is vaak duidelijk bij studies over gevoelige of taboe-onderwerpen voor een bepaalde samenleving.

De bovengenoemde fouten kunnen worden beperkt door een zorgvuldige selectie van het steekproefkader en het testen van verschillende methoden om niet-steekproeffouten te beperken. Voor enquêtes die door middel van interviews worden afgenomen, is een strenge opleiding van de enquêteurs nodig om de invloed van vertekeningen te helpen verminderen. Voor zelf uitgevoerde enquêtes is inzicht in de lokale context in de ontwerpfase belangrijk om vragen te kunnen formuleren die duidelijk te begrijpen zijn en door de betrokken populatie als geldige onderzoeksgebieden worden geaccepteerd.

GeoPoll Steekproefkaders

Het samenstellen van een steekproefkader voor GeoPoll-projecten hangt af van de behoeften van de klant, de projectspecificaties en andere factoren, waaronder de enquêtemodus. Hoewel steekproefkaders voor elk project uniek zijn, zijn er een paar veelgebruikte steekproefkaders die we gebruiken, die hieronder worden beschreven.

• Mobiele abonnees in een bepaald land: GeoPoll voert voornamelijk onderzoek uit via mobiele methodologieën, waaronder telefoongesprekken en sms-berichten. Daarom zijn de steekproefkaders voor onze onderzoeken vaak diegenen die toegang hebben tot een mobiel apparaat binnen elk land. GeoPoll bereikt mobiele abonnees op twee primaire manieren: Partnerships met mobiele netwerkoperatoren die ons in staat stellen te bellen of berichten te sturen naar hun opt-in abonnees, en Random Digit Dialing (RDD). Met behulp van een intelligent RDD-proces is GeoPoll in staat om willekeurig geldige telefoonnummers te genereren die overeenkomen met het formaat van de nummers in elk land.
• Volkstellingsgegevens: GeoPoll vertrouwt ook op volkstellingsgegevens en volkstellingsramingen, zowel om nationaal representatieve demografische uitsplitsingen te informeren als om steekproefkaders te maken bij het uitvoeren van in-person onderzoek. De beschikbaarheid van actuele volkstellingsgegevens varieert per land en vereist van een onderzoeker dat hij begrijpt welke informatie uit gerenommeerde bronnen beschikbaar is. Een bron die kan worden gebruikt om te kijken naar de lokale bureau van elk land van de statistieken en op de U.S. Census Bureau’s International Data Base.
• Begunstigden van de hulp: Bij het werken met internationale ontwikkelingsklanten is GeoPoll in staat om hulpbegunstigden te enquêteren als hun contactinformatie wordt gegeven. Dit vereist dat organisaties GeoPoll voorzien van een lijst met telefoonnummers van begunstigden of andere contactinformatie.

Het bepalen van het juiste steekproefkader en andere steekproefcriteria voor een bepaald project is een complex proces dat hier niet volledig kan worden weergegeven, maar we hopen dat we u enig inzicht hebben gegeven in hoe GeoPoll steekproeven benadert. Om meer te weten te komen over GeoPoll’s processen kunt u hier contact met ons opnemen.