Onderzoek

Onderzoeksvraag

Ethisch informatiedesign

Methode

Theoretisch onderzoek · n/a · DOI 10.1257/aer.101.6.2590

Aannames

• Bayesiaanse overtuiging: Theoretisch model waarin een zender zich vastlegt op een informatiestructuur voordat een rationele ontvanger handelt.
• Zender en ontvanger: Partijen die een signaal ontwerpen en handelen nadat het is waargenomen.
• Informatiedesign: Bewuste en waarheidsgetrouwe structurering van welke informatie wanneer wordt getoond.
• Toezegging: Aanname dat het informatiebeleid vaststaat voordat de uitkomst bekend is.

Wat het bewijs ondersteunt

Orden waarheidsgetrouw bewijs, onzekerheid en uitsluitingen rond de beslissing; maak van Bayesiaanse overtuiging geen manipulatiescore.

Grenzen en overdraagbaarheid

Koppel claims aan bewijs, onzekerheid, alternatieven en eerlijke geschiktheid zonder overtuigingsscore. Een hulp voor planning en openheid, geen bewijs van gedragsverandering.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Een hulp voor planning en openheid, geen bewijs van gedragsverandering.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link

Onderzoeksvraag

Concurrentiepositionering

Methode

Theoretisch onderzoek · n/a · DOI 10.1093/restud/rdw052

Aannames

• Zender en ontvanger: Partijen die een signaal ontwerpen en handelen nadat het is waargenomen.
• Informatiedesign: Bewuste en waarheidsgetrouwe structurering van welke informatie wanneer wordt getoond.
• Toezegging: Aanname dat het informatiebeleid vaststaat voordat de uitkomst bekend is.

Wat het bewijs ondersteunt

Vergelijk echte alternatieven op één basis. Concurrentie kan openheid verhogen of verlagen en maakt waarheid niet automatisch.

Grenzen en overdraagbaarheid

Koppel claims aan bewijs, onzekerheid, alternatieven en eerlijke geschiktheid zonder overtuigingsscore. Een hulp voor planning en openheid, geen bewijs van gedragsverandering.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Een hulp voor planning en openheid, geen bewijs van gedragsverandering.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link

Onderzoeksvraag

Rationele aandacht en frictie

Methode

Gecontroleerd experiment · 12 · n=238 · DOI 10.1007/s10683-024-09843-z

Aannames

• Rationele onoplettendheid: Modellen die informatiewaarde afwegen tegen aandacht- of verwerkingskosten.

Wat het bewijs ondersteunt

Bekijk inzet, bekendheid, onzekerheid, omkeerbaarheid en informatiekosten. Het koper-verkoperexperiment geeft geen universele index.

Grenzen en overdraagbaarheid

Beoordeel de beslissing in context zonder minder opties altijd beter te noemen. De uitkomst bevat observaties en hypotheses, geen conversiescore.

Wat dit niet vaststelt

Er wordt geen universele score berekend · De uitkomst bevat observaties en hypotheses, geen conversiescore.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Open access CC BY 4.0

Onderzoeksvraag

Invloed en distributie

Methode

Algoritmisch onderzoek · Independent Cascade; Linear Threshold; (1−1/e−ε); DOI 10.1145/956750.956769

Aannames

• Invloedmaximalisatie: Seedknooppunten kiezen voor maximale verwachte verspreiding in een bepaald graafmodel.
• Submodulariteit: Eigenschap van afnemende opbrengst bij dezelfde seed in een steeds grotere set.

Wat het bewijs ondersteunt

Modelleer een echte graaf met parameters en onzekerheid. Greedy benadering onder submodulariteit is geen viraliteitsprognose.

Grenzen en overdraagbaarheid

Vergelijk greedy Monte Carlo met graad onder expliciete verspreidingsaannames. Bereik hangt af van graaf, parameters en model; geen viraliteitsprognose.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Bereik hangt af van graaf, parameters en model; geen viraliteitsprognose.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link

Onderzoeksvraag

Geloofwaardigheidsbewijs

Methode

Historisch gedragsbewijs · 1999 · n=1,410 · US/FI · 51 · DOI 10.1145/365024.365037

Aannames

Controleer zichtbare identiteit, auteurs, bronnen, beleid, bruikbaarheid en veiligheid zonder conversie te voorspellen.

Wat het bewijs ondersteunt

Toon identiteit, auteurs, bronnen, beleid, datums, beveiliging en toegankelijke bruikbaarheid. Historische perceptie is geen conversie- of rankingstudie.

Grenzen en overdraagbaarheid

Controleer zichtbare identiteit, auteurs, bronnen, beleid, bruikbaarheid en veiligheid zonder conversie te voorspellen. Automatisering bevestigt geen expertise, waarheid, volledige toegankelijkheid of menselijke perceptie.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Automatisering bevestigt geen expertise, waarheid, volledige toegankelijkheid of menselijke perceptie.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link

Onderzoeksvraag

Keuzearchitectuur

Methode

Meta-analyse · 63 · 50 · N=5,036 · d=.02 · 95% CI −.09… .12 · I²=68% · DOI 10.1086/651235

Aannames

• Keuzeoverbelasting: Contextuele mogelijkheid dat meer keuze nadelig is; geen universele regel.

Wat het bewijs ondersteunt

Categoriseer en toon stapsgewijs waar nuttig, maar test de context. De meta-analyse vond bijna nul gemiddeld effect en grote heterogeniteit.

Grenzen en overdraagbaarheid

Beoordeel de beslissing in context zonder minder opties altijd beter te noemen. De uitkomst bevat observaties en hypotheses, geen conversiescore.

Wat dit niet vaststelt

Er wordt geen universele score berekend · De uitkomst bevat observaties en hypotheses, geen conversiescore.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link

Onderzoeksvraag

Gecontroleerde experimenten

Methode

Operationele experimentrichtlijn · DOI 10.1007/s10618-008-0114-1

Aannames

• Overall Evaluation Criterion: Vooraf bepaalde primaire statistiek om een experiment als geheel te beoordelen.
• Guardrail-statistiek: Statistiek die een lancering kan blokkeren wanneer een beschermd resultaat verslechtert.

Wat het bewijs ondersteunt

Bepaal OEC, guardrails, power, toewijzing, uitrol en stopregels vooraf. Een grens-p-value kiest geen winnaar.

Grenzen en overdraagbaarheid

Definieert hypothese, eenheden, maatstaven, controles en transparante periodevergelijking. Zonder toewijzing en voldoende data biedt de uitkomst richting, geen bewijs van causaliteit.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Zonder toewijzing en voldoende data biedt de uitkomst richting, geen bewijs van causaliteit.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Uitgever noemt open access; hergebruiklicentie moet worden bevestigd

Onderzoeksvraag

Interpretatiefouten

Methode

Operationele experimentrichtlijn · 12 · Microsoft · DOI 10.1145/3097983.3098024

Aannames

• Sample Ratio Mismatch: Onwaarschijnlijk verschil tussen waargenomen en bedoelde toewijzing dat op uitvoeringsproblemen kan wijzen.
• Nieuwheids- en primacy-effecten: Tijdelijke reacties op nieuwheid of op leren en aanpassen door de tijd.
• Simpsons paradox: Omkering tussen totaal- en subgroeppatronen door andere gewichten of confounding.
• Wet van Twyman: Waarschuwing dat een buitengewoon verrassend resultaat extra controle verdient.

Wat het bewijs ondersteunt

Controleer SRM, ratio's, telemetrie, power, multipliciteit, segmenten, uitbijters, nieuwheid, funnel, Simpson en Twymans wet.

Grenzen en overdraagbaarheid

Definieert hypothese, eenheden, maatstaven, controles en transparante periodevergelijking. Zonder toewijzing en voldoende data biedt de uitkomst richting, geen bewijs van causaliteit.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Zonder toewijzing en voldoende data biedt de uitkomst richting, geen bewijs van causaliteit.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link

Onderzoeksvraag

Tevredenheid voorbij klikken

Methode

Historisch gedragsbewijs · ≈6,000 · 7,628 · n=218 · DOI 10.1145/2505515.2505682

Aannames

• Herformulering van zoekvraag: Vervolgvraag die woorden, bereik of termen verandert tijdens een zoektaak.

Wat het bewijs ondersteunt

Snelle vergelijkbare herformuleringen kunnen sessiehypotheses steunen. Klik is geen succes, stilte geen tevredenheid en GSC-aggregaten geen sessies.

Grenzen en overdraagbaarheid

Beoordeel anonieme herformuleringen per sessie als hypotheses; zoekteksten blijven lokaal. Een klik bewijst geen succes; geen vervolgquery bewijst geen tevredenheid.

Wat dit niet vaststelt

Er wordt geen universele score berekend · Een klik bewijst geen succes; geen vervolgquery bewijst geen tevredenheid.

Wat NAVINES bewust niet bouwde

Er wordt geen universele score berekend

Primaire bronnen

Auteursrecht uitgever; alleen samenvatting en officiële link