Výskum

Výskumná otázka

Etický dizajn informácií

Metóda

Teoretický výskum · n/a · DOI 10.1257/aer.101.6.2590

Predpoklady

• Bayesovské presviedčanie: Teoretický model, kde sa odosielateľ zaviaže k informačnej štruktúre pred konaním racionálneho príjemcu.
• Odosielateľ a príjemca: Strany, ktoré navrhujú signál a konajú po jeho pozorovaní.
• Dizajn informácií: Zámerné a pravdivé usporiadanie toho, čo a kedy sa zverejní.
• Záväzok: Predpoklad, že informačná politika je pevná skôr, než je známy výsledok.

Čo dôkazy podporujú

Usporiadajte pravdivé dôkazy, neistotu a nevhodnosť okolo rozhodnutia; nevytvárajte manipulačné skóre z bayesovského presviedčania.

Limity a prenosnosť

Prepojte tvrdenia s dôkazmi, neistotou, alternatívami a poctivou vhodnosťou bez skóre presviedčania. Pomáha plánovať a zverejňovať; nedokazuje zmenu správania.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Pomáha plánovať a zverejňovať; nedokazuje zmenu správania.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz

Výskumná otázka

Konkurenčné pozicionovanie

Metóda

Teoretický výskum · n/a · DOI 10.1093/restud/rdw052

Predpoklady

• Odosielateľ a príjemca: Strany, ktoré navrhujú signál a konajú po jeho pozorovaní.
• Dizajn informácií: Zámerné a pravdivé usporiadanie toho, čo a kedy sa zverejní.
• Záväzok: Predpoklad, že informačná politika je pevná skôr, než je známy výsledok.

Čo dôkazy podporujú

Porovnávajte skutočné alternatívy na spoločnom základe. Konkurencia môže zverejnenie zvýšiť alebo znížiť a nevytvára automaticky pravdu.

Limity a prenosnosť

Prepojte tvrdenia s dôkazmi, neistotou, alternatívami a poctivou vhodnosťou bez skóre presviedčania. Pomáha plánovať a zverejňovať; nedokazuje zmenu správania.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Pomáha plánovať a zverejňovať; nedokazuje zmenu správania.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz

Výskumná otázka

Racionálna pozornosť a trenie

Metóda

Kontrolovaný experiment · 12 · n=238 · DOI 10.1007/s10683-024-09843-z

Predpoklady

• Racionálna nepozornosť: Modely vážiace hodnotu informácie proti cene pozornosti alebo spracovania.

Čo dôkazy podporujú

Posúďte stávky, známosť, neistotu, vratnosť a cenu informácií. Experiment kupujúci-predávajúci nedáva univerzálny index.

Limity a prenosnosť

Posúďte rozhodnutie v kontexte bez predpokladu, že menej možností je vždy lepšie. Výstup sú pozorovania a hypotézy, nie skóre konverzie.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Výstup sú pozorovania a hypotézy, nie skóre konverzie.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Otvorený prístup CC BY 4.0

Výskumná otázka

Vplyv a distribúcia

Metóda

Algoritmický výskum · Independent Cascade; Linear Threshold; (1−1/e−ε); DOI 10.1145/956750.956769

Predpoklady

• Maximalizácia vplyvu: Výber počiatočných uzlov na maximalizáciu očakávaného šírenia v danom grafe a modeli.
• Submodularita: Vlastnosť klesajúceho prínosu pri pridaní rovnakého semena do väčšej množiny.

Čo dôkazy podporujú

Modelujte reálny graf s parametrami a neistotou. Greedy aproximácia pri submodularite nie je prognóza virality.

Limity a prenosnosť

Porovnáva greedy Monte Carlo so základom stupňa pri výslovných predpokladoch šírenia. Dosah závisí od grafu, parametrov a modelu; nejde o prognózu virality.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Dosah závisí od grafu, parametrov a modelu; nejde o prognózu virality.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz

Výskumná otázka

Dôkazy dôveryhodnosti

Metóda

Historický behaviorálny dôkaz · 1999 · n=1,410 · US/FI · 51 · DOI 10.1145/365024.365037

Predpoklady

Skontrolujte viditeľnú identitu, autorov, zdroje, zásady, použiteľnosť a bezpečnosť bez prognózy konverzie.

Čo dôkazy podporujú

Ukážte identitu, autorov, zdroje, zásady, dátumy, bezpečnosť a prístupnosť. Historické vnímanie nie je štúdia konverzie ani poradia.

Limity a prenosnosť

Skontrolujte viditeľnú identitu, autorov, zdroje, zásady, použiteľnosť a bezpečnosť bez prognózy konverzie. Automatika nepotvrdzuje odbornosť, pravdivosť, úplnú prístupnosť ani ľudské vnímanie.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Automatika nepotvrdzuje odbornosť, pravdivosť, úplnú prístupnosť ani ľudské vnímanie.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz

Výskumná otázka

Architektúra voľby

Metóda

Meta-analýza · 63 · 50 · N=5,036 · d=.02 · 95% CI −.09… .12 · I²=68% · DOI 10.1086/651235

Predpoklady

• Preťaženie výberom: Kontextová možnosť, že viac volieb uškodí rozhodnutiu; nie všeobecné pravidlo.

Čo dôkazy podporujú

Kategorizujte a odhaľujte postupne, keď to pomáha, no testujte kontext. Priemer meta-analýzy bol takmer nulový s veľkou heterogenitou.

Limity a prenosnosť

Posúďte rozhodnutie v kontexte bez predpokladu, že menej možností je vždy lepšie. Výstup sú pozorovania a hypotézy, nie skóre konverzie.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Výstup sú pozorovania a hypotézy, nie skóre konverzie.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz

Výskumná otázka

Kontrolované experimenty

Metóda

Prevádzkové usmernenie experimentov · DOI 10.1007/s10618-008-0114-1

Predpoklady

• Celkové hodnotiace kritérium: Vopred určená hlavná metrika na posúdenie experimentu ako celku.
• Ochranná metrika: Metrika, ktorá môže zastaviť nasadenie pri zhoršení chráneného výsledku.

Čo dôkazy podporujú

Definujte OEC, ochranné metriky, silu, priradenie, nasadenie a zastavenie pred výsledkami. Hraničný p-value neurčuje víťaza.

Limity a prenosnosť

Zdokumentujte hypotézu, hlavnú metriku, vzorku a pozorovaný efekt transparentným výpočtom. Štatistický rozdiel nie je obchodná hodnota a porovnanie pred–po nedokazuje príčinu.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Štatistický rozdiel nie je obchodná hodnota a porovnanie pred–po nedokazuje príčinu.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Vydavateľ uvádza otvorený prístup; licenciu na opätovné použitie treba potvrdiť

Výskumná otázka

Chyby interpretácie

Metóda

Prevádzkové usmernenie experimentov · 12 · Microsoft · DOI 10.1145/3097983.3098024

Predpoklady

• Nesúlad pomeru vzorky: Štatisticky nepravdepodobný rozdiel medzi pozorovaným a plánovaným priradením.
• Účinky novosti a primacy: Dočasné reakcie na novosť alebo na učenie a adaptáciu v čase.
• Simpsonov paradox: Obrat medzi celkovým a podskupinovým vzorom pre rozdielne váhy alebo skreslenie.
• Twymanov zákon: Varovanie, že mimoriadne prekvapivý výsledok potrebuje dodatočnú kontrolu.

Čo dôkazy podporujú

Skontrolujte SRM, pomery, telemetriu, silu, násobnosť, segmenty, odľahlé hodnoty, novosť, lievik, Simpsona a Twymanov zákon.

Limity a prenosnosť

Zdokumentujte hypotézu, hlavnú metriku, vzorku a pozorovaný efekt transparentným výpočtom. Štatistický rozdiel nie je obchodná hodnota a porovnanie pred–po nedokazuje príčinu.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Štatistický rozdiel nie je obchodná hodnota a porovnanie pred–po nedokazuje príčinu.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz

Výskumná otázka

Spokojnosť za kliknutiami

Metóda

Historický behaviorálny dôkaz · ≈6,000 · 7,628 · n=218 · DOI 10.1145/2505515.2505682

Predpoklady

• Preformulovanie dotazu: Následný dotaz, ktorý počas vyhľadávacej úlohy mení slová, rozsah alebo pojmy.

Čo dôkazy podporujú

Rýchle podobné preformulovania môžu podporiť hypotézu relácie. Klik nie je úspech, ticho nie je spokojnosť, agregát GSC nie je relácia.

Limity a prenosnosť

Skúma anonymné preformulovania relácií ako hypotézy a ponecháva dotazy lokálne. Kliknutie nedokazuje úspech a neprítomnosť ďalšieho dotazu nedokazuje spokojnosť.

Čo to nedokazuje

Univerzálne skóre sa nepočíta · Kliknutie nedokazuje úspech a neprítomnosť ďalšieho dotazu nedokazuje spokojnosť.

Čo NAVINES zámerne nevytvoril

Univerzálne skóre sa nepočíta

Primárne zdroje

Autorské právo vydavateľa; iba súhrn a oficiálny odkaz