Publikační zkreslení vyplývá z tendence výzkumných pracovníků, redaktorů a farmaceutických společností zpracovávat zprávy o experimentálních výsledcích, které jsou pozitivní (tj. vykazují významný nález), jinak než výsledky, které jsou negativní (tj. podporují nulovou hypotézu) nebo neprůkazné.
Ve snaze snížit tento problém některé prominentní lékařské časopisy vyžadují registraci studie před jejím zahájením, aby nepříznivé výsledky nebyly odepřeny zveřejnění.
Kladné výsledky zkreslení, typ publikace zkreslení, nastává, když autoři s větší pravděpodobností předloží, nebo editory přijmout, pozitivní než nulové (negativní nebo neprůkazné) výsledky. Související termín, „soubor šuplík problém“, odkazuje na tendenci pro negativní nebo neprůkazné výsledky, aby zůstaly nezveřejněny jejich autory.
Ke zkreslení hlášení výsledků dochází, když je v rámci studie měřeno několik výsledků, které jsou však hlášeny selektivně v závislosti na síle a směru těchto výsledků.
Související termín, který byl vytvořen, je HARKing (Hypotéza poté, co jsou známy výsledky).
Efekt šuplíku se soubory, neboli problém šuplíku se soubory, spočívá v tom, že mnoho studií v dané oblasti výzkumu může být provedeno, ale nikdy nahlášeno, a ty, které nahlášeny nejsou, mohou v průměru vykazovat jiné výsledky než ty, které jsou nahlášeny. Extrémní scénář je takový, že daná null hypotéza zájmu je ve skutečnosti pravdivá, tj. zkoumaná asociace neexistuje, ale 5% studií, které náhodou vykazují statisticky významný výsledek, je zveřejněno, zatímco zbývajících 95%, kde null hypotéza nebyla odmítnuta, chřadne v šuplících se soubory výzkumníků. I malý počet studií ztracených „v šuplíku se soubory“ může mít za následek významné zkreslení.
Termín zavedl psycholog Robert Rosenthal v roce 1979.
Ti, kteří provádějí metaanalýzy a systematické přezkumy, musí vzít v úvahu publikační zkreslení v metodách, které používají pro identifikaci studií, které mají být zahrnuty do přezkumu. Kromě jiných technik pro minimalizaci účinků publikační zkreslení mohou potřebovat provést důkladné vyhledávání nepublikovaných studií a použít takové analytické nástroje, jako je Beggův nálevkový graf nebo Eggerův graf pro kvantifikaci potenciální přítomnosti publikační zkreslení. Testy publikační zkreslení se opírají o základní teorii, že malé studie s malou velikostí vzorku (a velkým rozptylem) by byly náchylnější ke publikační zkreslenosti, zatímco velké studie by byly méně pravděpodobné, že uniknou veřejnosti a byly by s větší pravděpodobností publikovány bez ohledu na význam zjištění. Když jsou tedy celkové odhady vyneseny proti rozptylu (velikost vzorku), obvykle se vytvoří symetrický nálevka bez publikační zkreslenosti, zatímco zkreslený asymetrický nálevka je pozorována za přítomnosti potenciální publikační zkreslenosti.
Rozšíření nálevkového grafu, metoda „Trim and Fill“ byla také navržena jako metoda k odvození existence nepublikovaných skrytých studií, jak bylo zjištěno z nálevkového grafu, a následně opravit meta-analýzu imputací přítomnosti chybějících studií k získání nezkresleného souhrnného odhadu.
Příklady publikačního zkreslení
Jedna studie srovnávala čínské a nečínské studie asociací genových onemocnění a zjistila, že „čínské studie obecně uváděly silnější asociaci genových onemocnění a častěji statisticky významný výsledek“.
Jednou z možných interpretací tohoto výsledku je selektivní publikace (publikační zkreslení).
Podle výzkumníka Johna Ioannidise budou negativní práce s největší pravděpodobností potlačeny:
Ioannidis dále tvrdí, že „proklamované výzkumné poznatky mohou být často jednoduše přesnými měřítky převládajícího zkreslení“.
V září 2004 redaktoři několika významných lékařských časopisů (včetně New England Journal of Medicine, The Lancet, Annals of Internal Medicine a JAMA) oznámili, že již nebudou zveřejňovat výsledky výzkumu léčiv sponzorovaných farmaceutickými společnostmi, pokud tento výzkum nebude od začátku registrován ve veřejné databázi.
Tímto způsobem by negativní výsledky již neměly být schopny zmizet[pochybné – viz diskusní stránka]. Některé časopisy, např. Trials, dále podporují zveřejňování protokolů studií ve svých časopisech.