Een verband kan in je dataset ontstaan omdat je juist op een gemeenschappelijk gevolg hebt geselecteerd.
Berkson’s Paradox is een selectieprobleem dat vandaag vooral als collider bias wordt begrepen. Twee factoren die in de target population niet negatief samenhangen kunnen dat binnen een geselecteerde dataset wél doen omdat opname door beide wordt beïnvloed.
Een verband kan in je dataset ontstaan omdat je juist op een gemeenschappelijk gevolg hebt geselecteerd.
Berkson liet zien dat ziekenhuisdata schijnverbanden tussen aandoeningen kunnen opleveren wanneer hospitalisatie door beide aandoeningen wordt beïnvloed. Conditioneren op opname koppelt de oorzaken statistisch aan elkaar.
Collider bias is een gevestigd causaal-inferentiemechanisme. Of een variabele werkelijk collider is, hangt af van de causale structuur; selectie alleen is niet genoeg.
Selectie op een gemeenschappelijk gevolg kan een verband tussen zijn oorzaken creëren, verhullen of omkeren. De selectievariabele maakt deel uit van het proces waardoor de gegevens ontstaan.
Te onderzoeken AI-toepassing: een AI-systeem dat leert uit geselecteerde organisatiegegevens kan verbanden die door selectie zijn ontstaan ten onrechte veralgemenen. Het systeem neemt het selectiemechanisme over; het veroorzaakt dat mechanisme niet zelf.
Voorgestelde toets, nog niet uitgevoerd: Genereer data uit een doelpopulatie zonder verband, selecteer records via een collider en train modellen op die subset. Test op afzonderlijke, representatieve data uit de oorspronkelijke doelpopulatie en vergelijk met ontwerpen die rekening houden met het selectieproces.
Herleidbaarheid gaat ook over selectie: waarom is dit gegeven in de dataset opgenomen?
Een collider is een variabele die door beide onderzochte factoren wordt beïnvloed. Selectie op dit gemeenschappelijke gevolg kan een verband creëren; selectie alleen bewijst niet welk causaal model klopt.
Berkson (1946) — pp. 47–53; full text unavailable; not used as passage evidence
Cole et al. (2010), Illustrating bias due to conditioning on a collider — abstract; pp. 417–420
Het basismechanisme wordt toegelicht aan de hand van het auteursabstract van Cole et al. (2010). Berksons oorspronkelijke afleiding is hier niet op basis van de volledige tekst beoordeeld. De toepassing op AI is een onderzoekshypothese.
Help deze case beter maken
We bekijken je bijdrage voordat we de tekst of bronnen aanpassen.