Analytische Flexibilität [Analytic Flexibility]

Also available in: Arabic | English | Turkish
 

Definition: Analytische Flexibilität beschreibt eine Art der Freiheitsgrade von Forschenden (Simmons, Nelson, & Simonsohn, 2011), die sich speziell auf die große Anzahl von Entscheidungen bezieht, die während der Datenvorverarbeitung und Datenauswertung getroffen werden. “[T]he range of analysis outcomes across different acceptable analysis methods” (dt. [D]ie Bandbreite an Analyseergebnissen über verschiedene akzeptable Analysemethoden; Carp, 2012, p. 1). Analytische Flexibilität kann problematisch sein, da diese Variabilität bei Datenanalyse-Strategien zu einer Variabilität der Forschungsergebnisse führen kann, insbesondere wenn mehrere Strategien angewandt, aber nicht transparent veröffentlicht werden (Masur, 2021).

Verwandte Begriffe: Garden of forking paths, Multiverse analysis, Researcher degrees of freedom

Referenzen:

  • Breznau, N. (2021). I saw you in the crowd: Credibility, reproducibility, and meta-utility. PS: Political Science & Politics, 54(2), 309–313. https://doi.org/10.1017/S1049096520000980
  • Carp, J. (2012). On the plurality of (methodological) worlds: estimating the analytic flexibility of FMRI experiments. Frontiers in Neuroscience, 6, 149. https://doi.org/10.3389/fnins.2012.00149
  • Jones, A., Dr, J., Duckworth, & Christiansen, P. (2020). May I have your attention, please? Methodological and Analytical Flexibility in the Addiction Stroop. https://doi.org/10.31234/osf.io/ws8xp
  • Masur, P. K. (2020). Understanding the Effects of Analytical Choices on Finding the Privacy Paradox: A Specification Curve Analysis of Large-Scale Survey Data. Preprint. https://osf.io/m72gb/
  • Simmons, J. P., Nelson, L. D., & Simonsohn, U. (2011). False-positive psychology: Undisclosed flexibility in data collection and analysis allows presenting anything as significant. Psychological Science, 22(11), 1359–1366. https://doi.org/10.1177/0956797611417632

Verfasst und Überprüft von: Mariella Paul, Adrien Fillon, Bettina M. J . Kern, Adam Parker, Charlotte R. Pennington, Flávio Azevedo