Robustness (analyses) (Robustheit(-sanalysen))
Definition: Die Beständigkeit der Unterstützung für eine Hypothese bei Störungen der methodischen/analytischen Pipeline. Mit anderen Worten: Anwendung verschiedener Methoden/Analyseverfahren, um zu prüfen, ob dieselbe Schlussfolgerung unter verschiedenen analytischen Bedingungen unterstützt wird.
Verwandte Begriffe: Many Labs, Multiverse analysis, Sensitivity analyses, Specification Curve Analysis Alternative definition: “Robustness refers to the stability of experimental conclusions to variations in either baseline assumptions or experimental procedures. It is somewhat related to the concept of generalizability (also known as transportability), which refers to the persistence of an effect in settings different from and outside of an experimental framework [...] Whether a study design is similar enough to the original to be considered a replication, a “robustness test,” or some of many variations of pure replication that have been identified, particularly in the social sciences (for example, conceptual replication, pseudoreplication), is an unsettled question” (Goodman et al., 2016). Alternative definition: “Robustness refers to the stability of experimental conclusions to variations in either baseline assumptions or experimental procedures. It is somewhat related to the concept of generalizability (also known as transportability), which refers to the persistence of an effect in settings different from and outside of an experimental framework [...] Whether a study design is similar enough to the original to be considered a replication, a “robustness test,” or some of many variations of pure replication that have been identified, particularly in the social sciences (for example, conceptual replication, pseudoreplication), is an unsettled question” (Goodman et al., 2016). [GERMAN:] Robustheit bezieht sich auf die Stabilität der experimentellen Schlussfolgerungen gegenüber Variationen in den Grundannahmen oder experimentellen Verfahren. Sie ist in gewisser Weise mit dem Konzept der Verallgemeinerbarkeit (auch als Transportierbarkeit bezeichnet) verwandt, das sich auf die Persistenz eines Effekts in anderen Umgebungen und außerhalb eines experimentellen Rahmens bezieht [...] Ob ein Studiendesign dem Original ähnlich genug ist, um als Replikation, als "Robustheitstest" oder als eine der vielen Varianten der reinen Replikation zu gelten, die insbesondere in den Sozialwissenschaften identifiziert wurden (z. B. konzeptionelle Replikation, Pseudoreplikation), ist eine ungeklärte Frage (aus dem Engl. “Robustness refers to the stability of experimental conclusions to variations in either baseline assumptions or experimental procedures. It is somewhat related to the concept of generalizability (also known as transportability), which refers to the persistence of an effect in settings different from and outside of an experimental framework [...] Whether a study design is similar enough to the original to be considered a replication, a “robustness test,” or some of many variations of pure replication that have been identified, particularly in the social sciences (for example, conceptual replication, pseudoreplication), is an unsettled question”, Goodman et al., 2016). [GERMAN:] Robustheit bezieht sich auf die Stabilität der experimentellen Schlussfolgerungen gegenüber Variationen in den Grundannahmen oder experimentellen Verfahren. Sie ist in gewisser Weise mit dem Konzept der Verallgemeinerbarkeit (auch als Transportierbarkeit bezeichnet) verwandt, das sich auf die Persistenz eines Effekts in anderen Umgebungen und außerhalb eines experimentellen Rahmens bezieht [...] Ob ein Studiendesign dem Original ähnlich genug ist, um als Replikation, als "Robustheitstest" oder als eine der vielen Varianten der reinen Replikation zu gelten, die insbesondere in den Sozialwissenschaften identifiziert wurden (z. B. konzeptionelle Replikation, Pseudoreplikation), ist eine ungeklärte Frage (aus dem Engl. “Robustness refers to the stability of experimental conclusions to variations in either baseline assumptions or experimental procedures. It is somewhat related to the concept of generalizability (also known as transportability), which refers to the persistence of an effect in settings different from and outside of an experimental framework [...] Whether a study design is similar enough to the original to be considered a replication, a “robustness test,” or some of many variations of pure replication that have been identified, particularly in the social sciences (for example, conceptual replication, pseudoreplication), is an unsettled question” , Goodman et al., 2016).
Referenz: Goodman et al. (2016) (alternative); Nosek and Errington (2020)
Verfasst und Überprüft von: Tina Lonsdorf; Flávio Azevedo, Gilad Feldman, Adrien Fillon, Helena Hartmann, Timo Roettger