Topic outline

  • Tout replier Tout déplier

    Dieser Kurs soll dich bei deinem empirischen Forschungsvorhaben vertieft unterstützen und ist auf die Lehre in den Psychologiestudiengängen an der Universität Kassel abgestimmt. Bei Fragen steht dir die (studentische) Methodenberatung des Fachgebiets Psychologische Forschungsmethoden zur Verfügung. Grundlegende Kenntnisse der Verfahren werden vorausgesetzt, wir geben aber auch wiederholende und ergänzende Literaturhinweise sowie kommentierte Code-Beispiele in R.

    Hinweise zur Navigation:
    • Klick einfach auf die Überschriften unter "Übersicht über die Themen", zu denen du dich informieren willst. Du kannst auch in der Seitenleiste links navigieren. 
    • Nach Begriffen suchen kannst du, indem du alles ausklappst (rechts oben) und mit Strg + F (Windows) oder cmd + F (Mac) nach Begriffen suchst.
    • Öffne Textseiten in neuem Tab über Rechtsklick + Öffnen in neuem Tab, um einfach und ohne Laden wieder zurückzunavigieren.

    Wir haben auch eine Checkliste für Empras und Abschlussarbeiten und für die Präregistrierung erstellt.

  • Übersicht über Themen und Entscheidungsbaum

  • Präregistrierung


    •  
      Was ist das?
      Vor jedem empirischen Forschungsvorhaben sollte eine Präregistrierung der zu testenden Hypothesen und des Versuchsdesigns sowie des Analyseplans vorgenommen werden. Nur dann kann das Forschungsvorhaben als konfirmatorisch gelten. Das ist insbesondere aus einer Open Science Perspektive heraus wichtig. 
      Außerdem kann es sehr hilfreich sein, schon bei der Planung die finale Datenanalyse im Kopf zu behalten. So können Fehler schon direkt im Versuchsplan vermieden werden, die sonst erst später bei der Datenanalyse auffallen würden.

      Hier findest du nützliche Onlinetools und Hinweise zur Präregistrierung.

    • Hinweise

      • Was ist konfirmatorische Forschung?

        Forschung ist dann konfirmatorisch, wenn sie im Vorhinein festgelegte Hypothesen mit festgelegten Mitteln testet. Das ist wichtig, um sicherzugehen, dass Forscher*innen nicht selbst Verzerrungen wie dem Confirmation Bias oder Hindsight Bias unterliegen oder ihre Daten für mehrere Tests benutzen, die im Vorhinein nicht geplant waren. Deswegen werden Forschungsprojekte präregistriert, um feststellen zu können wie das Experiment oder die Analyse ursprünglich geplant war.

        Trotzdem können explorative Analysen durchgeführt werden, um z.B. Hypothesen zu bilden. Das sollte als explorativ gekennzeichnet und im Idealfall an einem gesonderten Datensatz überprüft werden. Auch explorative Analysen können präregistriert werden, im Normalfall dann allgemeiner gehalten und ohne konkrete Hypothesen.

    • Onlineangebote zur konkreten Umsetzung der Präregistrierung

    • FAQ zur Präregistrierung

    • (Weiterführende) Literatur

      • Weshalb Präregistrierungen sehr nützlich sein können
        Wagenmakers, E.-J., Wetzels, R., Borsboom, D., van der Maas, H. L. J., & Kievit, R. A. (2012). An Agenda for Purely Confirmatory Research. Perspectives on Psychological Science, 7(6), 632-638. https://doi.org/10.1177/1745691612463078

  • Kausalität

    •  

      Was ist das?
      Ob du kausale Schlüsse aus deinem Modell ziehen kannst, kommt insbesondere auf das Versuchsdesign sowie inhaltliche Überlegungen an. Es ist sinnvoll, sich hierzu schon bei der Planung Gedanken zu machen.

    • Hinweise

    • (Weiterführende) Literatur

      • Methoden, um über kausale Prozesse nachzudenken
        Rohrer, J. M. (2018). Thinking Clearly About Correlations and Causation: Graphical Causal Models for Observational Data. Advances in Methods and Practices in Psychological Science, 1(1), 27–42. https://doi.org/10.1177/2515245917745629

        Was ist die überhaupt der interessierende Effekt?
        Lundberg, I. Johnson, R., & Stewart, B. M. (2021). What Is Your Estimand? Defining the Target Quantity Connects Statistical Evidence to Theory. American Sociological Review, 86(3), 532-565. https://doi.org/10.1177/00031224211004187

        Statistical Control Requires Causal Justification
        Wysocki, A. C., Lawson, K. M., & Rhemtulla, M. (2022). Statistical Control Requires Causal Justification. Advances in Methods and Practices in Psychological Science, 5(2), 251524592210958. https://doi.org/10.1177/25152459221095823

        Instrumental Variables
        Maydeu-Olivares, A., Shi, D., & Fairchild, A. J. (2020). Estimating causal effects in linear regression models with observational data: The instrumental variables regression model. Psychological Methods, 25(2), 243–258. https://doi.org/10.1037/met0000226

        Vor- und Nachteile von ANCOVA vs Change-Score Ansätzen
        Lüdtke, O., & Robitzsch, A. (2023). ANCOVA versus Change Score for the Analysis of Two-Wave Data. The Journal of Experimental Education, 1–33. https://doi.org/10.1080/00220973.2023.2246187

        Versuchsplanerische Methoden
        Gollwitzer, M., Pohl, S., & Jäger, R. S. (2023). Evaluation kompakt: Mit Online-Material (3. Auflage). Julius Beltz GmbH & Co. KG.


  • Poweranalyse


    •  
      Was? Welche Frage wird beantwortet?
      Wie groß muss meine Stichprobe sein, damit ich eine realistische Chance habe, einen Effekt einer bestimmten Größe zu finden, sofern dieser wirklich in der Population vorliegt?

      Wann?
      Eine Poweranalyse ist nur vor der Datenanalyse zur Planung der Erhebung sinnvoll, niemals danach (post-hoc) auf Basis des beobachteten Effekts (siehe z.B. Hoening & Heisey, 2001).

    • Hinweise zur konkreten Umsetzung

    • Codebeispiele in R für ANOVA (superpower) und verschiedene Designs, z.B. LMMs, logistische Regression (mlpwr)

    • FAQ zu Poweranalyse

    • (Weiterführende) Literatur

      • Standardwerk zur Poweranalyse mit Empfehlung Power > 0.80
        Cohen, J. (1988). Statistical Power Analysis for the Behavioral Sciences (2nd ed.). Routledge. https://doi.org/10.4324/9780203771587

        Effect Size Sense and Nonsense mit Empfehlungen
        Funder D. C., Ozer D. J. (2019). Evaluating Effect Size in Psychological Research: Sense and Nonsense. Advances in Methods and Practices in Psychological Science, 2(2), 156-168. https://doi.org/10.1177/2515245919847202

        Bias durch Power basierend auf Pilotstudien
        Albers, C., & Lakens, D. (2018). When power analyses based on pilot data are biased: Inaccurate effect size estimators and follow-up bias. Journal of Experimental Social Psychology, 74, 187–195. https://doi.org/10.1016/j.jesp.2017.09.004

        Power bei Mediation
        Rudolph, K. E., Goin, D. E., & Stuart, E. A. (2020). The Peril of Power: A Tutorial on Using Simulation to Better Understand When and How We Can Estimate Mediating Effects. American Journal of Epidemiology, 189(12), 1559–1567. https://doi.org/10.1093/aje/kwaa083

        Fritz, M. S., & MacKinnon, D. P. (2007). Required Sample Size to Detect the Mediated Effect. Psychological Science, 18(3), 233–239. https://doi.org/10.1111/j.1467-9280.2007.01882.x

        Power bei Korrelationen
        Schönbrodt, F. D., & Perugini, M. (2013). At what sample size do correlations stabilize? Journal of Research in Personality, 47(5), 609–612. https://doi.org/10.1016/j.jrp.2013.05.009

        Post-Hoc Power ist nicht sinnvoll
        Hoenig, J. M., & Heisey, D. M. (2001). The Abuse of Power: The Pervasive Fallacy of Power Calculations for Data Analysis. The American Statistician, 55(1), 19–24. https://www.jstor.org/stable/2685525

        A tutorial on using the paired t test for power calculations in repeated measures ANOVA with interactions. Behavior Research Methods
        Langenberg, B., Janczyk, M., Koob, V., Kliegl, R., & Mayer, A. (2022). A tutorial on using the paired t test for power calculations in repeated measures ANOVA with interactions. Behavior Research Methods, 55(5), 2467–2484. https://doi.org/10.3758/s13428-022-01902-8

        Not Empowering, Just Misleading
        Althouse, A. D. (2021). Post Hoc Power: Not Empowering, Just Misleading. Journal of Surgical Research, 259, A3–A6. https://doi.org/10.1016/j.jss.2019.10.049

  • Datenaufbereitung


    • Was? Welchen Zweck erfüllt die Datenaufbereitung?
      Wie bekomme ich meine erhobenen Daten in eine Form, die es mir erlaubt (inferenz-)statistische Verfahren anzuwenden?

      Wann? Welche Art von Umformungen werden typischerweise gemacht?

      • Möglicherweise möchtest du nur ein Subset des erhobenen Datensatzes auswerten. Wir zeigen dir, wie du bestimmte Variablen oder auch bestimmte Werte nach Erfüllung von Bedingungen auswählen kannst. Wir zeigen dir auch, wie du fehlende Werte in deinen Daten finden und ggf. ausschließen kannst.
      • Für unterschiedliche Analysen benötigt R die Daten in unterschiedlicher Anordnung (z.B. häufig long format für ANOVA vs. wide format für Regressionen). Wir zeigen dir, wie du zwischen unterschiedlichen Anordnungen der Daten wechseln kannst.
      • In Analysen, Tabellen oder Abbildungen werden häufig statistische Kennwerte (z.B. Mittelwerte & Standardabweichungen) abgebildet. Wir zeigen dir, wie du statistische Kennwerte für unterschiedliche Gruppen (Kombinationen von Variablenausprägungen) einfach berechnen kannst.

    • Hinweise zur konkreten Umsetzung

      • How to Datenaufbereitung

        Schritte der Datenaufbereitung
        • Daten einlesen und explorieren
        • Kodierung fehlender Werte (z.B. Sind alle fehlenden Werte richtig als NA kodiert?)
        • Items rekodieren (z.B. invertierte Items, Dummykodierung einführen, ...)
        • Daten aggregieren & statistische Kennwerte berechnen

        Good Practices
        • Du solltest alle Schritte deiner Datenaufbereitung in deinem R-Script dokumentieren (syntaxbasiert arbeiten). Dudurch werden alle Schritte der Datenaufbereitung nachvollziehbar und reproduzierbar.
        • Automatisierte Rekodierung vorziehen, wenn möglich (Human coding ist viel fehleranfälliger)
        • Speichere deinen finalen Datensatz, sodass du die Datenaufbereitung nicht jedes Mal erneut durchlaufen musst.
        • Achte darauf, deine Original-Daten nicht aus Versehen zu verändern. Rohdaten nicht überschreiben, sondern separat speichern
        • Lösche dein Environment und lasse das komplette R-Skript durchlaufen. So fallen dir ggf. letzte Fehler auf, die du dann korrigieren solltest.

    • FAQ

    • (Weiterführende) Literatur

      • Die aktuellsten Versionen von Cheat Sheets findest du außerdem auf der posit-Homepage (ehemals RStudio).

      • Online-Tool zur Visualisierung von Datentransformationen im tidyverse-Framework

  • Non-Parametrische Tests und Tests für Ordinalskalierte Variablen (Bachelor)


    •  
       
      Was? Welche Frage beantwortet das Modell?
      Die Fragestellungen unterscheiden sich nicht grundsätzlich von denen bei parametrischen Verfahren - die Interpretationen jedoch.
       
      Wann? Welche Art von Daten werden damit analysiert?
       

  • t-Tests, ANOVA und Voraussetzungen (Bachelor)


    •  
       
      Was? Welche Frage beantwortet das Modell?
      Gibt es Gruppenunterschiede/ Unterschiede zwischen Experimentalbedingungen/ Gruppen auf einem Kriterium?

      Wann? Welche Art von Daten werden damit analysiert?

       

    • Allgemeines

      • ANOVA Vokabeln Page

        ↳ Hier erfährst du etwas zu abhängigen und unabhängigen Faktoren, Faktorstufen, Balanciertheit und der generellen Benennung von ANOVA Designs. 

      • Überblicksbuch zu Gruppendesigns
        Maxwell, S. E., Delaney, H. D., & Kelley, K. (2018). Designing Experiments and Analyzing Data: A Model Comparison Perspective (3. Aufl.). Routledge. Verfügbar über die Unibibliothek.

        Beispielpaper wie man ANOVA-Ergebnisse berichten kann
        Pfeuffer, C. U., Kiesel, A., & Huestegge, L. (2016). A Look into the Future: Spontaneous anticipatory saccades reflect processes of anticipatory action control. Journal of Experimental Psychology: General, 145, 1530-1547. https://doi.org/10.1037/xge0000224

    • Hinweise zur konkreten Umsetzung

    • Codebeispiele in R zur ANOVA, t-Tests und Voraussetzungsprüfung

    • FAQ zur t-Test und ANOVA

    • (Weiterführende) Literatur

      • Empfehlungen zu Effektstärken in der ANOVA

        Lakens, D. (2013). Calculating and reporting effect sizes to facilitate cumulative science: A practical primer for t-tests and ANOVAs. Frontiers in Psychology, 4. https://doi.org/10.3389/fpsyg.2013.00863

        Mordkoff, J. T. (2019). A simple method for removing bias from a popular measure of standardized effect size: Adjusted partial eta squared. Advances in Methods and Practices in Psychological Science, 2(3), 228–232. https://doi.org/10.1177/2515245919855053

        Okada, K. (2013). Is Omega Squared Less Biased? A Comparison of Three Major Effect Size Indices in One-Way Anova. Behaviormetrika, 40(2), 129–147. https://doi.org/10.2333/bhmk.40.129

        Robuste ANOVA und Vorausseztungsprüfung
        Zimmerman, D. W. (2004). A note on preliminary tests of equality of variances. The British Journal of Mathematical and Statistical Psychology, 57(Pt 1), 173–181. https://doi.org/10.1348/000711004849222

        Mair, P., & Wilcox, R. (2020). Robust statistical methods in R using the WRS2 package. Behavior Research Methods, 52(2), 464–488. https://doi.org/10.3758/s13428-019-01246-w

        Rogan, J. C., & Keselman, H. J. (1977). Is the ANOVA F-Test Robust to Variance Heterogeneity When Sample Sizes Are Equal?: An Investigation Via a Coefficient of Variation. American Educational Research Journal, 14(4), 493–498. JSTOR. https://doi.org/10.2307/1162346

        Empfehlungen zu Alphafehler-Korrektur
        Perneger, T. V. (1998). What's wrong with Bonferroni adjustments. Bmj, 316(7139), 1236-1238. https://doi.org/10.1136/bmj.316.7139.1236

    • Selbstlernbereich - Basic Wiederholung und Spezialfälle der Varianzanalysen




      • Möchtest du dein ANOVA-Wissen vertiefen und testen?

        Hier findest du verschiedene Zusammenfassungen und kleine Aufgaben.
      • ANOVA - Basics Livre

        Wenn du deine ANOVA-Skills komplett auffrischen möchtest, dann findest du hier eine Übersicht über:  

        • Einfaktorielle Varianzanalyse für unabhängige Stichproben 
        • Zweifaktorielle Varianzanalysen für unabhängige Stichproben 
        • ANOVA für abhängige Stichproben
        Navigiere mit den kleinen Pfeiltasten!

  • Regression, Moderation und Voraussetzungen (Bachelor)

    •  
       
       

      Was? Welche Frage beantwortet das Modell?
      Kann ich mit einem oder mehreren Prädiktoren ein Kriterium vorhersagen?
      Besteht ein Zusammenhang zwischen zwei Variablen, wenn man für den Einfluss anderer Variablen kontrolliert?
      Moderiert eine Variable den Zusammenhang zwischen zwei anderen Variablen (Interaktion)? 

      Wann? Welche Art von Daten werden damit analysiert?

       

    • Allgemeines

      • Grundlagen und Begrifflichkeiten der Regressionsanalyse nochmal zusammengefasst:

        Eid, M., Gollwitzer, M., & Schmitt, M. (2017). Statistik und Forschungsmethoden : mit Online-Materialien (M. Gollwitzer & M. Schmitt, Übers.). Beltz. Daraus: Kapitel V - Zusammenhangs- und Regressionsanalyse

    • Hinweise zur konkreten Umsetzung

    • Codebeispiel in R zur Regression und Voraussetzungsprüfung

    • FAQ zur Regression, Moderation und Voraussetzungen

    • (Weiterführende) Literatur

      • Regressionsdiagnostik (Voraussetzungsprüfung und Prüfung von Störeinflüssen)
        Altman, N., & Krzywinski, M. (2016). Regression diagnostics. Nature Methods, 13, 385–386. https://doi.org/10.1038/nmeth.3854

        Heteroskedastizitätskorrektur bei Regression
        Long, J. S., & Ervin, L. H. (2000). Using Heteroscedasticity Consistent Standard Errors in the Linear Regression Model. The American Statistician, 54(3), 217–224. https://doi.org/10.1080/00031305.2000.10474549

        Cluster Robust Standarderrors als Heteroskedastizitätskorrektur
        McNeish, D. (2023). A practical guide to selecting and blending approaches for clustered data: Clustered errors, multilevel models, and fixed-effect models. Psychological Methods. https://doi.org/10.1037/met0000620

        Zentrieren hilft nicht gegen Multikollinearität
        Dalal, D. K., & Zickar, M. J. (2012). Some Common Myths About Centering Predictor Variables in Moderated Multiple Regression and Polynomial Regression. Organizational Research Methods, 15(3), 339–362. https://doi.org/10.1177/1094428111430540

        Multiples testen, Alphafehler bei Regression
        Anderson, S. F. (2023). Multiplicity in multiple regression: Defining the issue, evaluating solutions, and integrating perspectives. Psychological Methods, 28(6), 1223–1241. https://doi.org/10.1037/met0000457
        Lavery, M. R., Acharya, P., Sivo, S. A., & Xu, L. (2017). Number of predictors and multicollinearity: What are their effects on error and bias in regression? Communications in Statistics - Simulation and Computation, 48(1), 27–38. https://doi.org/10.1080/03610918.2017.1371750
        Streiner, D. L. (2015). Best (but oft-forgotten) practices: the multiple problems of multiplicity—whether and how to correct for many statistical tests. The American journal of clinical nutrition, 102(4), 721-728. https://doi.org/10.3945/ajcn.115.113548 

        Messfehler und Alphafehler in der Regression
        Shear, B. R.& Zumbo, B. D. (2013). False Positives in Multiple Regression: Unanticipated Consequences of Measurement Error in the Predictor Variables. Educational and Psychological Measurement, 73(5), 733–756. https://doi.org/10.1177/0013164413487738 

        Commonality Analysis
        Ray‐Mukherjee, J., Nimon, K., Mukherjee, S., Morris, D. W., Slotow, R., & Hamer, M. (2014). Using commonality analysis in multiple regressions: A tool to decompose regression effects in the face of multicollinearity. Methods in Ecology and Evolution, 5(4), 320–328. https://doi.org/10.1111/2041-210X.12166

        Zu Interaktionen
        Rohrer, J. M., & Arslan, R. C. (2021). Precise Answers to Vague Questions: Issues With Interactions. 4(2), 1–9. https://doi.org/10.1177/25152459211007

        Inferenz nach Modellwahl in der Regression
        Kuchibhotla, A. K., Kolassa, J. E., & Kuffner, T. A. (2022). Post-Selection Inference. Annual Review of Statistics and Its Application, 9(1), 505–527. https://doi.org/10.1146/annurev-statistics-100421-044639

        Tibshirani, R. J., Taylor, J., Lockhart, R., & Tibshirani, R. (2016). Exact post-selection inference for sequential regression procedures. Journal of the American Statistical Association, 111(514), 600-620. 10.1080/01621459.2015.1108848

        Fithian, W., Sun, D., & Taylor, J. (2014). Optimal inference after model selection. arXiv preprint arXiv:1410.2597.

        Modellwahl bei Regression
        Burnham, K. P., & Anderson, D. R. (Hrsg.). (2004a). Model Selection and Multimodel Inference. Springer New York. https://doi.org/10.1007/b97636

        Burnham, K. P., & Anderson, D. R. (2004b). Multimodel Inference: Understanding AIC and BIC in Model Selection. Sociological Methods & Research, 33(2), 261–304. https://doi.org/10.1177/0049124104268644

        Burnham, K. P., Anderson, D. R., & Huyvaert, K. P. (2011). AIC model selection and multimodel inference in behavioral ecology: Some background, observations, and comparisons. Behavioral Ecology and Sociobiology, 65(1), 23–35. https://doi.org/10.1007/s00265-010-1029-6


  • Mediation, Pfadmodelle, Strukturgleichungsmodelle (Master)

    •  
       
       

      Was? Welche Frage beantwortet das Modell?
      Kann ich komplexere Zusammenhänge zwischen mehreren Variablen modellieren?
      Ist der Zusammenhang von einem Prädiktor auf ein Kriterium durch einen Mediator vermittelt? 

      Wann? Welche Art von Daten werden damit analysiert?

       

    • Hinweise zur konkreten Umsetzung

    • Codebeispiel in R (lavaan) zur Mediation

    • (Weiterführende) Literatur

      • Kausalitätsprobleme bei Mediationsanalysen
        Rohrer JM, Hünermund P, Arslan RC, Elson M. (2022). That’s a Lot to Process! Pitfalls of Popular Path Models. Advances in Methods and Practices in Psychological Science, 5(2). https://doi.org/10.1177/25152459221095827

        Robust (gegen Normalverteilungsverletzungen und Ausreißer) Mediation mit Bootstrapping
        Alfons, A., Ateş, N. Y., & Groenen, P. J. F. (2022). A Robust Bootstrap Test for Mediation Analysis. Organizational Research Methods, 25(3), 591–617. https://doi.org/10.1177/1094428121999096

        Inferenz nach Modellwahl im SEM
        Huang, P. H. (2020). Postselection inference in structural equation modeling. Multivariate Behavioral Research, 55(3), 344-360. https://doi.org/10.1080/00273171.2019.1634996

        Latent Curve Modelle
        Bollen, K.A., & Curran, P.J. (2006). Latent Curve Models: A Structural Equation Approach. Wiley Series on
        Probability and Mathematical Statistics. John Wiley & Sons: New Jersey

  • Logistische Regression (Master)


    •  
       
       

      Was? Welche Frage beantwortet das Modell?
      Kann ich mit einem oder mehreren Prädiktoren die Wahrscheinlichkeit eines dichotomen Kriteriums vorhersagen?

      Wann? Welche Art von Daten werden damit analysiert?

       

  • Faktoranalyse (Exploratorisch und Konfirmatorisch) (Master)


    •  

      Was? Welche Frage beantwortet das Modell?
      Konfirmatorische Faktorenanalyse: Überprüfung einer vorab spezifizierten Faktorstruktur von Items
      Exploratorische Faktorenanalyse: Auffinden einer vorab nicht spezifizierten Faktorstruktur von Items


      Wann? Welche Art von Daten werden damit analysiert?
      Mehrere einzelne Items, die als Indikatoren für latente Konstrukte (Faktoren) dienen

    • Allgemeines

      • Grundlagenliteratur zu EFA und CFA
        Eid, M., Gollwitzer, M., & Schmitt, M. (2017). Statistik und Forschungsmethoden: mit Online-Materialien (M. Gollwitzer & M. Schmitt, Übers.). Beltz. Verfügbar über die Unibibliothek.

        Moosbrugger, H., & Kelava, A. (2020). Testtheorie und Fragebogenkonstruktion. In H. Moosbrugger & A. Kelava (Hrsg. & Übers.), Lehrbuch. Springer. Verfügbar über die Unibibliothek.

    • Hinweise zur konkreten Umsetzung

    • Codebeispiel für EFA und CFA in R

      • Hierfür eignet sich das R-package lavaan am besten. Das package verfügt über eine sehr ausführliche Dokumentation mit vielen Beispielen.

      • Beispiel CFA lavaan URL
      • Beispiel EFA lavaan URL

    • (Weiterführende) Literatur

      • Fragebogenübersetzung
        Behling, O., & Law, K. S. (2000). Translating Questionnaires and Other Research Instruments - Problems and Solutions (Bd. 133). SAGE Publications.

        Summenscores sind komplexer, als man denkt
        McNeish, D., & Wolf, M. G. (2020). Thinking twice about sum scores. Behavior Research Methods, 52(6), 2287–2305. https://doi.org/10.3758/s13428-020-01398-0


        EFA: 

        Generelle Empfehlungen zur Nutzung
        Goretzko, D., Pham, T. T. H., & Bühner, M. (2021). Exploratory factor analysis: Current use, methodological developments and recommendations for good practice. Current Psychology: A Journal for Diverse Perspectives on Diverse Psychological Issues, 40(7), 3510–3521. https://doi.org/10.1007/s12144-019-00300-2

        Immer oblique Rotation statt orthogonaler Rotation in der Psychologie
        Fabrigar, L. R., Wegener, D. T., MacCallum, R. C., & Strahan, E. J. (1999). Evaluating the use of exploratory factor analysis in psychological research. Psychological Methods, 4(3), 272–299. https://doi.org/10.1037/1082-989X.4.3.272

        Geomin als geeignete Rotation
        Asparouhov, T., & Muthén, B. (2009). Exploratory Structural Equation Modeling. Structural Equation Modeling: A Multidisciplinary Journal, 16(3), 397–438. https://doi.org/10.1080/10705510903008204

        Wahl des epsilon-Parameters bei Geomin
        Marsh, H. W., Muthén, B., Asparouhov, A., Lüdtke, O., Robitzsch, A., Morin, A. J. S. & Trautwein, U. (2009). Exploratory structural equation modeling, integrating CFA and EFA: Application to students’ evaluations of university teaching. Structural Equation Modeling, 16, 439–476. doi: 10.1080/10705510903008220.

        CFA:

        McDonalds Omega statt Cronbachs Alpha
        Dunn, T. J., Baguley, T., & Brunsden, V. (2014). From alpha to omega: A practical solution to the pervasive problem of internal consistency estimation. British Journal of Psychology, 105(3), 399–412. https://doi.org/10.1111/bjop.12046

        McNeish, D. (2018). Thanks coefficient alpha, we’ll take it from here. Psychological Methods, 23(3), 412–433. https://doi.org/10.1037/met0000144

        Fit-Indizes "widersprechen" sich
        Lai, K., & Green, S. B. (2016). The problem with having two watches: Assessment of fit when RMSEA and CFI disagree. Multivariate behavioral research, 51(2-3), 220-239. https://doi.org/10.1080/00273171.2015.1134306

        Dynamische Fit Indices statt genereller Cutoffs

        McNeish, D., & Wolf, M. G. (2023). Dynamic fit index cutoffs for confirmatory factor analysis models. Psychological Methods, 28(1), 61–88. https://doi.org/10.1037/met0000425

        Messinvarianz beim PANAS
        Schmukle, S. C., Egloff, B., & Burns, L. R. (2002). The relationship between positive and negative affect in the Positive and Negative Affect Schedule. Journal of Research in Personality, 36(5), 463–475. https://doi.org/10.1016/S0092-6566(02)00007-7


  • Multilevelmodelle, Linear Mixed Models, Hierarchische Modelle (Master)

    •  

      Was? Welche Frage beantwortet das Modell?
      Erweiterung des ALM für hierarchisch strukturierte Daten:
      Gibt es Unterschiede in Effekten zwischen verschiedenen Level-2-Einheiten? Wodurch kann man die Unterschiede erklären?
      Gibt es verschiedene Effekte auf Level-1 und Level-2 (Kontexteffekte)?

      Wann? Welche Art von Daten werden damit analysiert?

    • Hinweise zur konkreten Umsetzung

    • FAQ

    • Codebeispiel in R

      • Hilfreiche Lehrbuchabschnitte zu Multilevel-Modellen in R (Kap 20):
        Luhmann, M. (2020). R für Einsteiger: Einführung in die Statistik-Software für die Sozialwissenschaften: mit Online-Material (5., überarbeitete Auflage). Beltz. Verfügbar über die Unibibliothek.

      • Beispiel-Multilevel Fichier
      • Daten für Beispiel Fichier

    • (Weiterführende) Literatur

      • Auswahl der random effects
        Matuschek, H., Kliegl, R., Vasishth, S., Baayen, H., & Bates, D. (2017). Balancing Type I error and power in linear mixed models. Journal of Memory and Language, 94, 305–315. https://doi.org/10.1016/j.jml.2017.01.001

        Klassische Mythen bei Multilevelmodellen (ICCs, Verzerrungen, Empfehlungen für Stichprobengrößen)
        Huang, F. L. (2018). Multilevel modeling myths. School Psychology Quarterly, 33(3), 492–499. https://doi.org/10.1037/spq0000272

        Multilevelmodelle bei < 30 Level-2-Einheiten
        Hox, J. & McNeish, D. (2020). Small Samples in Multilevel Modeling. Routledge. Verfügbar über die Unibibliothek.

        Robustheit von LMMs bei Verletzung der Normalverteilung
        Maas, C. J. M., & Hox, J. J. (2004). Robustness issues in multilevel regression analysis. Statistica Neerlandica, 58(2), 127–137. https://doi.org/10.1046/j.0039-0402.2003.00252.x

        Heteroskedastizitätskorrektur in Multilevelmodellen
        Huang, F. L., Wiedermann, W., & Zhang, B. (2023). Accounting for Heteroskedasticity Resulting from Between-Group Differences in Multilevel Models. Multivariate Behavioral Research, 58(3), 637–657. https://doi.org/10.1080/00273171.2022.2077290

        Vergleich LMM mit Cluster Robust Standarderrors und Fixed-Effects Ansätzen
        McNeish, D. (2023). A practical guide to selecting and blending approaches for clustered data: Clustered errors, multilevel models, and fixed-effect models. Psychological Methods. https://doi.org/10.1037/met0000620

        Zentrierung von beobachteten dichotomen Prädiktoren in Multilevelkontext
        Yaremych, H. E., Preacher, K. J., & Hedeker, D. (2023). Centering categorical predictors in multilevel models: Best practices and interpretation. Psychological Methods, 28(3), 613–630. https://doi.org/10.1037/met0000434

        Entscheidung zwischen Mixed Model und Latent Growth Curve Model
        McNeish, D., Matta, T. (2018). Differentiating between mixed-effects and latent-curve approaches to growth modeling. Behav Res 50, 1398–1414. https://doi.org/10.3758/s13428-017-0976-5

        Ausreißer und einflussreiche Datenpunkte im LMM detektieren
        Nieuwenhuis, R., te Grotenhuis, M., & Pelzer, B. (2012). influence.ME: Tools for Detecting Influential Data in Mixed Effects Models. The R Journal, 4(2), 38–47. http://doi.org/10.32614/RJ-2012-011

        Robustheit von LMMs gegenüber Verletzungen der Verteilungsannahmen
        Schielzeth H, Dingemanse NJ, Nakagawa S, et al. Robustness of linear mixed-effects models to violations of distributional assumptions. Methods Ecol Evol. 2020; 11: 1141–1152. https://doi.org/10.1111/2041-210X.13434

  • Meta-Analyse (Master)

    •  

      Was? Welche Frage beantwortet das Modell?
      Gibt es über mehrere Studien hinweg einen Gesamteffekt? Woran liegt es, dass sich Studienergebnisse (systematisch) unterscheiden?

      Wann? Welche Art von Daten werden damit analysiert?

      • Stichprobe: Studien
      • Kriterium: Vergleichbares Effektstärkemaß

    • Hinweise zur konkreten Umsetzung

      • Eine Meta-Analyse ist ein sehr umfangreiches Forschungsvorhaben. Die nötige Literaturrecherche und Kodierung der Einzelstudien sprengen in der Regel den Umfang einer Abschlussarbeit. Besprich dich dazu gut mit deiner Betreuungsperson.

      • hier findet ihr Guidelines, Checklisten und Flowsharts zu PRISMA (Preferred Reporting Items for Systematic reviews and Meta- Analyses )

    • Codebeispiel in R

      • Meta-Analysen lassen sich in R mithilfe des packages metafor umsetzen. Das Paket hat eine umfangreiche Dokumentation.

        ↳ Viechtbauer, W. (2010). Conducting meta-analyses in R with the metafor package. Journal of Statistical Software, 36(3), 1–48. https://doi.org/10.18637/jss.v036.i03

    • (Weiterführende) Literatur

      • Umfassendes Einführungswerk
        Borenstein, M., Hedges, L.V., Higgins, J.P.T. & Rothstein, H.R. (2009). Introduction to Meta-Analysis. John Wiley & Sons Ltd. Verfügbar über die Unibibliothek.

        Umfassende Literaturübersicht auch hier (Wolfgang Viechtbauer, metafor-Package): https://www.metafor-project.org/doku.php/analyses

        (Multilevel) Metaanalyse How to
        Assink, M.,& Wibbelink, C.J.M. (2016). Fitting three-level meta analytic models in R: A Step-by-step tutorial. The Quantitative Methods for Psychology, 12(3), 154-174. https://doi.org/10.20982/tqmp.12.3.p154

  • Systematische Reviews und Interraterrealiabilität (IRR) (Master)

    •  
       
       

      Was? Welche Frage beantwortet das Modell?
      Welcher Stand der Forschung liegt vor? Welche Studien sind bisher zu meiner Fragestellung erschienen?

      Wann? Welche Art von Daten werden damit analysiert?

      • Alle relevanten Studien zum Thema (nicht unbedingt quantitativ vergleichbar). 

        Stichprobe sind Einzelstudien.

       

  • Inhaltlich-strukturierende Qualitative Inhaltsanalyse (Bachelor)

    •  

      Es gibt viele verschiedene qualitative Methoden - hier gibt es nur ein Überblick über die in der Psychologie gängigste - die inhaltlich-strukturierende Inhaltsanalyse (siehe Schreier, 2014), die an der Universität Kassel im Bachelor gelehrt wird.

      Was? Welche Frage beantwortet das Modell?
      Fragestellungen können offener, explorativer, prozessbezogener, individualisierter, kontextualisierter, sprachbezogener, ... sein, als bei quantitativen Analysen.

      Wann? Welche Art von Daten werden damit analysiert?
      Text verschiedenster Art: Transkribierte Interviews, Freitextantworten, Instagramcaptions, Zeitungsartikel, ...

    • Übersicht und How- to Kodierung

    • (Weiterführende) Literatur

      • Schreier, M. (2014). Varianten qualitativer Inhaltsanalyse: Ein Wegweiser im Dickicht der Begrifflichkeiten. Forum: Qualitative Sozialforschung 15(1). Artikel 18. https://doi.org/10.17169/fqs-15.1.2043

        Tong, A., Sainsbury, P. & Craig, J. (2007). Consolidated criteria for reporting qualitative research (COREQ): a 32-item checklist for interviews and focus groups. International Journal of Quality in Health Care 19(6). S. 349-357. doi.org/10.1093/intqhc/mzm042

  • Grafiken und Tabellen in R

    •  
      Was? Welchen Zweck erfüllen Grafiken und Tabellen?
      Wie kann ich meine Ergebnisse ökonomisch darstellen und damit die im Text beschriebenen Ergebnisse untermauern/verdeutlichen?

      Wann? Welche Ergebnisse kann ich wie darstellen (Grafiken vs. Tabellen vs. im Text)?

      • Die zentralen Ergebnisse deiner empirischen Arbeit, auf die du dich in der Diskussion und bei deinen Schlussfolgerungen beziehst, solltest du explizit im Text benennen und beschreiben (Achtung: auch für das Berichten von statistischen Ergebnissen gibt es Regeln). Dabei solltest du dich auch auf Tabellen und Grafiken beziehen, die diese Ergebnisse zur Verdeutlichung darstellen.
      • Tabellen können der übersichtlichen Darstellung einer Vielzahl bzw. der Gesamtheit von Ergebnissen dienen, die nicht alle zwangsläufig relevant genug sind, um im Text Erwähnung zu finden (z.B. Parameter des gesamten (Regressions-/ANOVA-) Modells). Tabellen können auch die Reproduzierbarkeit von Ergebnissen ermöglichen (z.B. Werte aus Einzelstudien in Metaanalysen oder Kovarianzmatrizen (& Mittelwerte) für Faktorenanalysen, ...).
      • Grafiken können dir an unterschiedlichen Stellen im Forschungsprozess helfen. Grafiken können dir bei der Auswertung deiner erhobenen Daten helfen (z.B. Verteilungen plotten, Ausreißer identifizieren, ...) oder Leser*innen beim Verständnis deiner zentralen Ergebnisse in deiner Arbeit helfen. Oft ist die graphische Darstellung deiner Ergebnisse leichter verständlich als die Beschreibungen im Text.
      • Denke auch daran, dass es für die Gestaltung und Einbettung von Grafiken & Tabellen in den Text bestimmte Regeln gibt (üblicherweise APA Style).

    • Tabellen

      • Innerhalb von RStudio kannst du Tabellen im APA Style für Word (oder für Latex) automatisiert erstellen lassen. Damit sparst du dir viel Zeit und kannst Übertragungsfehler vermeiden. 

        Wir zeigen dir anhand einer Mittelwertstabelle das generelle Vorgehen, um Tabellen für Word mit dem rempsyc-Package zu erzeugen. Im verlinkten Tutorial findest du auch eine Anleitung um deine inferenzstatistischen Ergebnisse (z.B. aus der linearen Regression) abzubilden.

    • Grafiken (mit ggplot2)

      •  

        Wie verwende ich diesen Kursabschnitt?

        • Wenn du noch nie mit ggplot2 gearbeitet hast, solltest du zuerst das Step-by-Step Tutorial durchklicken. Dabei bauen wir gemeinsam ein Liniendiagramm zur Darstellung von Mittelwerten (inklusive Fehlerbalken) Schritt für Schritt auf. Wir starten mit einem konkreten Datenbeispiel und dessen Format in R und betrachten am Ende des Tutorials typische Formatierungs-Optionen (z.B. Farbenwahl, Schriftgrößen, ...). Im Verlauf des Tutorials bauen wir den Code schrittweise auf.
        • Wenn du bereits erste Erfahrungen mit ggplot2 hast, kannst du auch direkt die finale Beispielgrafik ansehen und Darstellingsdetails durch die markierten Hotspots in Erfahrung bringen.
        • Vielleicht findest du deine Frage zu Grafiken in R und die entsprechende Antwort auch im FAQ wieder.

        Grafiken designen

        Je nach Art der Daten (z.B. kategoriale vs. stetige Variablen, ...) sind unterschiedliche Arten von Grafiken geeignet. Hier findest du Inspiration für Visualisierungsmöglichkeiten und entsprechende Code-Beispiele für ggplot2 und weiterführende, auf ggplot aufbauende Packages. In diesem Glossarbeitrag findest du außerdem Hinweise, was bei der Darstellung von Fehlerbalken (insbesondere von Konfidenzintervallen) in Grafiken mit Punktschätzern (z.B. Mittelwerten) zu beachten ist sowie Daumenregel für deren Interpretation, beispielsweise in Bezug auf t-tests.    

        Beispielcode für typische Grafiken

        Solltest du Beispielcode für übliche Grafiken suchen wirst du hier ebenfalls fündig. Manchmal hilft ein anderes Beispiel oder eine zweite Erklärung mit anderen Worten bei deinem Verständnis enorm.

        Inspiration finden

        Wenn du noch keine Idee hast, wie du die Vielzahl deiner Variablen möglichst effizient und dennoch aussagekräftig in einer Grafik darstellen möchtest, kannst du dir Inspiration holen. Zugleich findest du auch den zugehörigen Beispielcode, den du nur noch an deine Daten anpassen musst.

        Erweiterungs-Packages für komplexere Grafiken

        Für komplexere Grafiken, die häufig verwendet werden (z.B. Korrelogramme zur Visualisierung vieler Korrelationen), gibt es häufig Packages, die die Anwendung dieser komplexen Grafiken sehr erleichtern. Viele dieser Packages verwenden intern ggplot2 und schreiben für dich den komplexen Code, um deine Coding-Arbeit zu erleichtern.

         
      • Beispieldaten Grafik-Tutorial Fichier

        Wenn du den Grafik-Code selbst ausprobieren möchtest, kannst du die im Tutorial verwendeten Daten einfach herunterladen und mit load("Beispieldaten.rda") in RStudio einlesen.

    • FAQ

      • FAQ

    • Beispielcode für R

    • (Weiterführende) Literatur

  • Open Science und Schreibtipps

    •  


      Was ist das?
      Hier findest du nützliche Hinweise zu Open Science Praktiken und Schreibtipps.

  • Urheber:innen

    • Infowaschbär-Grafik

      Konzeption und Zusammenstellung der Materialien: Salomé Li Keintzel, Kim-Laura Speck, Natascha Stahl, Marie Fuchs, Lea Degner, Constantin Wiegand, Amelie Jägersberg, Moritz Ehrnstraßer, Sarah Kleiner, Sarai Borchardt

      Förderung: Dieser Kurs wurde durch eine Zentrale Lehrförderung der Universität Kassel ermöglicht und vom Servicecenter Lehre (Dr. Serap Uzunbacak; Hsiang-Chin Wang aus dem Projekt HessenHub) didaktisch begleitet. 

      Ansprechperson für allgemeine Anliegen zum Kurs: Salomé Li Keintzel (slkeintzel@uni-kassel.de; FG Psychologische Forschungsmethoden), Prof. Dr. Florian Scharf (florian.scharf@uni-kassel.de; FG Psychologische Forschungsmethoden)

      Verwendungsrechte: folgt

    • Feedback und Bug Report Forum

      Hier können Sie Feedback zum Kurs geben.