Forscher:innen der Psychologie oder anderer Natur-, Sozial- und Geisteswissenschaften interessieren sich häufig dafür, wie sich Daten auf einige wenige entscheidende Faktoren herunterbrechen lassen, welche ein theoretisches Erklärungsmodell für die Variation in einem Datensatz liefern. Die Annahme ist hierbei, dass die beobachtbaren Messungen eine Linearkombination (also eine Summe) aus einem systematischen (wahren) und einem unsystematischen (Fehler-)Anteil bilden. Die dahinterliegenden Faktoren sind nicht messbare (latente) Variablen, auf welche, unter gewissen Annahmen, nur anhand der Kovariation zwischen den beobachtbaren Items geschlossen werden kann. Durch diese Zusammenhänge zwischen den Messungen können schließlich Hypothesen für die latenten Variablen untersucht werden. Ein theoriegenerierendes Verfahren, das hierzu häufig verwendet wird, ist die exploratorische Faktorenanalyse (im Folgenden EFA, engl. Exploratory Factor Analysis, vgl. Eid, Gollwitzer & Schmitt, 2017, Kapitel 25. Außerdem können Sie sich Brandt, 2020, Kapitel 23 genauer ansehen, wenn Sie weitere Informationen, bzw. eine zusätzliche Erklärung wünschen).
Wir wollen die EFA zur Auswertung von Beziehungen zwischen Variablen in R näher kennenlernen. Die EFA ist manchen Gesichtspunkten, sowie im Output in R, recht verwandt mit der Hauptkomponentenanalyse (PCA) aus dem vergangenen Semester. Allerdings konnten wir bei der PCA kein Erklärungsmodell aufstellen (“wir konnten den Hauptkomponenten nicht so einfach eine inhaltliche Bedeutung zuschreiben”) und auch keine Messfehler (unsystematische Fehleranteile) mitmodellieren. Zudem waren die Hauptkomponenten der PCA Linearkombinationen (also Zusammensetzungen) aus den beobachteten Variablen, bei der EFA hingegen sind die Messungen (beobachteten Variablen) Linearkombinationen aus systematischen (latenten) Variablen sowie Messfehlern.
Bevor wir mit den Analysen beginnen können, laden wir zunächst alle Pakete, welche wir im Folgenden benötigen werden.
Datensatz
Wir wollen uns die Faktorenstruktur der Big-5 eines entsprechenden Fragebogens ansehen. Der Originaldatensatz ist ein Onlinedatensatz, wird seit 2012 erfasst und ist auf openpsychometrics.org als .zip downloadbar. Bisher haben über 19700 Proband:innen aus der ganzen Welt daran teilgenommen. Zu jeder der fünf Facetten gibt es 10 Fragen. Der Fragebogen ist auf personality-testing.info einzusehen. Um das Ganze etwas übersichtlicher zu gestalten, betrachten wir einen gekürzten Datensatz. Wir kennen diesen Datensatz, allerdings in anderer Zusammensetzung, bereits aus den Übungen zum vergangenen Semester zum Themenblock MANOVA, weswegen wir hier das Kürzel “EFA” angehängt haben. Im Datensatz Big5_EFA.rda befinden sich 15 Items aus dem Big-5 Persönlichkeitsfragebogen. Hier werden von diesen 10 Items jeweils die ersten drei verwendet. Der Itemwortlaut der verwendeten Items ist wie folgt:
| Itemwortlaut | |
| E1 | I am the life of the party. |
| E2 | I don’t talk a lot. |
| E3 | I feel comfortable around people. |
| N1 | I get stressed out easily. |
| N2 | I am relaxed most of the time. |
| N3 | I worry about things. |
| A1 | I feel little concern for others. |
| A2 | I am interested in people. |
| A3 | I insult people. |
| C1 | I am always prepared. |
| C2 | I leave my belongings around. |
| C3 | I pay attention to details. |
| O1 | I have a rich vocabulary. |
| O2 | I have difficulty understanding abstract ideas. |
| O3 | I have a vivid imagination. |
Die Kürzung des vollen Datensatzes lässt sich im Appendix A nachvollziehen. Zusätzlich zu den Persönlichkeitsitems wurden demografische Daten, die mögliche Unterschiede zwischen Personen beschreiben, erfasst.
Daten laden
Wir laden zunächst die Daten: entweder lokal von Ihrem Rechner:
load("C:/Users/Musterfrau/Desktop/Big5_EFA.rda")oder wir laden sie direkt über die Website:
load(url("//pandar.netlify.app/post/Big5_EFA.rda"))Nun sollte in R-Studio oben rechts in dem Fenster unter der Rubrik “Data” unser Datensatz mit dem Namen “Big5” erscheinen. Der Datensatz heißt also genauso wie der Datensatz für die MANOVA, enthält aber andere Variablen (also Achtung!).
Übersicht über die Daten
head(Big5, n = 10) # gebe die ersten 10 Zeilen aus## age engnat gender country E1 E2 E3 N1 N2 N3 A1 A2 A3 C1 C2 C3 O1 O2 O3 ## 1 53 1 1 US 4 2 5 1 5 2 1 5 1 4 1 5 4 1 3 ## 2 46 1 2 US 2 2 3 2 3 4 1 3 3 4 1 3 3 3 3 ## 3 14 2 2 PK 5 1 1 5 1 5 5 1 5 4 1 5 4 5 5 ## 4 19 2 2 RO 2 5 2 5 4 4 2 5 4 3 3 4 4 3 5 ## 5 25 2 2 US 3 1 3 3 3 3 5 5 3 3 1 5 3 1 1 ## 6 31 1 2 US 1 5 2 1 5 4 2 2 3 2 5 4 4 2 1 ## 7 20 1 2 US 5 1 5 2 4 2 5 5 1 2 4 3 3 1 5 ## 8 23 2 1 IN 4 3 5 1 4 4 2 5 1 4 2 5 3 1 5 ## 9 39 1 2 US 3 1 5 2 4 5 1 5 1 4 3 5 3 3 5 ## 10 18 1 2 US 1 4 2 5 2 5 2 3 1 5 2 4 4 2 5Wir sehen, dass in den ersten 4 Spalten die demografischen Daten wie etwa Alter (“age”), Englisch als Muttersprache (“engant”, 1=yes, 2=no, 0=missed), Geschlecht (“gender”, 1=Male, 2=Female, 3=Other, 0=missed) und Herkunftsland (“country”, ISO-kodiert, bspw. “DE” = Deutschland, “FR” = Frankreich, “EM” = Vereinigte Arabische Emirate, “US” = Vereinigten Staaten von Amerika) eingetragen wurden. In den darauf folgenden Spalten sind die Items der Extraversion (engl. extraversion, Items: E1, E2, E3), des Neurotizismus (engl. neuroticism, Items: N1, N2, N3), der Verträglichkeit (engl. agreeableness, Items: A1, A2, A3), der Gewissenhaftigkeit (engl. conscientiousness, Items: C1, C2, C3) und der Offenheit für Erfahrungen (engl. openness, Items: O1, O2, O3) eingetragen. Beispielsweise ist die erste Person des Datensatzes ein 53-jähriger Mann, der Englisch als Muttersprache spricht und in den USA lebt.
Da wir uns in der Praxis nur sehr selten in der glücklichen Lage befinden, einen solch riesigen Datensatz zu haben, wollen wir uns innerhalb des Datensatzes auf Subgruppen beschränken: wir wollen uns zunächst nur Daten von Personen aus Frankreich ansehen. Dazu wählen wir nur diejenigen Zeilen aus, in denen country == "FR" gilt. Das erreichen wir wie folgt: Mit Big5$country haben wir Zugriff auf die “Country”-Spalte im Datensatz und können mit == "FR" prüfen, an welchen Stellen hier “FR” steht, also Personen, die in Frankreich leben. dim gibt die Dimensionen des Datensatzes wieder.
dim(Big5)## [1] 19711 19data_France <- Big5[Big5$country == "FR", ] dim(data_France)## [1] 129 19Dem Output sollte zu entnehmen sein, dass data_France 129 Zeilen (also Proband:innnen, die in Frankreich leben) und 19 Spalten (also Variablen) enthält. Für die weiteren Analysen brauchen wir die demografischen Variablen in dem Datensatz der in Frankreich lebenden Teilnehmer:innen nicht mehr. Aus diesem Grund speichern wir den Datensatz noch einmal ohne die ersten 4 Spalten ab. Anschließend stellen wir die Korrelationsmatrix dieser Daten grafisch dar (den Befehl corrplot aus dem gleichnamigen Paket kennen wir bereits aus der PCA Sitzung des vergangenen Semesters).
dataFR <- data_France[, -c(1:4)] # entferne demografische Daten und speichere als "dataFR" #### Visualisierte Korrelationsmatrix in dataFR corrplot(corr = cor(dataFR), # Korrelationsmatrix (Datengrundlage) method = "color", # zeichne die Ausprägung der Korrelation farblich kodiert addCoef.col = "black", # schreibe die Korrelationskoeffizienten in schwarz in die Grafik number.cex = 0.7) # stelle die Schriftgröße der Koeffizienten einAuf den ersten Blick scheinen die Items der gleichen Skala (ausgedrückt durch gleiche Buchstaben pro Item) stärker (betragsmäßig höher) miteinander zu korrelieren. Allerdings sind hier sehr viele Korrelationen abgetragen. Wir wollen uns zunächst nur auf Extraversion und Neurotizismus beschränken.
dataFR2 <- dataFR[,1:6] # Zunächst wählen wir die ersten 6 Items: E1 bis E3 und N1 bis N3 head(dataFR2)## E1 E2 E3 N1 N2 N3 ## 17 1 3 2 4 2 3 ## 398 3 3 3 4 3 4 ## 488 1 5 2 4 4 5 ## 545 1 2 1 4 1 5 ## 551 1 4 1 5 1 5 ## 656 1 4 2 5 1 5# zum gleichen Ergebnis würde auch Folgendes kommen (besonders von Relevanz, # wenn wir bspw. nicht die Position sondern nur die Namen der Variablen kennen!): head(dataFR[, c("E1", "E2", "E3", "N1", "N2", "N3")])## E1 E2 E3 N1 N2 N3 ## 17 1 3 2 4 2 3 ## 398 3 3 3 4 3 4 ## 488 1 5 2 4 4 5 ## 545 1 2 1 4 1 5 ## 551 1 4 1 5 1 5 ## 656 1 4 2 5 1 5Wenn wir uns die Korrelationmatrix des gekürzten Datensatzes dataFR2 ansehen…
# Visualisierte Korrelationsmatrix corrplot(corr = cor(dataFR2), # Korrelationsmatrix (Datengrundlage) method = "color", # Zeichne die Ausprägung der Korrelation farblich kodiert addCoef.col = "black", # schreibe die Korrelationskoeffizienten in schwarz in die Grafik number.cex = 1) # Stelle die Schriftgröße der Koeffizienten ein…erkennen wir deutlich, dass die Extraversionsitems und die Neurotizismusitems untereinander jeweils stärker zusammenhängen als zwischen den Konstrukten. Dennoch ist der Grafik zu entnehmen, dass die beiden Konstrukte nicht unabhängig voneinander sind (es gibt Beziehungen zwischen Items der beiden Konstrukte).
Ziel: EFA
Unser Ziel ist es, mit den gegebenen Items eine exploratorische Faktorenanalyse durchzuführen. Wir wollen hierbei die Anzahl der Faktoren mittels einer Parallelanalyse bestimmen und anschließend dieses Modell mit dem \(\chi^2\)-Test (Likelihood-Quotiententest (Likelihood-Ratio-Test)/ Likelihood-Differenzentest/ \(\chi^2\)-Differenzentest) gegen konkurrierende Modelle testen. Hierbei wollen wir die oblique rotierte und die orthogonal rotierte Lösung vergleichen und hinsichtlich unserer Daten interpretieren. Das Modell, was wir an unsere Daten anpassen wollen, sieht für 6 Variablen (\(V_1,\dots,V_6\)) im Allgemeinen erst einmal so aus (hier sind nur die Beziehungen, nicht aber die Stärken der Beziehungen zwischen den Variablen abgetragen), wobei hier schon die implizite Annahme drin steckt, dass es nur zwei zugrundeliegende latente Variablen gibt:
Auf unseren Datensatz angepasst, wollen wir folgendes Modell anpassen:
Natürlich erwarten wir, dass insgesamt 2 Faktoren die Daten am besten beschreiben und dass die konstruktkongruenten Items jeweils auf dem gleichen Faktor am stärksten laden. Aber stützen die Daten diese Hypothese?
Wir wollen im Folgenden
- eine Parallelanalyse durchführen, um in Erfahrung zu bringen, wie viele Faktoren sinnvoll zu den Daten passen
- eine Hauptachsenanalyse mit orthogonaler und obliquer Rotation durchführen
- eine exploratorische Maximum-Likelihood-Faktorenanalyse durchführen und die Passung zu den Daten untersuchen
- im Rahmen der exploratorischen Maximum-Likelihood-Faktorenanalyse die Passung zu den Daten im Vergleich zu konkurrierenden Modellen untersuchen.
Parallelanalyse und Auswahl an Faktoren
Zur Auswahl der Anzahl an Faktoren in der EFA kann auf die Eigenwerte zurückgegriffen werden. Diese Eigenwerte entstehen beispielsweise durch Lösen des Eigenwerteproblems und entsprechen den Varianzen der Faktoren. Hier gilt es, nur solche Faktoren zu wählen, die auch große Varianzen haben. Die Parallelanalyse hatten wir im Zusammenhang mit der Hauptkomponentenanalyse kennengelernt. Hier werden vielfach (z.B. 1000 Mal, für Vergleichbarkeit sogar besser mehr!) unabhängige Daten in dem gleichen Format des ursprünglichen Datensatzes gezogen und eine PCA oder EFA durchgeführt. Die entstehenden Eigenwerte werden der Größe nach sortiert und dann über die Wiederholungen gemittelt. So entsteht ein auf die Stichprobe und Anzahl der Variablen genormter, zufälliger, durchschnittlicher Eigenwerteverlauf. Sind Eigenwerte der tatsächlich beobachteten Daten größer als die der Parallelanalyse, so spricht dies für eine/n bedeutsame/n Komponente/Faktor. Weitere Kriterien zur Auswahl von zu extrahierenden Faktoren im Rahmen der PCA waren das Eigenwerte-größer-1 Kriterium (Kaiser-Guttman-Kriterium) sowie der Scree-Test (Elbow-Criterion, Knick im Eigenwerteverlauf). Weitere Informationen zur EFA sowie zu Wiederholungen der PCA und der Auswahlkriterien können beispielsweise in Eid, Gollwitzer und Schmitt (2017) in Kapitel 25 (Seite 919 und folgend) nachgelesen werden.
Der wesentliche Unterschied zwischen einer EFA und einer PCA ist, dass bei der EFA angenommen wird, dass die beobachteten Variablen systematische (wahre) und unsystematische (Fehler-) Anteile enthalten. Es wird somit ein Erklärungsmodell, welches die Variation zwischen den Variablen erzeugt, postuliert. Bei der PCA werden die beobachteten Variablen als messfehlerfrei angenommen. Eine wichtige Folge aus der (Nicht-) Modellierung der Fehler ist, dass in der Regel die Faktorladungen bei der PCA höher ausfallen als bei der EFA. Dies liegt daran, dass bei der PCA die Variablen mit ihren eigenen Messfehlern, aus welchen auch die Hauptkomponenten unter anderem zusammengesetzt sind, korrelieren. Die Faktorladungen/ Komponentenladungen stehen hierbei (im orthogonalen Fall) für die Korrelation zwischen Item und Faktor/ Komponente; im obliquen Fall sind die Faktorladungen als Regressionkoeffizienten zu interpretieren. Wird eine ML-EFA an die Daten angepasst, so wird zusätzlich noch ein Erklärungsmodell basierend auf Verteilungsannahmen (multivariate Normalverteilung der Faktoren und Fehler — und als Konsequenz daraus auch der Items) herangezogen. Bei der PCA sind die Hauptkomponenten lediglich Linearkombinationen aus den beobachteten Variablen ohne jegliche Verteilungsannahmen (die Hauptkomponenten bestehen aus gewichteten Summen der beobachteten Variablen). Entsprechend ist es bei der PCA auch nicht möglich, konkurierende Modelle gegeneinander zu testen. Es bleiben dort nur die deskriptiven und recht subjektiven Auswahlkriterien für die Anzahl der Komponenten.
Mit Hilfe des fa.parallel-Befehls aus dem psych-Paket, welchen wir im Rahmen der PCA bereits kennengelernt hatten, lässt sich ganz einfach der Eigenwerteverlauf inklusive Parallelanalyse grafisch darstellen.
fa.parallel(dataFR2)Ohne weitere Einstellungen wird der Eigenwerteverlauf der PCA und der EFA ausgegeben. Deutlich zu sehen ist, dass die Eigenwerte der PCA größer ausfallen als die der EFA. Dies liegt erneut daran, dass die Faktoren der EFA lediglich die systematischen Anteile der Variablen enthalten, während die Komponenten der PCA Kompositionen sind - also Zusammensetzungen aus den Variablen; inklusive der Messfehler. Wählen wir fa = "fa", so wird uns nur der Verlauf der Eigenwerte auf Basis einer EFA aufgeführt.
fa.parallel(dataFR2, fa = "fa")Die Grafik zeigt drei Eigenwerteverläufe. FA Actual Data ist der Eigenwerteverlauf unseres Datensatzes. FA Simulated Data ist der Eigenwerteverlauf basierend auf den 1000 simulierten Datensätzen. FA Resampled Data ist der Eigenwerteverlauf von Datensätzen, der durch Resampling, also neues Verteilen unseres Datensatzes entsteht (das ist im Grunde Bootstrapping, was im Rahmen der Sitzung zu SEM näher erläutert wird).
Der Parallelanalyse der EFA ist zu entnehmen, dass voraussichtlich 2 Faktoren genügen, um die Variation im Datensatz zu erklären. Auch die Parallelanalyse der PCA (Grafik zuvor) lässt dies vermuten. Des Weiteren sprechen beide Scree-Tests für einen Knick um den 3. Faktor/die 3. Komponente, was auch für eine Dimensionalität von 2 spricht. Zu guter Letzt zeigt auch das Kaiser-Guttman-Kriterium kein anderes Ergebnis. Allerdings ist dieses Kriterium nur sinnvoll auf den Eigenwerteverlauf der PCA anwendbar, weswegen wir es auch nur im Bezug auf den PCA-Eigenwerteverlauf interpretieren.
Orthogonale und oblique Hauptachsenanalyse
Da unsere Auswahlkriterien einstimmig für 2 Faktoren sprechen und dies auch unsere Hypothese war, modellieren wir zunächst eine orthogonale Hauptachsenanalyse. Dazu nutzen wir den fa (Factor Analysis) Befehl des psych-Paketes. Mit Hilfe der Argumente nfactors und rotate lässt sich die Anzahl an Faktoren sowie die Rotation auswählen (genauso wie bei der pca Funktion für die PCA!). Wir wollen hier orthogonal varianzmaximierend (also varimax) rotieren.
fa(dataFR2, nfactors = 2, rotate = "varimax")## Factor Analysis using method = minres ## Call: fa(r = dataFR2, nfactors = 2, rotate = "varimax") ## Standardized loadings (pattern matrix) based upon correlation matrix ## MR1 MR2 h2 u2 com ## E1 0.69 -0.06 0.48 0.52 1.0 ## E2 -0.65 0.00 0.42 0.58 1.0 ## E3 0.82 -0.19 0.70 0.30 1.1 ## N1 -0.01 0.84 0.70 0.30 1.0 ## N2 0.10 -0.58 0.35 0.65 1.1 ## N3 -0.05 0.59 0.34 0.66 1.0 ## ## MR1 MR2 ## SS loadings 1.58 1.42 ## Proportion Var 0.26 0.24 ## Cumulative Var 0.26 0.50 ## Proportion Explained 0.53 0.47 ## Cumulative Proportion 0.53 1.00 ## ## Mean item complexity = 1 ## Test of the hypothesis that 2 factors are sufficient. ## ## The degrees of freedom for the null model are 15 and the objective function was 1.47 with Chi Square of 183.82 ## The degrees of freedom for the model are 4 and the objective function was 0.07 ## ## The root mean square of the residuals (RMSR) is 0.04 ## The df corrected root mean square of the residuals is 0.07 ## ## The harmonic number of observations is 129 with the empirical chi square 4.98 with prob < 0.29 ## The total number of observations was 129 with Likelihood Chi Square = 9.06 with prob < 0.06 ## ## Tucker Lewis Index of factoring reliability = 0.886 ## RMSEA index = 0.099 and the 90 % confidence intervals are 0 0.187 ## BIC = -10.38 ## Fit based upon off diagonal values = 0.99 ## Measures of factor score adequacy ## MR1 MR2 ## Correlation of (regression) scores with factors 0.89 0.88 ## Multiple R square of scores with factors 0.79 0.77 ## Minimum correlation of possible factor scores 0.58 0.55Im Output ganz oben erkennen wir die Schätzmethode (hier: minres, also Minimierung der Residuen). Aus diesem Grund heißen die Faktoren in diesem Output auch MR1 und MR2; für Minimale-Residuen-Faktor 1 und 2 (diese Benennung war uns auch bereits bei der PCA aufgefallen, wo diese je nach Rotation entweder PC1 oder RC1, etc., hießen). Die Faktorladungen zu den zugehörigen Faktoren sind unter Standardized loadings (pattern matrix) based upon correlation matrix zu sehen. h2 steht für die Kommunalität (\(h^2\)), also den Anteil an systematischer Variation, die auf die 2 Faktoren zurückzuführen ist (diese kann ähnlich der Reliabilität interpretiert werden). u2 ist die “uniqueness” (\(u^2\)), also der unerklärte Anteil. Diese wird auch oft Spezifität genannt, da sie den für dieses Item spezifischen Varianzanteil beschreibt. Offensichtlich gilt \(u^2 = 1-h^2\) oder \(h^2 + u^2 = 1\). Unter den Faktorladungen erhalten wir Informationen über die Faktoren. SS loadings steht für “Sum of Squares loadings”, also die Quadratsumme der Faktorladungen. Diese ist gleich dem Eigenwert: \(\theta_j = \Sigma_{i=1}^p\lambda_{ij}^2 = \lambda_{1j}^2+\dots+\lambda_{pj}^2\) (Spaltenquadratsumme der Faktorladungen), mit \(p=\) Anzahl an Variablen (hier \(p=6\)). Allerdings gilt dies nur für den orthogonalen Fall. Sind die Faktoren korreliert, muss diese Korrelation berücksichtigt werden. Dazu später mehr! Proportion Var betitelt den Anteil der Variation, der durch die jeweiligen Faktoren erklärt werden kann. Cumulative Var kumuliert, also summiert, diese Anteile bis zum jeweiligen Faktor auf (\(\text{CumVar}_j = \sum_{k=1}^j\theta_k = \theta_1+\dots+\theta_j\), also \(\text{CumVar}_1=\theta_1\) und \(\text{CumVar}_2=\theta_1+\theta_2\)). Proportion Explained setzt die Variation, die durch die Faktoren erklärt wird, in Relation zur gesamten erklärten Varianz (d.h. hier summiert sich die erklärte Varianz immer zu 1, während sich die proportionale Varianz nur zu 1 aufsummiert, wenn die gesamte Variation im Datensatz auf die beiden Variablen zurückzuführen ist). Cumulative Proportion beschreibt das gleiche wie Cumulative Var, nur bezieht sie sich hier auf die Proportion Explained. Bei der Interpretation dieser Kennwerte ist zu bedenken, dass bei der EFA angenommen wird, dass die beobachteten Variablen Messfehler enthalten (also die Reliabilität nicht als 1 angenommen werden kann). Folglich ist die Kommunalität \(h^2\) nicht 1 und wir können nicht unbedingt davon ausgehen, dass die Faktoren die gesamte Variation der Daten erklären. All diese Koeffizienten kennen wir bereits aus der Sitzung zur PCA, wo wir diese im Hinblick auf eine PCA interpretierten. Dabei fiel uns auch auf, dass einige Koeffizienten in dieser Übersicht nicht mit allen Dezimalstellen angezeigt werden und es ggf. zu seltsamen Rundungsverfälschungen kommen kann. Aus diesem Grund hatten wir uns entschieden, die jeweiligen Koeffizienten und Informationen dem Objekt selbst zu entlocken, um diese Rundungsverfälschungen zu umgehen.
Außerdem werden durch diesen Befehl sehr viele Informationen ausgegeben. Aus diesen Gründen speichern wir uns diese Analyse als ein Objekt ab, welchem wir dann gezielt Informationen mit Hilfe von ...$... entlocken können. Welche Argumente entlockt werden können, kann beispielsweise mit names herausgefunden werden. Wir speichern das Objekt unter dem Namen two_factor ab.
two_factor <- fa(dataFR2, nfactors = 2, rotate = "varimax") names(two_factor) # mögliche Informationen## [1] "residual" "dof" "chi" "nh" ## [5] "rms" "EPVAL" "crms" "EBIC" ## [9] "ESABIC" "fit" "fit.off" "sd" ## [13] "factors" "complexity" "n.obs" "objective" ## [17] "criteria" "STATISTIC" "PVAL" "Call" ## [21] "null.model" "null.dof" "null.chisq" "TLI" ## [25] "RMSEA" "BIC" "SABIC" "r.scores" ## [29] "R2" "valid" "score.cor" "weights" ## [33] "rotation" "hyperplane" "communality" "communalities" ## [37] "uniquenesses" "values" "e.values" "loadings" ## [41] "model" "fm" "rot.mat" "Structure" ## [45] "method" "scores" "R2.scores" "r" ## [49] "np.obs" "fn" "Vaccounted"Beispielsweise erhalten wir mit $loadings die Faktorladungsmatrix sowie Informationen über die Eigenwerte. (Wichtig für später: Die richtigen Kommunalitäten werden mit $communality angefordert.)
two_factor$loadings## ## Loadings: ## MR1 MR2 ## E1 0.692 ## E2 -0.646 ## E3 0.819 -0.186 ## N1 0.837 ## N2 -0.580 ## N3 0.585 ## ## MR1 MR2 ## SS loadings 1.578 1.419 ## Proportion Var 0.263 0.236 ## Cumulative Var 0.263 0.499Hier ist relativ deutlich die Zuordnung zu den jeweiligen Faktoren zu sehen. Faktor 1 (MR1) entspräche post-hoc interpretiert (die Theorie wird also aus den Daten generiert; es sind auch andere Interpretationsansätze zulässig) der Extraversion, während der zweite Faktor (MR2) dem Neurotizismus entspräche. Indem wir hinter loadings eckige Klammern mit einem Komma setzten ([,]), bekommen wir alle Nachkommastellen ohne Runden angzeigt (hätten wir bspw. round auf die Ladungsmatrix oben angewendet, würden sich auch die Eigenwerte ändern, weswegen diese Ansicht sich nicht wirklich zur genauen Interpretation der Eigenwerte eignet! Hier hatten wir das Argument Vaccounted bereits im Rahmen der PCA kennengelernt):
two_factor$loadings[,] # ohne seltsames Runden## MR1 MR2 ## E1 0.69189323 -0.058067393 ## E2 -0.64577474 0.004122088 ## E3 0.81858640 -0.185912523 ## N1 -0.01345489 0.837407770 ## N2 0.09879742 -0.580348020 ## N3 -0.04734674 0.585385819Die Faktorladungsmatrix wird auch manchmal Mustermatrix genannt. Die Strukturmatrix enthält Informationen über die Korrelation der Items mit den jeweiligen Faktoren. Sie heißt Structure. Auch hier ist der Zusatz [,] sinnvoll!
two_factor$Structure[,]## MR1 MR2 ## E1 0.69189323 -0.058067393 ## E2 -0.64577474 0.004122088 ## E3 0.81858640 -0.185912523 ## N1 -0.01345489 0.837407770 ## N2 0.09879742 -0.580348020 ## N3 -0.04734674 0.585385819Wir sehen deutlich, dass die Strukturmatrix sich nicht von der Faktorladungsmatrix unterscheidet. Das liegt daran, dass die Faktoren noch als unkorreliert angenommen werden: somit ist die Faktorladungsmatrix gleich der Strukturmatrix. Genau aus diesem Grund hatten wir uns die Strukturmatrix auch nicht im Rahmen der PCA angesehen — dort hatten wir nur orthogonal rotiert.
Da wir nicht davon ausgehen können, dass die Faktoren unkorreliert sind, wollen wir die gleiche Analyse nun für oblique (“oblimin” in R) rotierte Faktoren durchführen.
two_factor_oblimin <- fa(dataFR2, nfactors = 2, rotate = "oblimin")Die einzig neue Information können wir unter With factor correlations of ablesen: die Korrelation zwischen den Faktoren. Im Output der obliquen Rotation ist zu erkennen, dass sich die Kommunalitäten nicht ändern. Wir können also nicht mehr Variation im Datensatz erklären. Die Varianz wird nur umverteilt, wie den veränderten Eigenwerten neben SS loadings zu entnehmen ist. Hier hat der erste Faktor einen etwas größeren Eigenwert als im orthogonalen Fall (entsprechend ist der 2. Eigenwert kleiner, da nicht mehr Variation erklärt wird):
two_factor$Vaccounted## MR1 MR2 ## SS loadings 1.5780086 1.4186844 ## Proportion Var 0.2630014 0.2364474 ## Cumulative Var 0.2630014 0.4994488 ## Proportion Explained 0.5265833 0.4734167 ## Cumulative Proportion 0.5265833 1.0000000two_factor_oblimin$Vaccounted## MR1 MR2 ## SS loadings 1.6065736 1.3901195 ## Proportion Var 0.2677623 0.2316866 ## Cumulative Var 0.2677623 0.4994488 ## Proportion Explained 0.5361155 0.4638845 ## Cumulative Proportion 0.5361155 1.0000000Schauen wir uns die Ladungsmatrix an, …
two_factor_oblimin$loadings[,] # Ladungsmatrix## MR1 MR2 ## E1 0.70055173 0.03946625 ## E2 -0.65623412 -0.08729631 ## E3 0.82326401 -0.07142273 ## N1 0.02609114 0.84195602 ## N2 0.07286715 -0.57082957 ## N3 -0.02032830 0.58319228… so ist post-hoc interpretiert anzunehmen, dass der erste Faktor die Extraversion abbildet und der zweite den Neurotizismus.
Entlocken Sie doch mal dem Objekt two_factor_oblimin die latente Kovarianzmatrix, also die Kovarianzmatrix der latenten Variablen. Tipp, der griechische Buchstabe in diesem Zusammenhang ist häufig \(\Phi\). Die resultierende Matrix sieht so aus:
Als neue Information entnehmen wir der Korrelationsmatrix der Faktoren, dass die beiden Faktoren negativ korreliert sind zu -0.19. Nun wollen wir nachschauen, ob sich tatsächlich die Strukurmatrix im oblique-rotierten Fall von der Faktorladungsmatrix unterscheidet:
two_factor_oblimin$loadings[,]## MR1 MR2 ## E1 0.70055173 0.03946625 ## E2 -0.65623412 -0.08729631 ## E3 0.82326401 -0.07142273 ## N1 0.02609114 0.84195602 ## N2 0.07286715 -0.57082957 ## N3 -0.02032830 0.58319228two_factor_oblimin$Structure[,]## MR1 MR2 ## E1 0.6932416 -0.09029319 ## E2 -0.6400647 0.03425442 ## E3 0.8364933 -0.22391151 ## N1 -0.1298599 0.83712330 ## N2 0.1785989 -0.58432636 ## N3 -0.1283499 0.58695759Sie sehen, dass sich nun die Strukturmatrix von der Faktorladungsmatrix unterscheidet. Die Unterschiede sind allerdings nicht sehr groß, da die Korrelation zwischen den beiden Faktoren mit -0.19 betragsmäßig nicht sonderlich groß ausfällt. Weitere Informationen und wie die beiden Matrizen ineinander überführbar sind, erfahren Sie im Appendix C. In Appendix D erfahren Sie, wie Sie Kommunalitäten und Eigenwerte im Rahmen der EFA nur mit Hilfe der loadings und der Faktorkorrelation Phi bestimmen. Falls Sie sich nun zu Recht wundern, dass Appendix B fehlt, dann sei gesagt, dass dieser alle Analysen am vollständigen Datensatz durchführt und es durch die Abhängigkeiten der Daten in den Appendizes Sinn macht, diesen zwar im Text später zu erwähnen aber inhaltlich vorzuziehen.
Die Frage ist nun, ob unser Modell überhaupt zu den Daten passt.
Exploratorische Maximum-Likelihood-Faktorenanalyse (ML-EFA)
Wir möchten unsere Analysen nun gegen andere konkurrierende Modelle absichern sowie untersuchen, ob unser zweifaktorielles Modell überhaupt zu den Daten passt. Hierzu müssen wir annehmen, dass unsere Daten multivariat normalverteilt sind. Wie man diese Annahme zumindest deskriptiv untersucht, hatten wir im Zusammenhang mit den Voraussetzungen von statistischen Verfahren kennengelernt (Mahalanobisdistanz sollte approximativ \(\chi^2\)-verteilt sein, siehe hierzu im Appendix E nach, auch weitere Tests sind möglich: bspw. Mardia’s Test). Mit Hilfe dieser Verteilungsannahme können wir die Maximum-Likelihood-Schätzmethode nutzen, um die Parameter in unserem Modell zu schätzen. Die Likelihood ist die Wahrscheinlichkeit unserer Daten, gegeben das Modell. Sie hängt somit von den beobachteten Daten ab (den Ausprägungen der Personen auf den Variablen), hat die Gestalt unseres Modells und wird parametrisiert durch die Parameter in unserem Modell. Die durch das Modell implizierte Kovarianz oder Korrelationsmatrix der beobacheten Variablen wird mit \(\Sigma\) betitelt und setzt sich folgendermaßen zusammen:
\[\Sigma := \Lambda\Phi \Lambda' + \Theta.\] Dabei ist \(\Lambda\) die Matrix der Faktorladungen, \(\Phi\) die Kovarianz- oder Korrelationsmatrix der Faktoren und \(\Theta\) die Kovarianzmatrix der Fehler.
Im unkorrelierten/orthogonalen Fall sähe die Matrix so aus: \(\Sigma := \Lambda \Lambda' + \Theta\), da hier \(\Phi\) die Einheitsmatrix ist und \(\Lambda\) demzufolge einfach mit 1 multipliziert wird! Diese ist somit sehr nah an der implizierten Matrix im Rahmen der PCA, welche sich durch \(\Lambda \Lambda'\) ergab. Wir erkennen erneut, dass bei der PCA die Messfehler nicht mitmodelliert werden (deren Varianzen stecken in \(\Theta\)).
Unter der Normalverteilungsannahme brauchen wir nur (Ko-)Varianzen und Mittelwerte, um unsere Variablen vollständig zu beschreiben. In der Schätzung der ML-EFA geht es uns darum, die Parameter in \(\Lambda\), \(\Phi\) und \(\Theta\) so zu bestimmen, dass sich die behauptete Kovarianzmatrix \(\Sigma\) von unserer beobachteten Kovarianzmatrix \(S\) so wenig unterscheidet wie möglich. Dazu bestimmen wir mit der Maximum-Likelihood-Schätzung die Werte für z.B. Faktorladungen, die es maximal wahrscheinlich machen, dass unsere Daten enstehen würden, wenn unsere EFA das richtige Modell wäre.
Um mit Hilfe von fa eine ML-EFA durchzuführen, muss dem Argument fm die entsprechende Bezeichnung "ml" übergeben werden.
two_factor_ML <- fa(dataFR2, nfactors = 2, rotate = "oblimin", fm = "ml") two_factor_ML## Factor Analysis using method = ml ## Call: fa(r = dataFR2, nfactors = 2, rotate = "oblimin", fm = "ml") ## Standardized loadings (pattern matrix) based upon correlation matrix ## ML1 ML2 h2 u2 com ## E1 0.69 0.04 0.47 0.53 1.0 ## E2 -0.65 -0.06 0.41 0.59 1.0 ## E3 0.83 -0.06 0.71 0.29 1.0 ## N1 0.03 0.84 0.70 0.30 1.0 ## N2 0.10 -0.57 0.35 0.65 1.1 ## N3 -0.01 0.59 0.36 0.64 1.0 ## ## ML1 ML2 ## SS loadings 1.61 1.39 ## Proportion Var 0.27 0.23 ## Cumulative Var 0.27 0.50 ## Proportion Explained 0.54 0.46 ## Cumulative Proportion 0.54 1.00 ## ## With factor correlations of ## ML1 ML2 ## ML1 1.00 -0.18 ## ML2 -0.18 1.00 ## ## Mean item complexity = 1 ## Test of the hypothesis that 2 factors are sufficient. ## ## The degrees of freedom for the null model are 15 and the objective function was 1.47 with Chi Square of 183.82 ## The degrees of freedom for the model are 4 and the objective function was 0.07 ## ## The root mean square of the residuals (RMSR) is 0.04 ## The df corrected root mean square of the residuals is 0.07 ## ## The harmonic number of observations is 129 with the empirical chi square 5.6 with prob < 0.23 ## The total number of observations was 129 with Likelihood Chi Square = 8.75 with prob < 0.068 ## ## Tucker Lewis Index of factoring reliability = 0.893 ## RMSEA index = 0.096 and the 90 % confidence intervals are 0 0.184 ## BIC = -10.69 ## Fit based upon off diagonal values = 0.99 ## Measures of factor score adequacy ## ML1 ML2 ## Correlation of (regression) scores with factors 0.90 0.88 ## Multiple R square of scores with factors 0.80 0.77 ## Minimum correlation of possible factor scores 0.61 0.55Wir sehen, dass diesmal die Schätzmethode “ml” ist. Auch die Faktoren heißen nun ML1 und ML2. Die Faktorladungen im ML-EFA Modell mit obliquer Rotation sehen den Faktorladungen aus unserer vorigen Analyse sehr ähnlich.
Uns interessiert nun die Modellpassung, also inwiefern unsere Daten von unserem behaupteten Modell abweichen. $STATISTIC und $PVAL entlocken der Analyse (abgespeichert als Objekt) den \(\chi^2\)-Wert und den zugehörigen p-Wert bei 4 Freiheitsgraden. Verwirrenderweise gibt es zusätzlich $chi, was den empirisch und nicht likelihoodbasierten \(\chi^2\)-Wert ausgibt, welcher sinnvoll ist, wenn Modellvoraussetzungen nicht erfüllt sind.
two_factor_ML$STATISTIC # Likelihood basierter Chi²-Wert## [1] 8.749298two_factor_ML$PVAL # p-Wert## [1] 0.06768059Dem ist zu entnehmen, dass auf dem Signifikanzniveau von 5% die Hypothese auf Passung der Kovarianz unserer Daten mit der modellimplizierten Kovarianz in der Population nicht verworfen wird. Die Daten widersprechen dem zweifaktoriellen Modell nicht (die untersuchte Null-Hypothese ist: \(H_0: \Sigma_{Daten}=\Sigma_{2-fakt.}\), also, dass die Datenkovarianzmatrix sich durch die Kovarianzmatrix eines 2-faktoriellen EFA-Modells darstellen lässt). Vielleicht reicht auch ein Faktor aus, um die Variation in unserem Datensatz zu beschreiben? Wir wollen unser Modell mit zwei Faktoren gegen eines mit einem und eines mit drei Faktoren absichern.
Modellvergleich: ML-EFA
Das einfaktorielle Modell erhalten wir ganz einfach via:
one_factor_ML <- fa(dataFR2, nfactors = 1, rotate = "oblimin", fm = "ml") one_factor_ML$STATISTIC # Chi²-Wert## [1] 76.76935one_factor_ML$PVAL # p-Wert## [1] 7.063217e-13Das einfaktorielle Modell scheint nicht zu den Daten zu passen (Mit einer Irrtumswahrscheinlichkeit von 5% ist davon auszugehen, dass in der Population die Differenz zwischen der Populationskovarianzmatrix und der modellimplizierten Kovarianzmatrix, bzw. der daraus folgenden Likelihoods, nicht 0 ist.). Dennoch wollen wir dies genau wissen und vergleichen die beiden Modelle direkt miteinander. Für einen solchen Vergleich ist es notwendig, dass es sich bei den beiden Modellen um geschachtelte Modelle handelt. Das bedeutet, dass ein Modell durch Restriktionen von Modellparametern aus dem anderen Modell erzeugt werden kann. Das einfaktorielle Modell lässt sich aus dem zweifaktoriellen Modell durch die Restriktion gewinnen, dass alle Ladungen auf dem Faktor 0 sind und die Varianz dieses Faktors dementsprechend ebenfalls 0 ist.
Mit Hilfe des anova-Befehls, welchen wir schon bei einigen anderen Modellvergleichen im Rahmen der Regression, der logistischen Regression sowie der Multi-Level Modelle kennengelernt haben, lässt sich nun das einfaktorielle mit dem zweifaktoriellen Modell vergleichen.
anova(one_factor_ML, two_factor_ML)## Model 1 = fa(r = dataFR2, nfactors = 1, rotate = "oblimin", fm = "ml") ## Model 2 = fa(r = dataFR2, nfactors = 2, rotate = "oblimin", fm = "ml")| 1 | 9 | NA | 76.77 | NA | NA | NA | 142.43 | NA | NA | 33.03 | NA |
| 2 | 4 | 5 | 8.75 | 68.02 | 0 | 13.6 | 5.60 | 136.83 | 27.37 | -10.69 | -43.72 |
Zunächst bekommen wir angezeigt, welche Modelle unter welchem Kürzel gegeneinander getestet werden. Die Modellnummer steht im ANOVA-Output entsprechend für das jeweilige Modell. In der Zeile 2 steht also der Output für das 2-faktorielle Modelle und am Ende dieser Zeile steht auch der Modellvergleich.
In der ersten Spalte stehen beispielsweise die Freiheitsgrade der Modelle (df). Daneben steht die Differenz der Freiheitsgrade (d.df) und dahinter stehen verschiedene Fit-Maße, bzw. Modellvergleiche. Wir müssen im Bereich des chiSq und nicht bei empirical (eine Näherung des \(\chi^2\) Wertes, wenn Annahmen verletzt sind) nachsehen. Der Output ist immer so aufgebaut, dass zunächst der Wert pro Modell (chiSq oder empirical) angezeigt wird und anschließend die Differenz (d.chiSq oder d.empirical) sowie die Signifikanzentscheidung berichtet werden (PR test, welche allerdings nicht bei der Näherung angezeigt wird). Außerdem wird noch eine Rubrik test, bzw. test.echi angezeigt, welche noch einmal die \(\chi^2\)-Differenz geteilt durch die Freiheitsgrade repräsentiert. Der \(\chi^2\)-Differenzwert liegt bei 68.02 mit einem zugehörigen p-Wert von de facto 0. d.df (häufig \(\Delta df\)) gibt die Anzahl an Freiheitsgraden der \(\chi^2\)-Differenz (hier: df = 5) des Differenzentests an (hier wurden die Freiheitsgrade der beiden Modelle voneinander abgezogen). Ganz hinten wird noch das Bayes Information Criterion BIC, sowie dessen Differenz d.BIC aufgeführt. Dieses Informationskriterium werden wir bei der CFA und deren Modellpassung noch einmal genauer betrachten.
Insgesamt wird die Null-Hypothese, dass beide Modell die Daten gleich gut beschreiben, verworfen. Wir entscheiden uns — Ockhams Rasiermesser folgend (siehe Eid et al., 2017, p. 787) — somit für das Modell mit mehr Parametern - das weniger restriktive Modell - welches die Daten besser beschreibt: hier das zweifaktorielle Modell. Nun ist die Frage, ob wir das Modell noch weiter verbessern können, indem wir drei anstatt zwei Faktoren verwenden, um die Kovariation zwischen den Variablen zu beschreiben.
# Passt auch eines mit 3 Faktor? three_factor_ML <- fa(dataFR2, nfactors = 3, rotate = "oblimin", fm = "ml") three_factor_ML$STATISTIC # Chi²-Wert## [1] 0.0328432three_factor_ML$PVAL # p-Wert## [1] NADas dreifaktorielle Modell beschreibt die Daten perfekt. Das liegt daran, dass es im dreifaktoriellen Modell genauso viele Parameter gibt, wie es empirische Informationen im Datensatz gibt. Demnach lässt sich die empirische Korrelationsmatrix perfekt durch die modelltheoretische Korrelationsmatrix (diejenige Korrelationsmatrix, die sich ergibt, wenn nur die Beziehungen zwischen den Variablen bestehen, die durch das Modell angenommen werden) darstellen. Ein Test auf Modellpassung ist in diesem Fall nicht möglich und auch nicht nötig (deshalb wird beim $PVAL nichts bzw. NA ausgegeben). Nun vergleichen wir die beiden Modelle (es ist sehr sinnvoll, das komplexere Modell rechts hin zuschreiben, da es ansonsten bei manchen Analysemethoden zu negativen \(\chi^2\)-Werten kommen kann, außerdem zeigt man damit auf, wie die Schachtelung der Modelle funktioniert [allerdings sichert dies nicht die Schachtelung, dies ist eine theoretische Überlegung, die die Software leider in den meisten Fällen nicht für uns übernehmen kann]. Hier: das 2-faktorielle Modell ist ein Spezialfall des 3-faktoriellen Modells):
anova(two_factor_ML, three_factor_ML)## Model 1 = fa(r = dataFR2, nfactors = 2, rotate = "oblimin", fm = "ml") ## Model 2 = fa(r = dataFR2, nfactors = 3, rotate = "oblimin", fm = "ml")| 1 | 4 | NA | 8.75 | NA | NA | NA | 5.60 | NA | NA | -10.69 | NA |
| 2 | 0 | 4 | 0.03 | 8.72 | 0.07 | 2.18 | 0.02 | 5.58 | 1.4 | -10.69 | NA |
Der \(\chi^2\)-Differenzwert liegt hier bei 8.72 mit einen zugehörigen p-Wert von 0.07. d.df liegt bei 4 (\(\Delta df\) = 4). Somit wird die Null-Hypothese, dass beide Modell die Daten gleich gut beschreiben, bzw. dass das sparsamere Modell die Daten genauso gut beschreiben kann, wie das komplexere Modell (\(H_0:\Sigma_{3-Fakt.} = \Sigma_{2-Fakt.}\); im Gegensatz zum anova-Befehl, steht hier das komplexere Modell links), nicht verworfen. Aus diesem Grund entscheiden wir uns - Ockhams Rasiermesser folgend (siehe Eid et al., 2017, p. 787) - für das sparsamere Modell, also jenes, welches weniger Parameter enthält und somit restriktiver ist, hier: das zweifaktorielle Modell. Denn in der Wissenschaft streben wir danach, Modelle möglichst einfach zu halten!
Wenn Sie davon noch nicht genug haben, so können Sie in Appendix B nachlesen, wie eine EFA am gesamten (gekürzten) Datensatz durchgeführt wird. Dort stehen keine neuen Informationen zur Durchführung, Sie sollten es folglich eher als Übung ansehen, falls Sie sich entschließen, Appendix B durchzuarbeiten!
Die Zuordnung, die wir hier gefunden haben, entspringt der spezifischen Stichprobe, die wir untersucht haben. Wenn wir a priori aufgestellte Theorien über die Faktorstruktur prüfen wollen, können wir uns der konfirmatorischen Faktorenanalyse bedienen, die wir in der nächsten Sitzung betrachten.
Den gesamten R-Code, der in dieser Sitzung genutzt wird, können Sie hier herunterladen.
Appendix A
Kürzen des DatensatzesFalls Sie die Originaldaten auf openpsychometrics.org als .zip herunterladen wollen, so können Sie diesen auf die hier verwendeten Daten wie folgt kürzen:
data_full <- read.table("BIG5/data.csv", header = T, sep = "\t") # nach entpacken des .zip liegen die Daten in einem Ordner namens Big5 ### Entferne leere Zeilen und Zeilen mit Missings aus dem Datensatz ind <- apply(data_full, 1, FUN = function(x) any(is.na(x))) # erzeuge eine Variable, welche TRUE ist, wenn mindestens ein Eintrag pro Zeile fehlt und ansonsten FALSE anzeigt data_full <- data_full[!ind, ] # Wähle nur diejenigen Zeilen, in denen unsere Indikatorvariable "ind" NICHT TRUE anzeigt, also wo alle Einträge vorhanden sind # !ind (Ausrufezeichen vor ind) negiert die Einträge in ind (Prüfe bspw. !FALSE == TRUE, nicht false ist gleich true) ### Shorten Data Set Big5 <- data_full[, c(2:4,7,7+rep(1:3,5)+sort(rep(seq(0,40,10),3)))] # Verwende nur 3 Items pro Skala plus einige demografische Items Big5 <- data.frame(Big5) # Schreibe Datensatz als data.frame save(list = c("Big5"), file = "Big5.rda") # Speichere gekürzten Datensatz in .rda file (dem R-internen Datenformat) ## --> Das ist auch der Datensatz, den wir weiter verwendet haben!Appendix B
ML-EFA für den gesamten (gekürzten) DatensatzFür den vollen Datensatz mit jeweils drei Items pro Persönlichkeitsfacette, nehmen wir zunächst an, dass es 5 Faktoren gibt. Dies wird hier allerdings nicht durch die Parallelanalyse gestützt. Wir müssen die Funktion fa.parallel diesmal auf den vollen (gekürzten) Datensatz anwenden; nämlich auf dataFR.
fa.parallel(x = dataFR,fa = "fa")Hier scheinen eher 4 Faktoren sinnvoll. Wir prüfen dennoch erstmal unsere inhaltliche Hypothese, dass es 5 Faktoren gibt, mit Hilfe der oblique Rotierten ML-EFA.
five_factor_ML <- fa(dataFR, nfactors = 5, rotate = "oblimin", fm = "ml") five_factor_ML$STATISTIC## [1] 44.07717five_factor_ML$PVAL # Modell wird durch die Daten nicht verworfen## [1] 0.3031972Die Daten scheinen unserem Modell mit 5 Faktoren nicht zu widersprechen. Schauen wir uns die Faktorladungen an, um die Faktoren inhaltlich zu interpretieren.
five_factor_ML$loadings # auch nochmal ohne [,] um die Ausblendehilfe von psych als Unterstützung für die Zuordnung zu nutzen## ## Loadings: ## ML4 ML3 ML1 ML2 ML5 ## E1 0.688 ## E2 -0.643 0.155 ## E3 0.813 0.117 ## N1 0.433 -0.340 ## N2 0.986 ## N3 0.920 ## A1 -0.227 0.160 0.203 -0.276 ## A2 0.655 0.242 ## A3 -0.186 0.159 0.197 ## C1 0.170 0.208 0.179 -0.355 ## C2 0.730 ## C3 0.177 0.140 0.145 -0.278 ## O1 0.998 ## O2 0.126 0.247 -0.214 -0.106 ## O3 0.229 0.163 0.189 ## ## ML4 ML3 ML1 ML2 ML5 ## SS loadings 2.091 1.328 1.274 1.194 0.869 ## Proportion Var 0.139 0.089 0.085 0.080 0.058 ## Cumulative Var 0.139 0.228 0.313 0.392 0.450five_factor_ML$loadings[,] # alle Dezimalstellen anzeigen## ML4 ML3 ML1 ML2 ML5 ## E1 0.688468319 -0.03665453 -0.012193249 0.02787857 0.071260642 ## E2 -0.643272367 0.08577303 0.155240994 0.09656023 0.065735002 ## E3 0.812764373 -0.05121616 0.116888237 0.01806219 -0.076129365 ## N1 -0.022613674 0.43257679 -0.339987402 -0.07415779 0.069005051 ## N2 0.017710987 -0.02860957 0.985613730 -0.02537580 0.026025668 ## N3 -0.004230572 0.91962125 -0.026913718 -0.00657639 -0.013229825 ## A1 -0.227423669 0.15957275 0.203222904 -0.08704521 -0.275728683 ## A2 0.655281001 0.24198774 0.006033115 0.01175666 0.092166503 ## A3 -0.186178370 0.15918711 0.095110929 0.19652141 0.097407381 ## C1 0.056714149 0.16981702 0.207576065 0.17890272 -0.354809510 ## C2 -0.015398173 0.01818279 0.084998138 0.01776008 0.729941525 ## C3 0.014355504 0.17741965 0.140061799 0.14464044 -0.278431363 ## O1 0.002352582 -0.01037494 -0.023817340 0.99812410 -0.001488256 ## O2 0.125971083 0.24681060 0.029753625 -0.21358237 -0.106264287 ## O3 -0.080478366 0.22862665 0.163239313 0.18923154 0.082298847Durch die Rotation sind auch hier die Faktoren anders nummeriert. Der erste Faktor ist hier ML4 (dieser Faktor ist der erste in der Liste,
da hier der Eigenwerte nach Rotation maximal ist; vor Rotation hatte ML4 den viert größten Eigenwert). Die höchsten Faktorladungen mit diesem Faktor haben die Items \(E_1\), \(E_2\), \(E_3\) und \(A_2\). Somit könnte man diesen am ehesten post-hoc (die Theorie wird also aus den Daten generiert; es sind auch andere Interpretationsansätze zulässig) als Extraversion interpretieren. Allerdings scheinen die Items der Extraversion
einiges mit jenen der Verträglichkeit (\(A_{...}\)) gemeinsam zu haben. Dies könnte mit unter damit zusammen hängen, dass diese beiden Items am ehesten etwas mit sozialer Erwünschtheit zu tun haben. Auf dem Faktor ML3 laden vor allem die Items \(N_1\) und \(N_3\). Allerdings lädt \(N_2\) besonders auf ML1.
Dies könnte durchaus daran liegen, dass \(N_1\) (“I get stressed out easily.”) und
\(N_3\) (“I worry about things.”) negativ kodiert sind, während \(N_2\) (“I am relaxed most of the time.”) positiv kodiert ist und die erstgenannten Items somit mehr gemeinsam haben als die inhaltliche Zuordnung zum Neurotizismus. Somit scheint ML3 ein Faktor der Sorgen, also des Neurotizismus zu sein, während ML1 eher für einen Faktor der Gelassenheit spricht; beispielsweise laden hier auch positiv Items der Extraversion und
Verträglichkeit. Das die Items des Neurotizismus auf unterschiedlichen Faktoren laden und unterschiedliche Vorzeichen aufweisen, kann für Methodeneffekte sprechen (Unterschiede die zustande kommen, da unterschiedliche Methoden, hier: Itemformulierungen [positiv vs. negativ], verwendet werden.). Auch auf ML2 und ML5 laden jeweils nur ein Item besonders stark: \(O_1\) auf ML2 und \(C_2\) auf ML5. Insgesamt muss
geschlussfolgert werden, dass zwar die fünffaktorielle Struktur durch die Daten nicht verworfen wird, aber dass die oblique rotierte Lösung keine eindeutige Zuordnung der Items aufweist. Allerdings bringt auch eine varimax-rotierte Lösung keine Verbesserung der Interpretierbarkeit, da diese neben der Einfachstruktur in der Faktorladungsmatrix noch die Unkorreliertheit der Faktoren berücksichtigen muss (in der varimax-rotierten Lösung sind dafür die Konstrukte nicht überlappend,
was allerdings auch eine strenge Annahme ist):
was wahrscheinlich daran liegt, dass die Kovariation zwischen den Faktoren nicht sehr groß ist:
round(five_factor_ML$Phi, 2) # runde auf 2 Nachkommastellen## ML4 ML3 ML1 ML2 ML5 ## ML4 1.00 -0.05 0.14 -0.07 -0.09 ## ML3 -0.05 1.00 -0.30 -0.02 -0.02 ## ML1 0.14 -0.30 1.00 0.04 0.02 ## ML2 -0.07 -0.02 0.04 1.00 0.00 ## ML5 -0.09 -0.02 0.02 0.00 1.00fa(dataFR, nfactors = 5, rotate = "varimax", fm = "ml")$Phi## NULLNULL zeigt hierbei an, dass es das $Phi -Objekt nicht gibt. Tatsächlich ist die Kovarianzmatrix im orthogonalen Fall die Einheitsmatrix der Dimension \(5\times5\): \[\begin{pmatrix} 1& 0&0&0&0 \\ 0& 1&0&0&0 \\ 0& 0&1&0&0\\ 0& 0&0&1&0 \\ 0& 0&0&0&1 \end{pmatrix}\] In R:
diag(5) # Einheitsmatrix der Dimension 5x5.## [,1] [,2] [,3] [,4] [,5] ## [1,] 1 0 0 0 0 ## [2,] 0 1 0 0 0 ## [3,] 0 0 1 0 0 ## [4,] 0 0 0 1 0 ## [5,] 0 0 0 0 1Modellvergleich: ML-EFA
Wir schauen uns nun die Passung unseres Modells im Vergleich zu einem vier- und einem sechsfaktoriellen Modell an.
four_factor_ML <- fa(dataFR, nfactors = 4, rotate = "oblimin", fm = "ml") four_factor_ML$STATISTIC## [1] 73.04596four_factor_ML$PVAL## [1] 0.023097Das vierfaktorielle Modell wird durch die Daten verworfen (\(p<0.05\)). Nun zum Modellvergleich:
anova(four_factor_ML, five_factor_ML)## Model 1 = fa(r = dataFR, nfactors = 4, rotate = "oblimin", fm = "ml") ## Model 2 = fa(r = dataFR, nfactors = 5, rotate = "oblimin", fm = "ml")| 1 | 51 | NA | 73.05 | NA | NA | NA | 105.81 | NA | NA | -174.80 | NA |
| 2 | 40 | 11 | 44.08 | 28.97 | 0 | 2.63 | 47.94 | 57.87 | 5.26 | -150.32 | 24.49 |
Wir entscheiden uns hier nun für das fünffaktorielle Modell. Nun wollen wir uns das fünffaktorielle Modell noch im Vergleich zum sechsfaktoriellen Modell ansehen.
six_factor_ML <- fa(dataFR, nfactors = 6, rotate = "oblimin", fm = "ml") six_factor_ML$STATISTIC## [1] 29.19415six_factor_ML$PVAL # Modell wird durch die Daten nicht verworfen## [1] 0.5074152Dem sechsfaktoriellen Modell widersprechen die Daten genauso wenig, wie dem fünffakoriellen (beide \(p>0.05\)). Dies war zu erwarten, da wir durch Hinzunahme des sechsten Faktors die Komplexität des Modell erhöht haben, wodurch sich das Modell stärker der konkreten Datenlage annähern kann. Mehr Faktoren bedeuten immer eine detailgetreuere Abbildung der ursprünglichen Datenlage (siehe auch Eid et al., 2017, Kapitel 25).
anova(five_factor_ML, six_factor_ML)## Model 1 = fa(r = dataFR, nfactors = 5, rotate = "oblimin", fm = "ml") ## Model 2 = fa(r = dataFR, nfactors = 6, rotate = "oblimin", fm = "ml")| 1 | 40 | NA | 44.08 | NA | NA | NA | 47.94 | NA | NA | -150.32 | NA |
| 2 | 30 | 10 | 29.19 | 14.88 | 0.14 | 1.49 | 28.63 | 19.31 | 1.93 | -116.60 | 33.72 |
Der \(\chi^2\)-Differenzwert liegt hier bei 14.88 mit einen zugehörigen p-Wert von 0.14 mit \(\Delta df\) = 10. Mit diesem Test wird geprüft, ob das sparsamere Modell die Daten schlechter abbildet. Die Nullhypothese ist also, dass das sparsamere Modell die Daten genauso gut beschreiben kann, wie das komplexere Modell (\(H_0:\Sigma_{6-Fakt.} = \Sigma_{5-Fakt.}\)). Da in diesem Fall der p-Wert größer als \(.05\) ist, wird diese Nullhypothese nicht verworfen und wir entscheiden uns — Ockhams Rasiermesser folgend (siehe Eid et al., 2017, p. 787) — für das sparsamere Modell.
Wir hätten auch mehrere Tests gleichzeitig durchführen können. Allerdings sollten nicht beliebig konkurriende Theorien getestet werden — Stichwort Alpha-Inflation!
anova(four_factor_ML, five_factor_ML, six_factor_ML)## Model 1 = fa(r = dataFR, nfactors = 4, rotate = "oblimin", fm = "ml") ## Model 2 = fa(r = dataFR, nfactors = 5, rotate = "oblimin", fm = "ml") ## Model 3 = fa(r = dataFR, nfactors = 6, rotate = "oblimin", fm = "ml")| 1 | 51 | NA | 73.05 | NA | NA | NA | 105.81 | NA | NA | -174.80 | NA |
| 2 | 40 | 11 | 44.08 | 28.97 | 0.00 | 2.63 | 47.94 | 57.87 | 5.26 | -150.32 | 24.49 |
| 3 | 30 | 10 | 29.19 | 14.88 | 0.14 | 1.49 | 28.63 | 19.31 | 1.93 | -116.60 | 33.72 |