wissenschaftliche Güte der Instrumente

Die Skalen HePCoS-T (Therapieberufe), HePCoS-N (Pflegeberufe), HePCoS-M (Hebammen) und HePCoS-G (berufsübergreifend), die die Handlungssicherheit in den HePCoS-Kompetenzdimensionen messen, wurden auf Basis einer Konstruktionsstudie mit N=715 Teilnehmer*innen entwickelt. Details können Sie dem Technical Report (Grebe et al. 2021) entnehmen.

Für die Prüfung der Konstruktvalidität wurden elaborierte Verfahren aus dem Bereich der Item-Response-Theorie eingesetzt (Rating-Scale-Rasch-Modelle), wie sie etwa auch in den PISA-Studien zum Einsatz kommen. Dies unterscheidet die HePCoS-Skalen von anderen international veröffentlichten Selbsteinschätzungs-Instrumenten, die zumindest für die Pflege verfügbar sind (u.a. Meretoja et al. 2004, Nilsson et al. 2014, Finnbakk et al. 2015, Takase & Teraoka 2011, van de Mortel et al. 2020), und die auf der Basis klassischer Testtheorie (Faktorenanalysen und Reliabilitätsanalysen) validiert wurden.

Konstruktvalidität (Rasch-Analyse)

Alle Skalen erfüllen die folgenden Eigenschaften:

• Hauptachsenanalysen: exakt ein Faktor mit Eigenwert >1)
• Martin-Löf-Test: p>0,05
• Item-Infits (Mean Squared Fits): zwischen 0,5 und 1,5
• erwartungskonforme Verteilung der Skalenwerte zwischen den Qualifizierungsstufen Auszubilndende - Studierende - Fachpersonen

 Anzahl der Items und Reliabilitäten

Differential Item Functioning

Die Analyse des Differential Item Functioning (DIF) dient der Identifzierung von Items, die in verschiedenen Subgruppen systematisch unterschiedlich messen. Wenn DIF in einer Skala präsent ist, dann können die Scores der betreffenden Subgruppen nicht ohne weiteres verglichen werden, da Items in den jeweiligen Gruppen eine unterschiedliche Itemschwierigkeit aufweisen. Differential Item Funktioning wurde mittels Rachtrees (R-Package: psychotree; Strobl et al. 2015) bezogen auf die folgenden Faktoren geprüft.

• Berufsgruppe/ Studienrichtung
• Alter
• Geschlecht
• Hochschulreife
• Qualifizierungsprofil
• Beschäftigungsumfang
• Beschäftigungsart
• Berufserfahrung
• Setting

DIF ist in drei der Skalen präsent, bei allen handelt es sich um Skalen für die Therapieberufe (HePCoS-T). Hier zeigten sich systematisch unterschiedliche Itemschwierigkeiten in den Dimensionen 2 und 3 zwischen Lögopäd*innen einerseits und den Ergotherapeut*innen und Physiotherapeut*innen andererseits. In Dimension 1 ist DIF präsent bezogen auf die Berufserfahrung (Personen mit mehr als zehn Jahren Berufserfahrung gegenüber jenen mit geringerer Berufserfahren). In der Gruppe mit geringerer Berufserfahrung unterscheiden sich die Itemschwierigkeiten nochmals systematisch zwischen den Ergotherapeut*innen und  den beiden anderen Berufsgruppen.

Da in HepCoS-T präsente DIF stellt kein Problem dar, sofern nicht in heterogenen Gruppen hinsichtlich Berufszugehörigkeit und Berufserfahrung gemessen wird. Es ist möglicherweise durch den geringen Anteil von Fachpersonen aus der Logopädie und der Ergotherapie in der Konstruktionsstichprobe heraus zu erklären, so dass bei besserer Datenlage durch weitere Stichproben das DIF evtl. nicht mehr auftritt.