Spelling suggestions: "subject:"impersonnel assessment"" "subject:"ofpersonnel assessment""
1 |
Toward a periodic table of personality: mapping personality scales between the five-factor model and the circumplex modelWoods, S.A., Anderson, Neil 04 1900 (has links)
Yes / In this study we examine the structures of ten personality inventories widely used for personnel assessment, by mapping the scales of personality inventories (PIs) to the lexical Big Five circumplex model resulting in a ‘Periodic Table of Personality’. Correlations between 273 scales from ten internationally popular PIs with independent markers of the lexical Big Five are reported, based on data from samples in two countries (UK N = 286; USA N = 1,046), permitting us to map these scales onto the AB5C framework. Emerging from our findings we propose a common facet framework derived from the scales of the PIs in our study. These results provide important insights into the literature on criterion-related validity of personality traits, and enable researchers and practitioners to understand how different PI scales converge and diverge and how compound PI scales may be constructed or replicated. Implications for research and practice are considered.
|
2 |
The Effect of Community Evaluators on the Selection of Entry-Level Police OfficersHutchison, Eric 01 January 2019 (has links)
As a method of building relationships with the public, some police forces have integrated community members into the candidate assessment and selection process. The purpose of this quantitative correlational study was to determine the effect of integrating community evaluators as a new method in the assessment and selection process for police officers in a city police force. Media richness theory and general mental ability were used as a framework, and archival data from a large Midwest department of public safety were collected by filing two public records requests. Data from 2,510 police candidates were included. Quantitative data analysis was conducted using correlational and regression tests to examine rater agreement, subgroup differences (gender or race/ethnicity) in selection outcomes, and the predictive validity of a testing method as measured by academy performance with and without the integration of community evaluators. There was no evidence to suggest that integrating community evaluators into the assessment and selection process for entry-level police officers affected rater agreement or subgroup differences in selection outcomes. The findings from this study support positive social change by indicating that integrating the community into a structured assessment process did not impact selection outcomes as measured by gender, race/ethnicity, or academy performance, which may encourage public safety departments to build community relationships by inviting local residents to participate in the assessment and selection process for police officers. Other social change may include the effect that the integration of community members could have on applicant and community perceptions of the assessment and selection process for police officers.
|
3 |
Die Task-Analysis-Tools (TAToo) - Entwicklung, empirische und praktische Prüfungen eines Instrumentes für Anforderungsanalysen / Task-Analysis-Tools (TAToo) - Development, empirical and practical assessment of a job analysis instrumentKoch, Anna 19 July 2010 (has links) (PDF)
Das Anliegen der Arbeit war, den aktuellen Stand der Forschung zu Anforderungsanalysen in ein Instrument zu integrieren und dabei den Ansprüchen von Anwendern nach Praxistauglichkeit gerecht zu werden. Dafür wurden die Task-Analysis-Tools (TAToo) entwickelt und im Rahmen dieser Arbeit umfangreich geprüft. Die TAToo sind multimodal aufgebaut: Das Instrument basiert in der Theorie auf der Critical Incident Technique, enthält zusätzlich aber auch den Ansatz der Aufgabenbeschreibung, der Beschreibung von Knowledge, Skills, Abilities, der zukunftsorientierten Anforderungsanalyse und verschiedene methodische Durchführungsvarianten für die Datenerhebung in "Tool 1 – Erheben". Die Anforderungsanalyse mittels TAToo besteht aus drei Arbeitsschritten: (1) Erheben von Informationen zur analysierten Stelle in "Tool 1 – Erheben", (2) Erstellen eines Anforderungsprofiles aus diesen Informationen in "Tool 2 – Gruppieren" und (3) Bewerten des Anforderungsprofiles in "Tool 3 – Bewerten".
Studien 1 und 2: "Tool 1 – Erheben" als Fragebogen, Workshop und Interview:
Die Informationen zu einer Stelle oder Tätigkeit können in "Tool 1 – Erheben" in einem Workshop, einem Interview oder mit einem Fragebogen erhoben werden. Diese Durchführungsvarianten wurden in zwei Studien miteinander verglichen, wofür Datenmenge, Datenqualität und Teilnehmerbeurteilungen herangezogen wurden. Für die Datenmenge zeigte sich, dass mit dem Interview pro Teilnehmer die meisten erfolgsentscheidenden Situationen (5,4 pro Teilnehmer) und Verhaltensweisen (13,1 pro Teilnehmer) geschildert wurden. Workshop und Fragebogen lieferten insgesamt weniger Informationen als das Interview. Pro Situation wurden im Interview durchschnittlich 2,4 Verhaltensweisen, im Workshop 3,4 und im Fragebogen 2,0 geschildert. Damit schilderten die Teilnehmer im Workshop zu jeder Situation mehr Verhaltensweisen als im Interview und Fragebogen. Zur Datenqualität zeigte sich, dass allein mit einem Workshop, kein vollständiges Anforderungsprofil erstellt werden konnte. Hingegen waren 8 Interviews oder 29 Fragebögen ausreichend, um ein vollständiges Anforderungsprofil zu erstellen. Die Teilnehmer beurteilen die Handhabbarkeit und Verständlichkeit von Interview und Workshop vergleichbar positiv, den Fragebogen hingegen weniger positiv. Insgesamt zeigte sich, dass mit dem Interview, Fragebogen und Workshop grundsätzlich die Daten für "Tool 1 – Erheben" gesammelt werden können. Von der Datenqualität und der Datenmenge sollte das Interview bevorzugt vor dem Fragebogen als alleinige Methode eingesetzt werden. Der Workshop sollte entsprechend der Ergebnisse aus den Studien dieser Arbeit nur ergänzend zum Interview oder Fragebogen genutzt werden.
Studien 3 bis 6: Gütekriterien der TAToo:
Die Objektivität wurde für "Tool 3 – Bewerten" als Übereinstimmung der Teilnehmer bei der Bewertung der Wichtigkeit der Anforderungen und der jeweils operationalisierenden Kriterien bestimmt. Insgesamt wurde die Beurteilerübereinstimmung für elf Mitarbeitergruppen aus elf verschiedenen Tätigkeitsbereichen ermittelt, die jeweils ihr Anforderungsprofil anhand einer 5-stufigen Skala von gar nicht wichtig bis sehr wichtig bewerteten. Die prozentuale Übereinstimmung für die einzelnen Anforderungsprofile lag in einem Bereich 70-80%. Die ermittelten weighted Kappa-Koeffizienten lagen in einem Bereich, der als slight bis fair zu klassifizieren ist. Obwohl die Beurteilerübereinstimmung insgesamt eher niedrig war, können die Ergebnisse im Vergleich zu vorliegenden Studien als zufriedenstellend bezeichnet werden. Besonders positiv war, dass auch für kleinere Stichproben (hier N=3) noch akzeptable Werte für die prozentuale Übereinstimmung und den Kappawert erreicht werden konnten. Das spricht für einen effektiven Einsatz der TAToo in der Praxis. Zusammenfassend konnte gezeigt werden, dass mit "Tool 3 – Bewerten" Anwender aus der Praxis die Wichtigkeit von Anforderungen und den dazu gehörenden operationalisierenden Kriterien übereinstimmend bewerten.
Zur Prüfung der Validität wurden die Güte der Gruppierung von Verhaltensweisen zu Anforderungen in "Tool 2 – Gruppieren" und die Vollständigkeit der Anforderungen anhand der Beurteilung von Mitarbeitern untersucht. Die Ergebnisse waren sehr positiv und zeigten, dass 94% der Verhaltensweisen inhaltlich und begrifflich passend zu Anforderungen gruppiert wurden. Die Mitarbeiter beurteilten auch die Passung der Anforderungsprofile zu den tatsächlichen Anforderungen im Arbeitsalltag. Der Großteil der Mitarbeiter fand die eigene Tätigkeit zu 76-100% passend in den Anforderungsprofilen abgebildet. Diese Passung bestätigte sich auch bei der wiederholten Bewertung der Anforderungsprofile nach mindestens 16 Monaten. In einer weiteren Studie wurden die TAToo mit dem Fragebogen für Arbeitsanalysen und einem beobachteten erfahrungsgeleitet-intuitiven Vorgehen verglichen. Das Anforderungsprofil des FAA enthielt sehr viele irrelevante Items und wenig brauchbare Beschreibungen zur analysierten Tätigkeit. Das Anforderungsprofil der EIM enthielt nur abstrakte, nicht näher operationalisierte Anforderungsbegriffe. Es unterschied sich damit im Detailliertheitsgrad deutlich vom Anforderungsprofil der TAToo, das zusätzlich zu den Anforderungen umfangreiche Operationalisierungen in Form von Verhaltensweisen enthielt. Das Anforderungsprofil der TAToo war deshalb am besten für die Personalarbeit nutzbar. Diese Ergebnisse bestätigten sich auch in den Beurteilungen durch Subject Matter Experts (SME). Sie beurteilten verschiedene Kriterien aus Qualitätsstandards für Anforderungsanalysen sehr positiv für die TAToo und deutlich negativ für den FAA. Das Anforderungsprofil der EIM wurde im Vergleich zu den TAToo ähnlich positiv beurteilt, war für die SME allerdings zu wenig konkret. Zusammenfassend konnte gezeigt werden, dass mit den TAToo Anforderungsprofile zutreffend und passgenau erstellt werden können. Es zeigen sich deutliche Vorteile gegenüber dem FAA und der EIM hinsichtlich der zutreffenden Beschreibung einer Position, hinsichtlich wichtiger Qualitätskriterien für Anforderungsprofile und in Bezug auf den Nutzen der Ergebnisse für die Personalarbeit eines Unternehmens.
Die Nebengütekriterien Ökonomie und Nützlichkeit wurden anhand der Kriterien von Lienert und Raatz beurteilt. Es zeigten sich dabei zufriedenstellende Beurteilungen für die Durchführungszeit, die anhand des tatsächlichen Aufwandes und anhand von Mitarbeiterbeurteilungen erfasst wurde. Es zeigte sich, dass im Vergleich zur Erstversion der TAToo der zeitliche Aufwand für die Mitarbeiter verringert werden konnte. Ebenso positiv zu beurteilen sind der geringe Materialaufwand und die Möglichkeit der Gruppendurchführung der TAToo als Fragebogen oder Workshop. Mitarbeiter der Personalabteilung einer Organisation beurteilten die Nützlichkeit der TAToo ebenfalls positiv und konnten sich einen erneuten Einsatz des Instrumentes gut vorstellen.
Studie 7: Entwicklung und Prüfung einer Instruktion für das Gruppieren von Verhaltensweisen zu Anforderungen:
In der letzten Studie der Arbeit wurde für die Gruppierung der Verhaltensweisen zu Anforderungen in "Tool 2 – Gruppieren" eine Instruktion erstellt und bei der Anwendung geprüft. An der Prüfung der Instruktion nahmen Laien, ohne Vorerfahrung in der Gruppierung teil. Sie gruppierten je-weils zu dritt in insgesamt 10 Workshops allein anhand der Instruktion 79 Verhaltensweisen zu An-forderungen. Anhand von Beurteilerübereinstimmungen wurden die Anforderungsprofile dieser Gruppen miteinander verglichen. Für die prozentuale Übereinstimmung wurden hohe Werte von durchschnittlich 74% erzielt. Diese hohe Übereinstimmung zeigte sich auch in einem mittleren Wert für Cramers V von .47 sowie unerwartet hohen Kappa-Koeffizienten in einem Bereich von fair bis moderate. Diese hohen Beurteilerübereinstimmungen spiegelten sich auch in sehr positiven Beurteilungen zur Verständlichkeit und Handhabbarkeit der Instruktion aus dem Blickwinkel der Anwender wider.
Schlussfolgerungen
Aus der Arbeit lässt sich insgesamt ableiten, dass es gelungen ist, verschiedene Durchfüh-rungsvarianten für die Datenerhebung in "Tool 1 – Erheben" zu integrieren. Mit dem Instrument kön-nen Anforderungen für eine Stelle oder Tätigkeit objektiv und valide beschrieben werden. Für den Arbeitsschritt des Gruppierens von Verhaltensweisen zu Anforderungen in "Tool 2 – Gruppieren" konnte eine Instruktion entwickelt werden, die sich als geeignet erwiesen hat, ein objektives Vorgehen sicherzustellen. In weiteren Studien soll vorrangig die prädiktive Validität des Instrumentes und die Anwendbarkeit der Instruktion in Unternehmen geprüft werden.
|
4 |
Das Diagnoseinstrument zur Erfassung der Interviewerkompetenz in der Personalauswahl (DIPA) - Entwicklung, empirische Prüfungen und Akzeptanz in der Praxis / The Instrument for the Description of Interviewer Competence in Personnel Assessment (DIPA) - Development, Evaluation and Acceptance in PracticeStrobel, Anja 22 March 2005 (has links) (PDF)
Trotz vorhandener umfangreicher Erkenntnisse und Gestaltungsempfehlungen zum Eignungsinterview zeigen sich nach wie vor gravierende Mängel beim Transfer in die Praxis. Der Interviewer selbst stellt dabei einen entscheidenden Einflussfaktor auf die Güte des Interviews dar. Gerade der Aspekt der Erfahrung, der weithin als förderlich für die Qualität betrachtet wird, hat sich häufig als problematisch erwiesen. Das Wissen über die Einflüsse auf Interviews oder eine einmalige Schulung reichen nicht aus, um die Qualität des Interviewervorgehens zu sichern. Es fehlt ein kontinuierliches Feedback für den Interviewer, welches sich im Arbeitsalltag mit vertretbarem Aufwand realisieren lässt. Hier setzt das Diagnoseinstrument zur Erfassung der Interviewerkompetenz in der Personalauswahl (DIPA) an. Es ermöglicht differenzierte und konkrete Rückmeldungen zum Interviewerverhalten bei Planung, Durchführung und Auswertung von Eignungsgesprächen. Für die Beurteilung des Interviewerverhaltens stehen dem Anwender Verhalten beschreibende und allgemeinverständliche Items mit vorgegebenen Antwortkategorien zur Verfügung, die jeweils anzukreuzen sind. Eine Profillösung, entwickelt über eine mehrstufige Expertenbefragung, hat für jedes im Instrument aufgeführte Item eine Bewertungsskala von 0 (inakzeptabel), 1 (problematisch), 2 (akzeptabel) bis 3 (optimal), die über farblich kodierte Auswertungsfolien dem Anwender einen schnell zugänglichen und leicht nachvollziehbaren Überblick über eigene Stärken und Schwächen ermöglicht. Das DIPA wurde in sieben Studien geprüft, wobei sukzessive Verbesserungen aufgrund der Ergebnisse und der Rückmeldungen der Teilnehmer vorgenommen wurden. Teilnehmer waren jeweils praktisch tätige Eignungsdiagnostiker sowie Studierende im Hauptfach Psychologie. Zunächst wurde geprüft, ob sich die angestrebte Form des DIPA grundsätzlich für die Diagnose von Interviewerkompetenz eignet. Dies konnte weitgehend bestätigt werden, weshalb in den Studien 2-4 Objektivität, Retest-Reliabilität und Validität sowie ökonomische und praktische Aspekte der einzelnen Instrumentteile geprüft wurden. Die Ergebnisse waren überwiegend zufrieden stellend mit Kappa-Koeffizienten im mittleren Bereich, Korrelationskoeffizienten für die Retest-Reliabilität im mittleren bis hohen Bereich und mittleren bis hohen Validitätskennwerten. In Studie 5 wurde mit Hilfe von Expertenurteilen die oben beschriebene Profillösung erstellt. Dabei wurden nochmals bedeutsame Veränderungen vor allem in Umfang und Formulierung der Items vorgenommen, was die positive Resonanz und eingeschätzte Nützlichkeit des DIPA mehr als verdoppeln konnte. In den abschließenden Studien 6 und 7 lagen die ermittelten Kappa-Koeffizienten für die Objektivität im mittleren Bereich mit Rohübereinstimmungen der Teilnehmer untereinander von jeweils über 70%. Die Koeffizienten für die Retest-Reliabilität lagen für alle Teile des DIPA bei über .50 (p<0.01). Die Validität, bestimmt über die prozentuale Übereinstimmung mit einer Musterlösung, lag bei zufrieden stellenden 58 bis 86 Prozent. Ökonomische und praktische Aspekte des DIPA wurden weitgehend positiv beurteilt. Der überwiegende Teil der Teilnehmer schätzte die Items als verständlich und praxisnah ein. Obwohl zwei Drittel der Praktiker und ein Drittel der Studierenden das DIPA als zu umfangreich einschätzen, gaben mindestens 60 Prozent der Praktiker und über 90 Prozent der Studierenden an, sie könnten sich den Einsatz des DIPA in ihrer beruflichen Praxis vorstellen und fänden ihn auch sinnvoll. Die Ergebnisse zu den psychometrischen Merkmalen des DIPA belegen, dass das Instrument weitgehend objektiv, zuverlässig und valide die Beurteilung der Interviewerkompetenz erlaubt. Es liegt ein Instrument vor, welches auf Grundlage seiner Güte und Aussagekraft wissenschaftlichen Kriterien genügt und eignungsdiagnostisch tätigen Praktikern einen effizienten und gewinnbringenden Einsatz in ihrem Arbeitsalltag ermöglicht.
|
5 |
Das Diagnoseinstrument zur Erfassung der Interviewerkompetenz in der Personalauswahl (DIPA) - Entwicklung, empirische Prüfungen und Akzeptanz in der PraxisStrobel, Anja 14 December 2004 (has links)
Trotz vorhandener umfangreicher Erkenntnisse und Gestaltungsempfehlungen zum Eignungsinterview zeigen sich nach wie vor gravierende Mängel beim Transfer in die Praxis. Der Interviewer selbst stellt dabei einen entscheidenden Einflussfaktor auf die Güte des Interviews dar. Gerade der Aspekt der Erfahrung, der weithin als förderlich für die Qualität betrachtet wird, hat sich häufig als problematisch erwiesen. Das Wissen über die Einflüsse auf Interviews oder eine einmalige Schulung reichen nicht aus, um die Qualität des Interviewervorgehens zu sichern. Es fehlt ein kontinuierliches Feedback für den Interviewer, welches sich im Arbeitsalltag mit vertretbarem Aufwand realisieren lässt. Hier setzt das Diagnoseinstrument zur Erfassung der Interviewerkompetenz in der Personalauswahl (DIPA) an. Es ermöglicht differenzierte und konkrete Rückmeldungen zum Interviewerverhalten bei Planung, Durchführung und Auswertung von Eignungsgesprächen. Für die Beurteilung des Interviewerverhaltens stehen dem Anwender Verhalten beschreibende und allgemeinverständliche Items mit vorgegebenen Antwortkategorien zur Verfügung, die jeweils anzukreuzen sind. Eine Profillösung, entwickelt über eine mehrstufige Expertenbefragung, hat für jedes im Instrument aufgeführte Item eine Bewertungsskala von 0 (inakzeptabel), 1 (problematisch), 2 (akzeptabel) bis 3 (optimal), die über farblich kodierte Auswertungsfolien dem Anwender einen schnell zugänglichen und leicht nachvollziehbaren Überblick über eigene Stärken und Schwächen ermöglicht. Das DIPA wurde in sieben Studien geprüft, wobei sukzessive Verbesserungen aufgrund der Ergebnisse und der Rückmeldungen der Teilnehmer vorgenommen wurden. Teilnehmer waren jeweils praktisch tätige Eignungsdiagnostiker sowie Studierende im Hauptfach Psychologie. Zunächst wurde geprüft, ob sich die angestrebte Form des DIPA grundsätzlich für die Diagnose von Interviewerkompetenz eignet. Dies konnte weitgehend bestätigt werden, weshalb in den Studien 2-4 Objektivität, Retest-Reliabilität und Validität sowie ökonomische und praktische Aspekte der einzelnen Instrumentteile geprüft wurden. Die Ergebnisse waren überwiegend zufrieden stellend mit Kappa-Koeffizienten im mittleren Bereich, Korrelationskoeffizienten für die Retest-Reliabilität im mittleren bis hohen Bereich und mittleren bis hohen Validitätskennwerten. In Studie 5 wurde mit Hilfe von Expertenurteilen die oben beschriebene Profillösung erstellt. Dabei wurden nochmals bedeutsame Veränderungen vor allem in Umfang und Formulierung der Items vorgenommen, was die positive Resonanz und eingeschätzte Nützlichkeit des DIPA mehr als verdoppeln konnte. In den abschließenden Studien 6 und 7 lagen die ermittelten Kappa-Koeffizienten für die Objektivität im mittleren Bereich mit Rohübereinstimmungen der Teilnehmer untereinander von jeweils über 70%. Die Koeffizienten für die Retest-Reliabilität lagen für alle Teile des DIPA bei über .50 (p<0.01). Die Validität, bestimmt über die prozentuale Übereinstimmung mit einer Musterlösung, lag bei zufrieden stellenden 58 bis 86 Prozent. Ökonomische und praktische Aspekte des DIPA wurden weitgehend positiv beurteilt. Der überwiegende Teil der Teilnehmer schätzte die Items als verständlich und praxisnah ein. Obwohl zwei Drittel der Praktiker und ein Drittel der Studierenden das DIPA als zu umfangreich einschätzen, gaben mindestens 60 Prozent der Praktiker und über 90 Prozent der Studierenden an, sie könnten sich den Einsatz des DIPA in ihrer beruflichen Praxis vorstellen und fänden ihn auch sinnvoll. Die Ergebnisse zu den psychometrischen Merkmalen des DIPA belegen, dass das Instrument weitgehend objektiv, zuverlässig und valide die Beurteilung der Interviewerkompetenz erlaubt. Es liegt ein Instrument vor, welches auf Grundlage seiner Güte und Aussagekraft wissenschaftlichen Kriterien genügt und eignungsdiagnostisch tätigen Praktikern einen effizienten und gewinnbringenden Einsatz in ihrem Arbeitsalltag ermöglicht.
|
6 |
Die Task-Analysis-Tools (TAToo) - Entwicklung, empirische und praktische Prüfungen eines Instrumentes für AnforderungsanalysenKoch, Anna 07 July 2010 (has links)
Das Anliegen der Arbeit war, den aktuellen Stand der Forschung zu Anforderungsanalysen in ein Instrument zu integrieren und dabei den Ansprüchen von Anwendern nach Praxistauglichkeit gerecht zu werden. Dafür wurden die Task-Analysis-Tools (TAToo) entwickelt und im Rahmen dieser Arbeit umfangreich geprüft. Die TAToo sind multimodal aufgebaut: Das Instrument basiert in der Theorie auf der Critical Incident Technique, enthält zusätzlich aber auch den Ansatz der Aufgabenbeschreibung, der Beschreibung von Knowledge, Skills, Abilities, der zukunftsorientierten Anforderungsanalyse und verschiedene methodische Durchführungsvarianten für die Datenerhebung in "Tool 1 – Erheben". Die Anforderungsanalyse mittels TAToo besteht aus drei Arbeitsschritten: (1) Erheben von Informationen zur analysierten Stelle in "Tool 1 – Erheben", (2) Erstellen eines Anforderungsprofiles aus diesen Informationen in "Tool 2 – Gruppieren" und (3) Bewerten des Anforderungsprofiles in "Tool 3 – Bewerten".
Studien 1 und 2: "Tool 1 – Erheben" als Fragebogen, Workshop und Interview:
Die Informationen zu einer Stelle oder Tätigkeit können in "Tool 1 – Erheben" in einem Workshop, einem Interview oder mit einem Fragebogen erhoben werden. Diese Durchführungsvarianten wurden in zwei Studien miteinander verglichen, wofür Datenmenge, Datenqualität und Teilnehmerbeurteilungen herangezogen wurden. Für die Datenmenge zeigte sich, dass mit dem Interview pro Teilnehmer die meisten erfolgsentscheidenden Situationen (5,4 pro Teilnehmer) und Verhaltensweisen (13,1 pro Teilnehmer) geschildert wurden. Workshop und Fragebogen lieferten insgesamt weniger Informationen als das Interview. Pro Situation wurden im Interview durchschnittlich 2,4 Verhaltensweisen, im Workshop 3,4 und im Fragebogen 2,0 geschildert. Damit schilderten die Teilnehmer im Workshop zu jeder Situation mehr Verhaltensweisen als im Interview und Fragebogen. Zur Datenqualität zeigte sich, dass allein mit einem Workshop, kein vollständiges Anforderungsprofil erstellt werden konnte. Hingegen waren 8 Interviews oder 29 Fragebögen ausreichend, um ein vollständiges Anforderungsprofil zu erstellen. Die Teilnehmer beurteilen die Handhabbarkeit und Verständlichkeit von Interview und Workshop vergleichbar positiv, den Fragebogen hingegen weniger positiv. Insgesamt zeigte sich, dass mit dem Interview, Fragebogen und Workshop grundsätzlich die Daten für "Tool 1 – Erheben" gesammelt werden können. Von der Datenqualität und der Datenmenge sollte das Interview bevorzugt vor dem Fragebogen als alleinige Methode eingesetzt werden. Der Workshop sollte entsprechend der Ergebnisse aus den Studien dieser Arbeit nur ergänzend zum Interview oder Fragebogen genutzt werden.
Studien 3 bis 6: Gütekriterien der TAToo:
Die Objektivität wurde für "Tool 3 – Bewerten" als Übereinstimmung der Teilnehmer bei der Bewertung der Wichtigkeit der Anforderungen und der jeweils operationalisierenden Kriterien bestimmt. Insgesamt wurde die Beurteilerübereinstimmung für elf Mitarbeitergruppen aus elf verschiedenen Tätigkeitsbereichen ermittelt, die jeweils ihr Anforderungsprofil anhand einer 5-stufigen Skala von gar nicht wichtig bis sehr wichtig bewerteten. Die prozentuale Übereinstimmung für die einzelnen Anforderungsprofile lag in einem Bereich 70-80%. Die ermittelten weighted Kappa-Koeffizienten lagen in einem Bereich, der als slight bis fair zu klassifizieren ist. Obwohl die Beurteilerübereinstimmung insgesamt eher niedrig war, können die Ergebnisse im Vergleich zu vorliegenden Studien als zufriedenstellend bezeichnet werden. Besonders positiv war, dass auch für kleinere Stichproben (hier N=3) noch akzeptable Werte für die prozentuale Übereinstimmung und den Kappawert erreicht werden konnten. Das spricht für einen effektiven Einsatz der TAToo in der Praxis. Zusammenfassend konnte gezeigt werden, dass mit "Tool 3 – Bewerten" Anwender aus der Praxis die Wichtigkeit von Anforderungen und den dazu gehörenden operationalisierenden Kriterien übereinstimmend bewerten.
Zur Prüfung der Validität wurden die Güte der Gruppierung von Verhaltensweisen zu Anforderungen in "Tool 2 – Gruppieren" und die Vollständigkeit der Anforderungen anhand der Beurteilung von Mitarbeitern untersucht. Die Ergebnisse waren sehr positiv und zeigten, dass 94% der Verhaltensweisen inhaltlich und begrifflich passend zu Anforderungen gruppiert wurden. Die Mitarbeiter beurteilten auch die Passung der Anforderungsprofile zu den tatsächlichen Anforderungen im Arbeitsalltag. Der Großteil der Mitarbeiter fand die eigene Tätigkeit zu 76-100% passend in den Anforderungsprofilen abgebildet. Diese Passung bestätigte sich auch bei der wiederholten Bewertung der Anforderungsprofile nach mindestens 16 Monaten. In einer weiteren Studie wurden die TAToo mit dem Fragebogen für Arbeitsanalysen und einem beobachteten erfahrungsgeleitet-intuitiven Vorgehen verglichen. Das Anforderungsprofil des FAA enthielt sehr viele irrelevante Items und wenig brauchbare Beschreibungen zur analysierten Tätigkeit. Das Anforderungsprofil der EIM enthielt nur abstrakte, nicht näher operationalisierte Anforderungsbegriffe. Es unterschied sich damit im Detailliertheitsgrad deutlich vom Anforderungsprofil der TAToo, das zusätzlich zu den Anforderungen umfangreiche Operationalisierungen in Form von Verhaltensweisen enthielt. Das Anforderungsprofil der TAToo war deshalb am besten für die Personalarbeit nutzbar. Diese Ergebnisse bestätigten sich auch in den Beurteilungen durch Subject Matter Experts (SME). Sie beurteilten verschiedene Kriterien aus Qualitätsstandards für Anforderungsanalysen sehr positiv für die TAToo und deutlich negativ für den FAA. Das Anforderungsprofil der EIM wurde im Vergleich zu den TAToo ähnlich positiv beurteilt, war für die SME allerdings zu wenig konkret. Zusammenfassend konnte gezeigt werden, dass mit den TAToo Anforderungsprofile zutreffend und passgenau erstellt werden können. Es zeigen sich deutliche Vorteile gegenüber dem FAA und der EIM hinsichtlich der zutreffenden Beschreibung einer Position, hinsichtlich wichtiger Qualitätskriterien für Anforderungsprofile und in Bezug auf den Nutzen der Ergebnisse für die Personalarbeit eines Unternehmens.
Die Nebengütekriterien Ökonomie und Nützlichkeit wurden anhand der Kriterien von Lienert und Raatz beurteilt. Es zeigten sich dabei zufriedenstellende Beurteilungen für die Durchführungszeit, die anhand des tatsächlichen Aufwandes und anhand von Mitarbeiterbeurteilungen erfasst wurde. Es zeigte sich, dass im Vergleich zur Erstversion der TAToo der zeitliche Aufwand für die Mitarbeiter verringert werden konnte. Ebenso positiv zu beurteilen sind der geringe Materialaufwand und die Möglichkeit der Gruppendurchführung der TAToo als Fragebogen oder Workshop. Mitarbeiter der Personalabteilung einer Organisation beurteilten die Nützlichkeit der TAToo ebenfalls positiv und konnten sich einen erneuten Einsatz des Instrumentes gut vorstellen.
Studie 7: Entwicklung und Prüfung einer Instruktion für das Gruppieren von Verhaltensweisen zu Anforderungen:
In der letzten Studie der Arbeit wurde für die Gruppierung der Verhaltensweisen zu Anforderungen in "Tool 2 – Gruppieren" eine Instruktion erstellt und bei der Anwendung geprüft. An der Prüfung der Instruktion nahmen Laien, ohne Vorerfahrung in der Gruppierung teil. Sie gruppierten je-weils zu dritt in insgesamt 10 Workshops allein anhand der Instruktion 79 Verhaltensweisen zu An-forderungen. Anhand von Beurteilerübereinstimmungen wurden die Anforderungsprofile dieser Gruppen miteinander verglichen. Für die prozentuale Übereinstimmung wurden hohe Werte von durchschnittlich 74% erzielt. Diese hohe Übereinstimmung zeigte sich auch in einem mittleren Wert für Cramers V von .47 sowie unerwartet hohen Kappa-Koeffizienten in einem Bereich von fair bis moderate. Diese hohen Beurteilerübereinstimmungen spiegelten sich auch in sehr positiven Beurteilungen zur Verständlichkeit und Handhabbarkeit der Instruktion aus dem Blickwinkel der Anwender wider.
Schlussfolgerungen
Aus der Arbeit lässt sich insgesamt ableiten, dass es gelungen ist, verschiedene Durchfüh-rungsvarianten für die Datenerhebung in "Tool 1 – Erheben" zu integrieren. Mit dem Instrument kön-nen Anforderungen für eine Stelle oder Tätigkeit objektiv und valide beschrieben werden. Für den Arbeitsschritt des Gruppierens von Verhaltensweisen zu Anforderungen in "Tool 2 – Gruppieren" konnte eine Instruktion entwickelt werden, die sich als geeignet erwiesen hat, ein objektives Vorgehen sicherzustellen. In weiteren Studien soll vorrangig die prädiktive Validität des Instrumentes und die Anwendbarkeit der Instruktion in Unternehmen geprüft werden.
|
Page generated in 0.1094 seconds