Fachforum 2

Kompetenzmessung im internationalem Kontext
Welchen Beitrag liefert ASCOT?
Esther Winther & Frank Achtenhagen
Potsdam, 16. September 2015
www.bmbf.de | www.ascot-vet.net
Die Ausgangsfragen und (populäre) Antworten:
§  Lassen sich Bildung oder besser Indikatoren/Maße von Bildung messen?
•  Hinweise hierauf geben die internationalen Large Scale-Assessments.
§  Welche Wirkungen (individuell sowie gesellschaftlich) gehen von Bildung aus?
•  Vorrangig ökonometrisch begründete Zusammenhänge zwischen
Bildungsleistung und (privatem) Einkommen oder Bildungsleistungen und
volkswirtschaftlichem Wachstum.
Potsdam, 16. September 2015
2
Was wir aktuell wissen – Befunde der Bildungsberichterstattung
§  Die Wahrscheinlichkeit, beschäftigt zu sein, hängt sehr stark mit dem
Bildungsniveau zusammen.
•  Die Erwerbstätigenquote der Personen ohne beruflichen Abschluss lag in
Deutschland im Jahr 2012 bei 58 Prozent, bei den Personen mit
abgeschlossener Berufsausbildung bei 79 Prozent und bei Personen mit
akademischem Abschluss bei rund 88 Prozent (damit allgemein etwas
günstiger als im europäischen Durchschnitt).
•  These des kompensatorischen Nachteils berufsspezifischer
Ausbildungsprogramme.
Potsdam, 16. September 2015
3
Worüber nachzudenken ist –
Erwerbslebenszyklus bei allgemeiner und berufsspezifischer Bildung
§  Ökonometrische Anzweiflung, dass berufliche Ausbildung den Übergang in den
und den Verbleib im Arbeitsmarkt erleichtert (u.a. Wolter & Ryan, 2011).
§  Betonung des Vorteils allgemeiner Bildung unter der Annahme, dass über die
Berufsausbildung in zu geringem Umfang Basisfähigkeiten vermittelt werden, die
nachträgliches lebenslanges Lernen unterstützen (u.a. Wößmann, 2014).
Potsdam, 16. September 2015
4
Worüber nachzudenken ist –
Erwerbslebenszyklus bei allgemeiner und berufsspezifischer Bildung
§  Nachteile von beruflicher Ausbildung im
Hinblick auf Beschäftigung –
insbesondere in Ländern mit
strukturierter Lehrlingsausbildung – auf
Basis der IALS-Daten (Hanushek et al.,
2014).
Potsdam, 16. September 2015
Abbildung 5: Beschäftigung nach Art der Bildung über den Erwerbslebenszyklus
5
Beschäftigungsquote von Männern, nach Alter und Art der Bildung. Stichprobe: Länder mit strukturiertem
beruflichem Ausbildungssystem (Dänemark, Deutschland und die Schweiz). Geglättete Scatterplots aus regional
gewichteten Regressionen, basierend auf den Daten des International Adult Literacy Survey (IALS). Quelle:
Hanushek u.a. (2014).
Dieser
Aspekt
der
individuellen
Beschäftigungsfähigkeit
ist
auch
mit
der
makroökonomischen Perspektive verbunden. Es ist argumentiert worden, dass dem
Unterschied in den Wachstumsraten der USA und Europas die Wahrscheinlichkeit, mit der
Worüber nachzudenken ist –
Erwerbslebenszyklus bei allgemeiner und berufsspezifischer Bildung
§  Nachteile von beruflicher Ausbildung im
HinblickWas
auf Beschäftigung
lässt sich dem– entgegensetzen?
•  Daten
und Befunde
insbesondere
in Ländern
mit basieren auf formal erreichten
Bildungsabschlüssen
(ISCED)
strukturierter
Lehrlingsausbildung
– auf und NICHT auf
tatsächlichen Kompetenzen.
Basis der IALS-Daten (Hanushek et al.,
•  Erste Analysen bei PIAAC zeigen, dass die
2014).
tatsächlichen Kompetenzen stark mit der
Beschäftigungswahrscheinlichkeit korrelieren.
Potsdam, 16. September 2015
6
ASCOT – Berufliche Kompetenzmessung in verschiedenen Domänen
§  Bildungspolitische Einordnung
•  EU versucht, Kompetenzen für die Vielfalt der Bildungssysteme und formen vergleichbar zu machen: EQR / ECVET
•  Problem: Wie lassen sich Kompetenzen tatsächlich messen?
•  Gegensatz: Zertifizierung
§  Programme zur Messung von Kompetenzen beziehen sich auf
Basiskompetenzen
•  PISA, TIMSS und andere Schulleistungsvergleiche
•  IALS, ALL & PIAAC für den Vergleich von Kompetenzen Erwachsener
Potsdam, 16. September 2015
7
ASCOT – Berufliche Kompetenzmessung in verschiedenen Domänen
R = .57**
R = .20**
Basiskompetenz (sprachliche und mathema5sche Kompetenz) Employability (ökonomische Literalität) kaufmännische Kompetenz (domänenspezifische Kompetenz) R = .24**
„Der Weg zu der höheren Allgemeinbildung führt über den
Beruf und nur über den Beruf“ (Spranger, 1925, S. 161f.). Potsdam, 16. September 2015
8
The Assessment Framework in ASCOT!
Some aspects to take into account
Two Key Measuring Concepts
to address the prime objectives of VET and workplace learning.
Two-Construct Conglomerate
Examples
(Target group of sampling: young adults in formal schoolbased and work-based programs in three occupational fields
– economic, technical and health domain –
at a medium level of proficiency to ensure a vertical
comparability of measures)
Employability
(generic vocational
competence)
Work ability
(specific vocational
competence)
Vocational competence
as occupational capability to act and to judge refers to
individual abilities in vocational situations.
Being adaptive in
occupational situations.
Solving a (complex) work
problem successfully.
Working authentically
and reliably.
Two Key Measuring Concepts
to describe vocational competences which are relevant to labor markets.
Work ability (specific
• 
vocational competence
as workplace related
knowledge, skills, and values)
Employability (generic
vocational competence
as a person’s generic
skill set and formal and
informal qualifications)
• 
Focused on
characteristic sets
of activities and
tasks in selected
occupational
fields;
close to the
activities
performed at the
workplace.
Work ability – Specific Vocational Competence
(i.s. of competence in the professions and strongly related to work)
as task relevant knowledge, skills, behavior, and judgement.
Patterns of work – value aspect
(e.g. professional reasoning strategies in the context of
everyday work, occupational identity)
Requirements and tools of work – action aspect
(criterion: tasks that are strategically significant to the
workplace and activities that an employee/worker must
demonstrate)
Ways of working – soft skills aspect
(e.g. communication, judgment, content and demands)
Economic domain
Industrial/technical domain
Health domain
Employability – Generic Vocational Competence
as cross-sectoral cognitive and non-cognitive dispositions related to
work activities and tasks.
Literacy and numeracy related to vocational aspects
Problem solving strategies and heuristics in (authentic)
work situations
Living in the world of work / facing labor markets
Abilities related to continuous learning, collaboration and
responsible action
Explanatory Factors
at the individual, institutional and context level in a value-added
measurement framework.
Individual level (e.g. socio economic background, gender,
work experience, life long learning aspirations)
Institutional level
(e.g. opportunities to learn and work, design and
support of learning processes)
Context level (e.g. structure of the vocational training
system, value-added measurement of workplace and
market characteristics)
Take a Peek behind the Scenes
An international comparison of VET !
does not have to start from scratch.
Behind the Scenes –!
Simulation of activities of clerks in international companies Tools of Work
Prototypes can
be internationally
implemented; they
are open for countryspecific issues.
•  ERP-Systems
•  Calculations on the To
Do-List
Tasks of Work
•  Handle figures, real
values or job-related
formulas.
•  Make effective use of
relevant data and
methods of work.
Task-specific Judgment
•  Acquire independent
working skills.
Behind the Scenes –!
Repairing a car requires the same competences worldwide
Prototypes can
be internationally
implemented; they
are open for countryspecific issues.
Tools of Work
•  Electronic test equipment
•  Expert system
Tasks of Work
•  Understanding trouble
symptoms and fix a car
•  Electrotechnical
measurements
Measuring car mechatronics’
troubleshooting competence
•  Ecologically valid
troubleshooting scenarios
Some Findings!
There are good reasons to invest.
1...2
Sensual/functional examination of vehicles
Assemble electronic systems and
prototypes
Baethge & Arends, 2009
Collaborate with others as necessary
5
Economic
domain
The tests are reliable
and internationally valid.
Prepare invoices, reports, financial
statements
4
Industrial/
technical domain
How relevant
are the tasks?
(Examples of
occupational tasks in the
tests and its relevance.)
3
1 – not relevant
5 – extremely
relevant
Answer patients’ calls and determine how
to assist them
Oversee day-to-day group activities of
clients
Health
domain
3 – relevant
Employability
Work ability
Competence structures
(Examples from the
economic domain but
comparable with results
from other domains.)
Ways of working
Patterns of
work
Tools of
work
Vocational competence
is much more than
knowledge about the
profession.
Competence
1
2
3
Ways of work
1
Patterns of work
.78***
1
Tools of work
.76***
.71***
1
Employability
.34***
.37***
.50***
4
EAP/
PV
.74
.78
.71
1
.71
Employability / work ability are
different construct.
Herzlichen Dank für Ihre Aufmerksamkeit!
Potsdam, 16. September 2015
21