DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA...

32
DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste senior, Chef de projet et Chef de division adjoint Centre pour la Recherche et l’Innovation dans l’Enseignement, Direction de l’Education et des Compétences Paris, 30 mars 2017

Transcript of DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA...

Page 1: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ

ET L’ESPRIT CRITIQUE

DANS L’ÉDUCATION

Stéphan Vincent-Lancrin

Analyste senior, Chef de projet et Chef de division adjoint

Centre pour la Recherche et l’Innovation dansl’Enseignement,Direction de l’Education et des Compétences

Paris, 30 mars 2017

Page 2: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

education for innovation

Page 3: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

Skills and education for innovation« 21st Century Skills »

Innovation

Skills

Educationand

training

Page 4: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

Critical skills for the most innovative jobs (according to tertiary-educated workers)

1,83

2,05

2,08

2,09

2,15

2,19

2,19

2,20

2,35

2,36

2,36

2,42

2,51

2,58

2,60

2,71

2,81

3,00

3,90

1,00

assert your authorityknowledge of other fields

negociateperform under pressure

use time efficientlywork productively with others

use computers and internetwrite and speak a foreign language

write reports or documentsmaster of your own field

make your meaning clearmobilize capacities of others

acquire new knowledgecoordinate activities

analytical thinkingalertness to opportunitiespresent ideas in audience

willingness to question ideascome with news ideas/solutions

Likelihood (odds ratios) of reporting the following skills: people in the most innovative jobs vs. least innovative jobs

Source: Avvisati, Jacotin and Vincent-Lancrin (2013), based on REFLEX and HEGESCO data

Page 5: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

What individual skills shouldeducation systems foster?

Technical skills (know-what and know-

how)

Creative and critical thinking

skills(Observation, curiosity,

making connections, imagination, multiple

perspectives...)

Behavioural and social skills

(Self-confidence, energy, perseverance, passion,

leadership, collaboration, communication)

Page 6: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

fostering an assessing creativity and critical thinking

Page 7: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

• Need for a common language, social representation and guidance about what some desired skills actually mean

• Skills that are not assessed are not taught consistently, but teachers need to teach what they assess

• There is generally little space for students to develop and demonstrate creativity and critical thinking as part of theirusual disciplinary learning

• Start a process of change: pilot, prototype and developpedagogical resources as a proof of concept for otherteachers – before validation and possibly scale up (second phase)

Theory of action

Page 8: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

• Participation in 11 countries overall– Brazil, France (3), India, Hungary, Netherlands,

Russia, Slovakia, Spain, Thailand, United Kingdom (Wales), United States (3)

• 1st round (2015-16, 2016) in 9 countries– Brazil, France (3), India, Hungary, Netherlands,

Russia, Slovakia, Thailand, United States (3)

• 2nd round (2016-17) in 9 countries– Brazil, France, India, Hungary, Russia, Spain,

Thailand, United Kingdom (Wales), United States (2)

Participation in primary and secondaryeducation

Page 9: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

A pedagogical toolkit

A. The toolkit

A1.

Rubric for

assessment

A1.

Rubric for

assessment

Dimensions

Levels of progressi

on

A2.

Pedagogical

activities

A2.

Pedagogical

activities

Specific for each domain

Designed to test

dimensions and

levels of progressi

on

A3.

Set of exercises

A3.

Set of exercises

Specific for each domain

Designed to

prepare for the

assessment

A4.

Portfolio of

student work

A4.

Portfolio of

student work

For each domain

As examples

of different

skill levels

Page 10: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

Starting point: 5 creative habits of mind(21st century skills)

Source: Lucas, Claxton and Spencer (2013)

Page 11: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

Initial version of the rubric

CREATIVITY

(Coming up with new ideas and solutions)

CRITICAL THINKING

(Questionning and evaluating ideasand solutions)

INQUIRE

• Feel, empathise, observe, describe relevant experience and information

• Explore, seek and generate ideas

• Understand context/frame and boundaries of the problem

• Review alternative theories and opinions and compare/find perspectives on the problem

IMAGINE

• Make connections, integrate other disciplinary perspectives

• Stretch and play with unusual/risky/radical ideas

• Identify strengths and weaknesses of evidence, arguments, claims and beliefs

• Challenge assumptions, check accuracy, analyse gaps in knowledge

DO / SHARE

• Envision / Express / Produce / Prototype new product / solution / performance

• Appreciate the novelty of solution and/or possible consequences

• Appraise / Base / Justify opinion/products on logical, ethical or aesthetic criteria/reasoning

• Acknowledge own bias (as perceived by others) and uncertainty/limits of endorsed opinion/solution

Page 12: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

• To develop new pedagogical activities

• To improve existing pedagogical activities

• To develop new rubrics (domain-specific, to assessstudennts, self-assessment, etc.)

• To assess student work

• To keep in mind the importance of thesecompetences

Uses of the rubric

Page 13: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

a monitoring framework with a quasi-experimental design

Page 14: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

Contextual data collection

B1.

Subject-based assessment

Standardised assessment of

academic achievement

(maths and science; visual

arts and music)

B2.

Creativity assessment

Standardised test for

creativity

(EPoC)

(domain-specific)

B3.

Survey questionnaires

School principals

Teachers

Students

B4.

Interviews / focus groups

Teachers

Students

Page 15: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

School-based intervention

School year

A A A A

Primary school group - Ages 8-9. STEM, Arts or interdisciplinary domain

Secondary school group - Ages 13-14. STEM, Arts or interdisciplinary domain

A

What factors influence the outcomes?

• Pre-tests and questionnaires at the beginning of the intervention:– Are differences related to baseline in achievement, creativity, to student

beliefs, to pedagogies, to socio-economic bacground, etc.?

• Observations and discussions within the network

B

B

Page 16: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

School-based intervention

School year

A A A A

Primary school group - Ages 8-9. STEM, Arts or interdisciplinary domain

Secondary school group - Ages 13-14. STEM, Arts or interdisciplinary domain

A

What effects of the intervention?

• Measures after the intervention:– Post-tests and -questionnaires

– Qualitative observations of pedagogies

– Interviews

• Matched control group (with some kind of intervention as well)

Control group

Control group

B

B

B

B

Page 17: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

examples

Page 18: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

effects on teaching, learning

Page 19: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

25

30

35

40

45

Control Intervention

Pre Post

-4.7

+5.3

Primary education: I have to use my imagination

Page 20: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

45

50

55

60

65

Control Intervention

Pre Post

-3.4

+3.2

Primary education: I have to make connections

between different school subjects

Page 21: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

60

65

70

75

80

Control Intervention

Pre Post

-4

+5.4

Primary education: I have to look for several explanations

Page 22: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

45

50

55

60

65

Control Intervention

Pre Post

-0.8 +7.4

Primary education: I do NOT only learn what I am interested in

Page 23: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

20

25

30

35

40

Maths Science Math and/or science

Control Intervention

Primary education: interest in maths and science

Increase in the percentage of students interestd between pre and post

Page 24: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

Out of school effects

Page 25: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

25

30

35

40

45

Control Intervention

Pre Post

-11.0

-0.1

Primary education: I try to explore new things

Page 26: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

40

45

50

55

60

Control Intervention

Pre Post

-6.5

+3.8

Primary education: I am curious about many different things

Page 27: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

standardised tests

Page 28: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

50

55

60

65

70

Control Intervention

Pre Post

+5.0+10.9

Primary education:Performance in maths and science tests

Page 29: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

60

62

64

66

68

Control Intervention

Pre test VAM Post test VAM

+1.7

+3.47

Primary education:Performance in visual art and music test

Page 30: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

examples

Page 31: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

• Launch a new strand in tertiary education

• End of pilot phase in 2018

• Design of a validation phase based on developped resources

Next steps

Page 32: DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE ... · DÉVELOPPER ET ÉVALUER LA CRÉATIVITÉ ET L’ESPRIT CRITIQUE DANS L’ÉDUCATION Stéphan Vincent-Lancrin Analyste

[email protected]

THANK YOU

www.oecd.org/edu/innovationwww.oecd.org/edu/internationalisationwww.oecd.org/edu/universityfutures