Image by 41330 from Pixabay

聪明的老师培养聪明的学生:部分解释了PISA 国家排名

Marc Piopiunik 本博文由叶王琼翻译。 经济合作与发展组织(OECD)的国际学生评估项目(PISA)不断地说明了各国15岁学生在阅读、科学和数学方面的表现是如何不同的。教师素质的差异通常被认为是造成这些巨大差异的关键因素。在最近的一项研究中,我与合著者Eric A . Hanushek (斯坦福大学) 和Simon Wiederhold (KU Eichstätt-Ingolstadt) 使用了关于教师认知技能(教师素质的一个重要维度)的国际可比数据来调查这一说法。 发达国家的教师技能差异很大 我们使用来自经合组织成人能力国际评估项目(PIAAC)的独特数据,首次计算出31个国家/地区,教师计算和读写能力的一致性指标。图1显示教师的技能差异很大。例如,在我们的样本中,技能水平最低的国家(智利和土耳其),教师的平均计算和读写能力,远远低于加拿大仅接受过职业教育的成年人的水平[1]。相比之下,在技能水平最高的国家(日本和芬兰),教师的技能超过了在加拿大获得硕士学位或博士学位的成年人的技能。 教师技能部分解释了各国学生表现的差异 我们将这些国家级教师技能测量与PISA学生数学和阅读成绩的个人数据进行关联。图2显示,教师认知技能的跨国差异部分解释了学生成绩的国际差异。例如,如果教师的水平提升到芬兰教师(表现最好的国家)的技能水平,意大利和俄罗斯的学生,他们的数学成绩将大幅度提高 (将近一个学年的学习进度);西班牙,英国和美国的学生,则会提高大约四分之三学年的学习进度;如果每个国家的教师水平都提升到芬兰的程度, PISA成绩的国际差距减少约四分之一。 其他国家因素能否解释学生表现和教师技能之间的关系? 至关重要的是,我们的分析控制了许多其他因素,从而排除了我们结果的其他解释。最重要的是,我们通过计算教师在算术和读写能力之间的认知能力差异,来解释国家之间跨学科保持不变的所有差异(例如,教育支出,人口的平均认知技能以及一般文化背景,比如教育的重要性)。这种方法得出的结果类似于将教师的计算能力与学生的数学成绩联系起来,或将教师的读写能力与学生的阅读成绩联系起来。 其他分析强有力地支持了以下解释:我们的发现确实反映了教师技能的影响。当我们将学生的表现与PIAAC中评估的其他广泛职业(例如经理,科学家和工程师,卫生专业人员和商业专业人员)的认知技能水平相关时,我们发现没有系统的关系。只有教师的技能与学生在PISA中的表现始终相关。 政策制定者可以做些什么来提高教师的认知技能? 我们的国际数据还允许我们调查政策选择如何影响教师队伍的技能,并最终影响学生的学习成绩。 重要的是,我们发现教师工资溢价的国际差异(考虑到他们的性别,工作经验和认知技能)与教师的认知技能直接相关。 这些结果说明了增加教师工资的潜在价值。 但是,政策制定者需要做的不仅仅是全面提高教师的工资。为了确保取得积极的成果。他们必须保证最高效的教师获得更高的工资。 [1]  我们使用加拿大进行技能比较,因为加拿大迄今为止是PIAAC中最大的国家样本。

Image by 41330 from Pixabay

Slimmere leerkrachten zorgen voor slimmere leerlingen. Dit verklaart (deels) de ranking van landen in PISA.

Marc Piopiunik Deze blog is vertaald naar het Nederlands door Emilie Franck. Het ‘Programme for International Student Assessment’ (PISA) van de OESO illustreert voortdurend hoe de leesvaardigheids-, wetenschaps- en wiskundeprestaties van 15-jarigen variëren van land tot land. Verschillen in de kwaliteit van leerkrachten worden vaak genoemd als een bepalende factor voor deze grote verschillen tussen […]

Image by 41330 from Pixabay

Умные учителя формируют более умных учеников. Это (частично) объясняет рейтинг стран в системе PISA

Марк Пиопиуник Программа по международной оценке успеваемости учащихся (PISA) Организации экономического сотрудничества и развития (ОЭСР) постоянно демонстрирует различия в успеваемости 15-летних учащихся по чтению, науке и математике в разных странах. В качестве одного из ключевых факторов, определяющих эти огромные различия, обычно указываются различия в навыках учителей. В одном из последних исследований, вместе с моими соавторами […]

Image by 41330 from Pixabay

Los docentes más inteligentes producen estudiantes más inteligentes. Esto (parcialmente) explica la clasificación de los países en PISA.

Marc Piopiunik Este artículo fue traducido al español por Edwin Cuellar. El Programa para la Evaluación Internacional de Alumnos de la OCDE (PISA, por sus siglas en inglés) ilustra continuamente cómo el rendimiento en lectura, ciencias y matemáticas de los jóvenes de 15 años difiere entre países. Las diferencias en la calidad de los docentes se citan comúnmente […]

Image by 41330 from Pixabay

Klügere Lehrer bringen klügere Schüler hervor. Dies erklärt (teilweise) die Länderrankings in PISA.

Marc Piopiunik Dieser Blog wurde von Silvan Häs ins Deutsche übersetzt. Die PISA Studie (Programme for International Student Assessment) der OECD zeigt kontinuierlich, wie sich die Lese-, Wissenschafts- und Mathematikleistungen der 15-Jährigen zwischen den einzelnen Ländern sind unterscheiden. Unterschiede in der Lehrerqualität werden häufig als Schlüsselfaktor für diese großen Leistungsdifferenzen angeführt. In einer aktuellen Studie […]

Image by 41330 from Pixabay

Smarter Teachers Produce Smarter Students. This (Partly) Explains the Country Rankings in PISA.

Marc Piopiunik The OECD’s Programme for International Student Assessment (PISA) continually illustrates how the reading, science and mathematics performance of 15-year-olds differs across countries. Differences in teacher quality are commonly cited as a key determinant of these huge differences. In a recent study, my co-authors Eric A. Hanushek (Stanford University), Simon Wiederhold (KU Eichstätt-Ingolstadt), and […]

De los números a un significado a través de comparaciones dentro de países a lo largo del tiempo

De los números a un significado a través de comparaciones dentro de países a lo largo del tiempo

La mayoría de las pruebas internacionales a gran escala (ILSA, por sus siglas en inglés) se repiten a intervalos regulares. PISA se realiza cada tres años, TIMSS cada cuatro años, y PIRLS se realiza a intervalos de cinco años. De esta manera es posible hacer comparaciones dentro de un mismo país a lo largo del tiempo, con el objetivo de descubrir patrones o tendencias y predecir el desarrollo futuro. Las puntuaciones de desempeño están vinculadas en el tiempo al tener un número relativamente grande de preguntas que se repiten entre prueba y prueba. Esto permite anclar los resultados de pruebas subsiguientes con los resultados de pruebas anteriores. Además, secciones de los mismos cuestionarios de contexto se repiten a lo largo del tiempo para también descubrir cambios en el contexto de aprendizaje, la demografía, etc.

Zahlen, Interpretationen und Vergleiche: Ein Land im Zeitverlauf

Zahlen, Interpretationen und Vergleiche: Ein Land im Zeitverlauf

Die meisten der groß angelegten internationalen Vergleichsstudien (international large-scale assessments; ILSA) werden in regelmäßigen Abständen wiederholt. PISA wird alle drei Jahre, TIMSS alle vier Jahre und PIRLS alle fünf Jahre durchgeführt. Dies ermöglicht Vergleiche innerhalb der Länder im Zeitverlauf, welche das Ziel haben, Muster oder Trends aufzudecken und die zukünftige Entwicklung vorherzusagen. Die Leistungswerte von verschiedenen Zeitpunkten werden verknüpft, indem eine relativ große Anzahl von Testfragen wiederholt wird. Dadurch ist es möglich, nachfolgende Testergebnisse mit den vorherigen in Relation zu setzen. Darüber hinaus werden Abschnitte derselben Hintergrundfragebögen im Laufe der Zeit wiederholt, um auch Veränderungen im Lernkontext, in der Demographie usw. zu erfassen.

From Numbers to Meaning through Comparisons within Countries over Time

From Numbers to Meaning through Comparisons within Countries over Time

Most of the international large-scale assessments are repeated in regular intervals. PISA is conducted every three-years, TIMSS every fourth year, and PIRLS is conducted with five-year intervals. Accordingly, this allows for comparisons within countries over time, with the objective to uncover patterns or trends and to predict future development. The achievement scores are linked over time by having a relatively large number of test questions that are repeated. This makes it possible to anchor subsequent test scores with the previous ones. In addition, sections of the same background questionnaires are repeated over time to also capture changes in the learning context, demographics etc.

加拿大真是“超级教育大国”吗?事实并没有那么简单……

加拿大真是“超级教育大国”吗?事实并没有那么简单……

John Jerrim, Jake Anders, Silvan Häs, Nikki Shure & Laura Zieger 当国际学生评估项目(PISA)的结果每三年发布一次时,一些东亚国家/地区(如新加坡、台湾、日本、韩国)在这些排名中占据榜首也已经不足为奇了。这些国家基本上都比大多数说英语的西方国家做得好,只有一个明显的例外——加拿大。政策制定者和教育媒体并没有忽视这一点。事实上,在2015年PISA结果公布后,加拿大被描述为一个“教育超级大国”,人们用各种各样的理论(从移民的优异成绩到学生的高度积极性)来解释这一结果。事实上,经合组织PISA项目负责人安德烈亚斯•施莱歇尔 (Andreas Schleicher) 暗示,加拿大对公平的坚定承诺才是关键所在。 但是我们对加拿大PISA的结果到底有多少信心呢? 国际学生评估项目的一个关键就在于它代表了每个国家15岁的人口。如果做不到这一点,那么我们就不是在进行同类比较。例如,如果A国不成比例地排除某些学生群体,那么它就不能与B国进行公平的比较,因为B国有代表性的各个阶层的年轻人确实参加了活动。例如,如果不同国家对有特殊教育需要的儿童区别对待,就可能出现这种情况。另外,在一些国家,大量的学生和学校可能会拒绝参加这项研究。 事实是, PISA遇到的这类情况——我们认为,很可能会严重破坏加拿大的结果。 这一点在图1中可以看到,图1参考了PISA 2015技术报告中的数据。显然,加拿大的数据是惊人的。只有大约一半(53%)的加拿大15岁学生参加了PISA 2015评估。相比之下,日本和韩国超过90%的15岁青少年都参加了。 为什么加拿大的数据看起来如此糟糕?原因有很多。 首先,加拿大的学校比其他国家的学校更有可能拒绝参加,加拿大的国家报告在魁北克省内标记了特殊问题(其中不到一半的学校同意参加,请参见表A2)。 如果某些类型的学校(例如,表现较差的学校)比其他学校(例如,表现较好的学校)参与的可能性较小,那么这可能导致加拿大PISA成绩出现上升偏差。 其次,由于特殊教育需求等问题,加拿大更有可能将学生排除在参加PISA评估之列(加拿大有7.5%的15岁学生被排除在外,而日本为2.4%,韩国则不到1%)。而这部分被排除在外的学生,很可能是表现较差的群体。 最后,即使是在那些同意参加的学校里,加拿大的学生真正参加PISA评估的可能性也比较低。具体来说,官方数据显示,约有20%的加拿大青少年在PISA测试当天缺席,而日本和韩国的这一比例不到3%。众所周知,某些类型的学生(例如,来自较低社会经济背景的较差学生)在学校的缺勤率较高,而这些特征可能与学生在PISA测试中的表现有关。因此,这似乎有可能导致结果的向上偏差。 总的来说,这是一个严重的问题,我们认为这严重削弱了我们对加拿大2015年PISA数据的信心。我们认为,加拿大在与其他 “表现良好”的国家(如日本和韩国)进行比较时存在特殊的问题,因为这些国家中真正具有代表性的学生参加了测试。 事实上,在刨根问底之后,加拿大成为“教育超级大国”的证据似乎并不特别有力。