Valid cross-country comparisons of student learning and pivotal factors contributing to it, such as teaching quality, offer the possibility to learn from outstandingly effective educational systems across the world and to improve learning in classrooms by providing policy relevant information. Yet, it often remains unclear whether the instruments used in international large–scale assessments work similarly across different cultural and linguistic groups, and thus can be used for comparing them. Using PISA 2012 data, we investigated data comparability of three teaching quality dimensions, namely student support, classroom management, and cognitive activation using a newly developed psychometric approach, namely alignment. Focusing on 15 countries, grouped into five linguistic clusters, we secondly assessed the impact of linguistic similarity on data comparability. Main findings include that (1) comparability of teaching quality measures is limited when comparing linguistically diverse countries; (2) the level of comparability varies across dimensions; (3) linguistic similarity considerably enhances the degree of comparability, except across the Chinese-speaking countries. Our study illustrates new and more flexible possibilities to test for data comparability and outlines the importance to consider cultural and linguistic differences when comparing teaching-related measures across groups. We discuss possible sources of lacking data comparability and implications for comparative educational research.

中文翻译：

---

语言相似性对学生对教学质量感知的跨文化可比性的影响

对学生学习的有效跨国比较和促成其学习的关键因素（如教学质量）提供了从世界各地非常有效的教育系统中学习的可能性，并通过提供政策相关信息来改善课堂学习。然而，国际大规模评估中使用的工具在不同的文化和语言群体中是否具有相似的作用，因此通常仍不清楚，因此可以用来比较它们。使用 PISA 2012 数据，我们使用新开发的心理测量方法（即对齐）调查了三个教学质量维度的数据可比性，即学生支持、课堂管理和认知激活。专注于 15 个国家，分为五个语言集群，其次，我们评估了语言相似性对数据可比性的影响。主要发现包括：（1）在比较语言多样化的国家时，教学质量衡量标准的可比性有限；(2) 可比性水平因维度而异；(3) 语言相似性大大提高了可比性，除了在华语国家之外。我们的研究说明了测试数据可比性的新的和更灵活的可能性，并概述了在比较不同群体的教学相关措施时考虑文化和语言差异的重要性。我们讨论了缺乏数据可比性的可能来源以及对比较教育研究的影响。主要发现包括：（1）在比较语言多样化的国家时，教学质量衡量标准的可比性有限；(2) 可比性水平因维度而异；(3) 语言相似性大大提高了可比性，除了在华语国家之外。我们的研究说明了测试数据可比性的新的和更灵活的可能性，并概述了在比较不同群体的教学相关措施时考虑文化和语言差异的重要性。我们讨论了缺乏数据可比性的可能来源以及对比较教育研究的影响。主要发现包括：（1）在比较语言多样化的国家时，教学质量衡量标准的可比性有限；(2) 可比性水平因维度而异；(3) 语言相似性大大提高了可比性，除了在华语国家之外。我们的研究说明了测试数据可比性的新的和更灵活的可能性，并概述了在比较不同群体的教学相关措施时考虑文化和语言差异的重要性。我们讨论了缺乏数据可比性的可能来源以及对比较教育研究的影响。我们的研究说明了测试数据可比性的新的和更灵活的可能性，并概述了在比较不同群体的教学相关措施时考虑文化和语言差异的重要性。我们讨论了缺乏数据可比性的可能来源以及对比较教育研究的影响。我们的研究说明了测试数据可比性的新的和更灵活的可能性，并概述了在比较不同群体的教学相关措施时考虑文化和语言差异的重要性。我们讨论了缺乏数据可比性的可能来源以及对比较教育研究的影响。