CONTENTS

5 Editorial

Deborah Harris

Data Visualization

7 On the Cover: Is my Test Speeded?

Zhongmin Cui

Articles

8 When Assessment Validation Neglects Any Strand of Validity Evidence: An Instructive Example from PISA

David Pepper

21 Synergy and Tension between Large‐Scale and Classroom Assessment: International Trends

Louis Volante, Christopher DeLuca, Lenore Adie, Eva Baker, Heidi Harju‐Luukkainen, Margaret Heritage, Christoph Schneider, Gordon Stobart, Kelvin Tan, and Claire Wyatt‐Smith

30 Rubric Rating with MFRM versus Randomly Distributed Comparative Judgment: A Comparison of Two Approaches to Second‐Language Writing Assessment

Maureen E. Sims, Troy L. Cox, Grant T. Eckstein, K. James Hartshorn, Matthew P. Wilcox, and Judson M. Hart

41 Examining Effectiveness and Validity of Accommodations for English Language Learners in Mathematics: An Evidence‐Based Computer Accommodation Decision System

Jamal Abedi, Yu Zhang, Susan E. Rowe, and Hansol Lee

53 Evaluating Content‐Related Validity Evidence Using a Text‐Based Machine Learning Procedure

Daniel Anderson, Brock Rowley, Sondra Stegenga, P. Shawn Irvin, and Joshua M. Rosenberg

65 Are Accommodations for English Learners on State Accountability Assessments Evidence‐Based? A Multistudy Systematic Review and Meta‐Analysis

Joseph A. Rios, Samuel D. Ihlenfeldt, and Carlos Chavez

76 Exploring the Impact of Rater Effects on Person Fit in Rater‐Mediated Assessments

Stefanie A. Wind

95 Is Procrastination Related to Low‐Quality Data?

Nathaniel M. Voss and Lisa Vangsness

105 Generating Performance‐Level Descriptors under a Principled Assessment Design Paradigm: An Example for Assessments under the Next‐Generation Science Standards

Richard M. Luecht

116 Argumentation Surrounding Argument‐Based Validation: A Systematic Review of Validation Methodology in Peer‐Reviewed Articles

Matthew Ryan Lavery, Jonathan D. Bostic, Lance Kruse, Erin E. Krupa, and Michele B. Carney

ITEMS Corner

131 ITEMS Portal Development Update

André A. Rupp

133 Digital Module 19: Foundations of IRT Estimation

Zhuoran Wang and Nathan Thompson

135 Digital Module 20: Classroom Assessment Standards

Caroline Wylie

137 Digital Module 21: Results Reporting for Large‐Scale Assessments

Francis O'Donnell and April L. Zenisky

Front cover visual: Visualizing Test Speededness with Item Response Time, Position, and Difficulty

中文翻译：

---

发行信息

内容

5社论

黛博拉·哈里斯（Deborah Harris）

数据可视化

7封面：我的考试加快了吗？

崔忠民

文章

8当评估验证忽略了任何有效证据时：PISA的指导性例子

大卫·佩珀

21大规模评估与课堂评估之间的协同作用和张力：国际趋势

路易斯·沃兰特（Louis Volante），克里斯托弗·德卢卡（Christopher DeLuca），莱诺尔·阿迪（Lenore Adie），伊娃·贝克（Eva Baker），海蒂·哈留·卢卡凯宁（Heidi Harju-Luukkainen），玛格丽特遗产，克里斯托夫·施耐德（Christoph Schneider），戈登·斯托巴特，凯尔文·谭（Kelvin Tan）和克莱尔·怀亚特·史密斯

30 MFRM与随机分布比较判断的专栏评级：两种第二语言写作评估方法的比较

莫琳·西姆斯（Maureen E. Sims），特洛伊·考克斯（Troy L. Cox），格兰特·T·埃克斯坦（Grant T.Eckstein），詹姆斯·哈特索恩（James Hartshorn），马修·威尔科克斯（Matthew P.

41为数学学习英语学习者的住宿的有效性和有效性：基于证据的计算机住宿决策系统

Jamal Abedi，Yu Zhang，Susan E.Rowe和Hansol Lee

53使用基于文本的机器学习程序评估与内容相关的有效性证据

丹尼尔·安德森（Daniel Anderson），布罗克·罗利（Brock Rowley），桑德拉·斯特根加（Sondra Stegenga），体育·肖恩·欧文（Shawn Irvin）和约书亚·罗森伯格（Joshua M.Rosenberg）

65是否为英语学习者提供的关于国家责任评估的便利是基于证据的？多元研究的系统评价和荟萃分析

约瑟夫·A·里奥斯，塞缪尔·D·伊伦费尔特和卡洛斯·查韦斯

76在评估者介导的评估中探索评估者对个人适应的影响

孙燕姿

95拖延症与低质量数据有关吗？

纳撒尼尔（Nathaniel M. Voss）和丽莎（Lisa Vangsness）

在原则性评估设计范式下生成105个性能级别描述符：下一代科学标准下的评估示例

理查德·路易特

116论据围绕论据的验证：同行评审文章中验证方法的系统评价

Matthew Ryan Lavery，Jonathan D.Bostic，Lance Kruse，Erin E.Krupa和Michele B.Carney

项目角

131个ITEMS门户开发更新

安德烈·鲁普

133数字模块19：IRT估算的基础

王卓然和内森·汤普森

135数字模块20：课堂评估标准

卡罗琳·威利（Caroline Wylie）

137数字模块21：大规模评估的结果报告

弗朗西斯·奥唐奈（Francis O'Donnell）和April L.Zenisky

封面视觉：通过项目响应时间，位置和难度可视化测试速度