当前位置: X-MOL 学术Psychological Methods › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
Managing validity versus reliability trade-offs in scale-building decisions.
Psychological Methods ( IF 10.929 ) Pub Date : 2020-06-01 , DOI: 10.1037/met0000236
Jeremy D W Clifton 1
Affiliation  

Scale builders strive to maximize 2 priorities: validity and reliability. While the literature is full of tips for increasing 1, the other, or both simultaneously, how to navigate tensions between them is less clear. Confusion shrouds the nature, prevalence, and practical implications of trade-offs between validity and reliability-formerly called paradoxes. This confusion results in most trade-offs being resolved de facto at validity's expense despite validity being de jure the higher priority. Decades-long battles against clear measurement malpractice persist because unspecified trade-offs render scale-building decisions favoring validity perennially unattractive to scale builders. In light of this confusion, the goal of this article is to make plain that the source of validity versus reliability trade-offs is systematic error that contributes to item communality. Moreover, straightforward, nontrivial trade-offs pervade the scale-building process. This article highlights common trade-offs in 6 contexts: item content, item construction, item difficulty, item scoring, item order, and item analysis. I end with 5 recommendations for managing trade-offs and out 7 "dirty tricks" often used to exploit them when nobody's looking. In short, reviewers should require scale builders to declare how validity and reliability will be prioritized and penalize those who resolve trade-offs in goal-inconsistent ways. (PsycINFO Database Record (c) 2019 APA, all rights reserved).

中文翻译:

在规模构建决策中管理有效性与可靠性之间的权衡。

秤的制造商努力使两个优先事项最大化:有效性和可靠性。尽管文献中充斥着增加1、2,或同时增加两者的技巧,但如何解决它们之间的紧张关系尚不清楚。混淆笼罩了有效性和可靠性之间权衡取舍的性质,普遍性和实际含义,以前称为悖论。这种混淆导致大多数折衷实际上以有效性为代价而得以解决,尽管有效性在法律上具有更高的优先级。数十年来,人们一直在与明确的测量失误作斗争,这是长期存在的,因为未作规定的权衡取舍使得量表建设决策长期以来都偏向于不影响量表建设者的吸引力。鉴于这种困惑,本文的目的是明确指出,有效性与可靠性之间的权衡取舍是造成项目共同性的系统性错误。此外,直接的,不重要的折衷贯穿规模的建立过程。本文重点介绍了6种情况下的常见取舍:项目内容,项目结构,项目难度,项目评分,项目订单和项目分析。最后,我提出了5条管理权衡的建议,并提出了7条“肮脏的技巧”,这些技巧通常在没人看的时候用来加以利用。简而言之,审阅者应要求量表构建者声明如何优先考虑有效性和可靠性,并对以目标不一致的方式解决折衷问题的人员进行处罚。(PsycINFO数据库记录(c)2019 APA,保留所有权利)。非平凡的权衡贯穿规模的建立过程。本文重点介绍了6种情况下的常见取舍:项目内容,项目结构,项目难度,项目评分,项目订单和项目分析。最后,我提出了5条管理权衡的建议,并提出了7条“肮脏的技巧”,这些技巧通常在没人看的时候用来加以利用。简而言之,审阅者应要求量表构建者声明如何优先考虑有效性和可靠性,并对以目标不一致的方式解决折衷问题的人员进行处罚。(PsycINFO数据库记录(c)2019 APA,保留所有权利)。非平凡的权衡贯穿规模的建立过程。本文重点介绍了6种情况下的常见取舍:项目内容,项目结构,项目难度,项目评分,项目订单和项目分析。最后,我提出了5条管理权衡的建议,并提出了7条“肮脏的技巧”,这些技巧通常在没人看的时候用来加以利用。简而言之,审阅者应要求量表构建者声明如何优先考虑有效性和可靠性,并对以目标不一致的方式解决折衷问题的人员进行处罚。(PsycINFO数据库记录(c)2019 APA,保留所有权利)。通常在没人看的时候利用它们。简而言之,审阅者应要求量表构建者声明如何优先考虑有效性和可靠性,并对以目标不一致的方式解决折衷问题的人员进行处罚。(PsycINFO数据库记录(c)2019 APA,保留所有权利)。通常在没人看的时候利用它们。简而言之,审阅者应要求量表构建者声明如何优先考虑有效性和可靠性,并对以目标不一致的方式解决折衷问题的人员进行处罚。(PsycINFO数据库记录(c)2019 APA,保留所有权利)。
更新日期:2020-06-01
down
wechat
bug