The dot-probe task is a widely used experimental paradigm that evaluates attention biases within anxiety disorders. Considerable research has focused on improving the reliability of dot-probe scores because the task's original attention bias index has shown very low test-retest reliability. The current study serves as a replication and extension of Price et al. (2015), who systematically examined the effects of methodological choices on reliability of dot-probe task results. Fifty-six adults diagnosed with social anxiety disorder were asked to complete a facial dot-probe task twice, approximately 1 week apart. Test-retest reliability and internal consistency were examined for 10 dot-probe attention bias indices across 55 sets of outlier cutoffs. Both Pearson's r and intraclass correlation coefficients were used. Trial-level bias score indices of mean bias toward threat and attention bias variability, which measure attention bias dynamically using individual pairs of trials, demonstrated the highest reliability and were less sensitive to changes in outlier cutoffs as compared with the dot probe's classic attention bias index and others. Results demonstrate the potential for post hoc outlier cutoff selection to artificially inflate reliability, particularly for unreliable indices. A priori cutoff selection is recommended for future research. Intraclass correlation coefficients are also recommended for assessment of reliability because Pearson's r does not account for poor agreement between scores. (PsycInfo Database Record (c) 2020 APA, all rights reserved).

中文翻译：

---

评估社交焦虑症患者在点探针任务中注意偏倚和注意偏倚变异性措施的可靠性。

点探针任务是一种广泛使用的实验范式，用于评估焦虑症中的注意偏见。大量的研究集中在提高点探针得分的可靠性上，因为任务的原始注意力偏差指数显示出极低的重测信度。当前的研究是Price等人的复制和扩展。（2015年），他系统地研究了方法选择对点探针任务结果可靠性的影响。要求五十六名被诊断出患有社交焦虑症的成年人完成两次面部点探针任务，大约相隔1周。重新测试的信度和内部一致性在55组离群截止值上检查了10个点探针注意偏倚指数。皮尔森的r和类内相关系数都被使用。与点探针的经典注意偏倚指数相比，使用单个成对试验动态测量注意偏倚的平均威胁偏倚和关注偏倚变异性的试验水平偏倚得分指数显示出最高的可靠性，并且对离群值的变化较不敏感和别的。结果证明了事后离群截止选择的潜力人为地提高了可靠性，特别是对于不可靠的指标。建议先验截止选择以用于将来的研究。还建议使用类内相关系数来评估可靠性，因为Pearson的r不能说明得分之间的一致性差。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。与点探针的经典注意偏倚指数等相比，使用个别试验对来动态测量注意偏倚的方法显示出最高的可靠性，并且对离群值变化的敏感性较低。结果证明了事后离群截止选择的潜力人为地提高了可靠性，特别是对于不可靠的指标。建议先验截止选择以用于将来的研究。还建议使用类内相关系数来评估可靠性，因为Pearson的r不能解释得分之间的不良一致性。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。与点探针的经典注意偏倚指数等相比，使用个别试验对来动态测量注意偏倚的方法显示出最高的可靠性，并且对离群值变化的敏感性较低。结果证明了事后离群截止选择的潜力人为地提高了可靠性，特别是对于不可靠的指标。建议先验截止选择以用于将来的研究。还建议使用类内相关系数来评估可靠性，因为Pearson的r不能说明得分之间的一致性差。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。的经典注意力偏差指数等。结果证明了事后离群截止选择的潜力人为地提高了可靠性，特别是对于不可靠的指标。建议先验截止选择以用于将来的研究。还建议使用类内相关系数来评估可靠性，因为Pearson的r不能解释得分之间的不良一致性。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。的经典注意力偏差指数等。结果证明了事后离群截止选择的潜力人为地提高了可靠性，特别是对于不可靠的指标。建议先验截止选择以用于将来的研究。还建议使用类内相关系数来评估可靠性，因为Pearson的r不能说明得分之间的一致性差。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。sr不能解释分数之间的不良一致性。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。sr不能解释分数之间的不良一致性。（PsycInfo数据库记录（c）2020 APA，保留所有权利）。