Background: Impact evaluations draw their data from two sources, namely, surveys conducted for the evaluation or administrative data collected for other purposes. Both types of data have been used to estimate program impacts. This is an introductory essay to a Special Issue entitled “Do the Estimated Effects of Social Programs Depend on the Source of Data Used to Measure Them? Survey Data Versus Administrative Data.” In addition to this essay, the Special Issue contains six articles, which appear in Volume 42, Issue 5–6 (October–December 2018) and in this issue (Volume 43, Issue 5 (October 2019)) of Evaluation Review. Objective: To describe and summarize each of the six papers and draw lessons from them. The papers investigate the relative strengths and weaknesses of survey and administrative data for estimating the impacts of policy interventions. Results: This essay first describes a simple model of the mechanisms that can cause impacts estimated with survey data to differ from those estimated with administrative data. It then describes and summarizes each of the papers appearing in this Special Issue and uses the model described to interpret the findings when it is applicable. The final section draws general lessons from the papers. Conclusions: The decision on whether to use survey or administrative data to estimate program impacts can be highly consequential because the estimates can differ considerably. All the papers in this Special Issue point to the importance of using both survey data and administrative data whenever possible.

中文翻译：

---

特刊编辑的随笔。

背景：影响评估从两个来源获取数据，即为进行评估而进行的调查或为其他目的而收集的行政数据。两种类型的数据都已用于估计程序的影响。这是一期特刊的介绍性文章，题为“社会计划的估计效果是否取决于用于衡量社会计划的数据来源？调查数据与管理数据。” 除本文外，本期特刊还包含六篇文章，分别发表在《评估评论》第42卷第5-6期（2018年10月至12月）和本期（第43卷第5期（2019年10月））中。目的：描述和总结六篇论文，并从中吸取教训。这些论文调查了调查和行政数据的相对优势和劣势，以评估政策干预的影响。结果：本文首先描述了一个简单的机制模型，该模型可能导致调查数据估计的影响与行政数据估计的影响不同。然后，它描述并总结了本期特刊中出现的每篇论文，并使用所描述的模型在适用时解释了发现。最后一部分从这些论文中吸取了一般性的教训。结论：关于使用调查还是行政数据来估计计划影响的决定可能是非常重要的，因为估计可能会有很大差异。本期特刊中的所有论文都指出了尽可能使用调查数据和行政数据的重要性。本文首先描述了一种简单的机制模型，该模型可能导致调查数据估计的影响与行政数据估计的影响不同。然后，它描述并总结了本期特刊中出现的每篇论文，并使用所描述的模型在适用时解释了发现。最后一部分从这些论文中汲取了一般性的教训。结论：关于使用调查还是行政数据来估计计划影响的决定可能是非常重要的，因为估计可能会有很大差异。本期特刊中的所有论文都指出了尽可能使用调查数据和行政数据的重要性。本文首先描述了一种简单的机制模型，该模型可能导致调查数据估计的影响与行政数据估计的影响不同。然后，它描述并总结了本期特刊中出现的每篇论文，并使用所描述的模型在适用时解释了发现。最后一部分从这些论文中汲取了一般性的教训。结论：关于使用调查还是行政数据来估计计划影响的决定可能是非常重要的，因为估计可能会有很大差异。本期特刊中的所有论文都指出了尽可能使用调查数据和行政数据的重要性。然后，它描述并总结了本期特刊中出现的每篇论文，并使用所描述的模型在适用时解释了发现。最后一部分从这些论文中汲取了一般性的教训。结论：关于使用调查还是行政数据来估计计划影响的决定可能是非常重要的，因为估计可能会有很大差异。本期特刊中的所有论文都指出了尽可能使用调查数据和行政数据的重要性。然后，它描述并总结了本期特刊中出现的每篇论文，并使用所描述的模型在适用时解释了发现。最后一部分从这些论文中汲取了一般性的教训。结论：关于使用调查还是行政数据来估计计划影响的决定可能是非常重要的，因为估计可能会有很大差异。本期特刊中的所有论文都指出了尽可能使用调查数据和行政数据的重要性。