测量及数据收集

PDF版本

指定好的结果,我们将使用的指标来衡量他们需要深刻理解程序的开发,实现项目的目标,以及计划或政策可能影响生活的潜在途径,正面和负面。
——Rachel Glennerster和Kudzai Takavarasha,,运行随机评估:实用指南.

我们感兴趣的主要结果通常是在我们最初的研究问题中定义的。威廉希尔福彩一百万班级规模对学习的影响,但许多问题仍然存在:

  1. 改变理论:什么是我们期望的路径变化归因于我们的程序来呢?吗?
  2. 测量:我们的结果及指标是什么?吗?
  3. 数据收集:我们如何获得关于结果的数据?吗?
  4. 数据质量:我们如何确保数据质量标准的过程中收集数据?吗?

变化的理论

变化的理论描述了一个策略或实现一个给定的长期目标的蓝图。它确定了前提条件,途径,和干预计划的成功所必需的。

测量

一个“结果”是一个改变或影响所造成的项目我们正在评估,也可能是我们想要测量的受访者的特点。一个“指示器“是一个可观测的信号用来测量结果。

在决定我们的结果及指标以及它们如何适应变化的评估的理论,我们需要考虑的问题包括:

  1. 中间是什么结果,可以测量每个组件的理论变化(从开始假设过程)?吗?
  2. 基线结果将所测量的各种方式样本是异构的,帮助我们理解上下文,帮助我们衡量异构的治疗效果,以及帮助我们吸收方差,以帮助精度?吗?
  3. 为评估估计异构治疗效果的一个例子,看到这篇论文莫妮卡Angelucci,迪恩•卡兰在墨西哥和乔纳森Zinman看着小额贷款。
  4. 其他环境的结果(比如什么。学校的质量,密度)可以帮助我们评估我们的评估样本的背景下,这可以帮助我们确定的程度结果可概括的其他上下文?吗?
  5. 我们如何确保我们的结果被以一种既保证有效性又保证公正的方式来衡量?准确的测量结果和可靠性,一致的精确测量结果如何?吗?
  6. 我们如何系统地记录之间的结果,像在William Hill彩票j - pal研究试图衡量政策制定者对女性的偏见在印度?吗?
  7. 哪些结果必须定量测量,和定性?吗?
  8. 我们如何考虑代理措施?一个例子是聚吡咯,主要贫困测量工具用于测量家庭贫困,提高目标定位和社会绩效,福利和跟踪变化

测量在特定主题领域

性别:J-PALWilliam Hill彩票的研究资源,威廉希尔福彩一百万,一个实用指南的测量评估妇女和女童权利的影响,收集来自不同学科的见解和J-PAL在世界各地所属研究人员的经验,并提供如何衡量影响评估中妇女和女孩赋权的实用技巧。William Hill彩票威廉希尔福彩一百万

健康:测量健康状况实地调查是一个在线课程,探讨了实地的基本面健康研究通过纪录片学习正在进行的研究项目在印度和肯尼亚。威廉希尔福彩一百万

数据收集

根据我们的变化理论确定了我们的指标,下一个问题变成:我们如何从样本中的个体获得关于这些指标的数据?大致有两种类型的数据:数据和第二的数据。

数据是研究人员自己收集的数据,威廉希尔福彩一百万通常作为实验的一部分。(主数据不应混淆主要结果!)

二次数据来自其他sources-perhaps行政数据的政府合作伙伴,调查数据来自另一个研究机构,威廉希尔福彩一百万研究,或统计局。

  • 我们如何获得和使用非公共行政数据来进行随机评价?这资源为如何获取和使用非公共行政数据进行随机评价提供实际指导。许多概念在本指南适用于各国和上下文,某些部分有针对性的专门研究,属于美国。威廉希尔福彩一百万
  • 数据访问程序关键管理数据源是什么在美国?获取数据的具体要求和过程因数据源而异。协助研究人员筛选潜在威廉希尔福彩一百万的数据源,William Hill彩票j - pal北美编目美国许多重要的数据集.此目录文件程序如何访问数据基于原始机构提供的信息。
  • 这个列表《卫报》编辑了一些现有数据集的链接,这些数据集可能引起国际开发研究人员和实践者的兴趣。威廉希尔福彩一百万

如果我们的评估涉及主数据的收集,下一组回答的问题包括:

  1. 我们应该建立数据收集团队内部,或任务外包给一家调查公司吗?吗?
  2. 我们应该使用纸质调查,或电子数据收集(计算机辅助interviewing-CAI)?确定使用什么类型的数据收集过程将影响的因素,从可以问的问题类型来看,收集和分析数据的时间表。
    • 这篇文章在“发展影响”的博客中,涉及到了从事纸质数据收集与电子数据收集之间的一些权衡。
  3. 如果从事电子数据收集,我们应该使用什么软件和平台?吗?

一些选项用音标和j - pal研究人员在过去的包括:William Hill彩票威廉希尔福彩一百万

  • SurveyCTO,计算机辅助面试在Android手机上。SurveyCTO博客对于各种数据收集和测量主题来说也是一个极好的资源。
  • SurveyBe,从EDI基于tablet的CAI软件。
  • 彭龙,与Android兼容,iOS,和桌面操作系统。
  • 开放数据设备,免费的,类似于SurveyCTO的开源Android软件。
  • 布莱斯,平板电脑/基于计算机的软件,需要稍微多一点的编码事前。
  • Fieldata,基于手机的CAI软件。

数据质量

我们如何监控数据收集过程,在数据收集过程中和数据输入之后,确保数据质量呢?音标和j - pal已经开发出的一些资源包括(这些将刊登William Hill彩票在将来的某个日期,我们正在完成):

  • 数据质量检查手册
  • 回车指南
  • BCSTATS,占据程序写的出来工作人员对调查数据进行重新检查
  • 高频检查指导
  • 高频检查占据代码

一组相关的问题包括数据录入基础数据收集协议当纸而不是使用电子数据收集:

  1. 我们应该管理数据录入内部或外包吗?吗?
  2. 我们如何确保数据输入质量?吗?
    • cfout,由IPA工作人员编写的用于协调多轮数据录入的Stata程序。

请注意,这里引用的实践研究资源是为特定的研究和培训需要而策划的威廉希尔福彩一百万,并且仅用于信息目的。威廉希尔赛狗请电子邮件我们更多信息。