- 资助:美国国家科学基金会
- 合作者:美国研究所
非正式的STEM教育需要高质量的项目评估。特别需要研究STEM结果与积极青年发展(PYD)/社会情感学习(SEL)之间的关系。这个试点和可行性项目涉及STEM教育、校外时间计划(OST)、PYD、SEL、评估和计划开发方面的专家之间的合作。STEM童军通过体验活动和与STEM专业人士的互动,帮助青少年成长性格,发展技能。该项目扩展了系统评估协议(SEP)的实施,这是一种基于证据的评估计划方法。目标是:1)发展STEM童子军的变革理论,强调STEM结果与PYD/SEL结果之间的关系;2)试点增强SEP(系统映射、生态系统建模和模型验证);3)确定开展全国STEM童子军研究的可行性。STEM童子军领导和项目研究人员通过SEP生成利益相关者图、逻辑模型和路径模型(PM)。全国各地的五个STEM童子军实验室参加了焦点小组,他们完成了生态系统地图,以确定实验室存在的系统(例如,利益相关者和决策者),审查和修订了他们的系统地图,确定了PM中的关键成果和联系,并讨论了PM如何反映他们的STEM童子军经验。
- 资助人:S.D.柏克德基金会
- 合作者:美国研究所,美国童子军
美国童军组织的“一起童军活动中建立证据”(BSA BEST)研究的目的是了解成人经历和训练如何影响青少年的性格结果。指导这项全国性研究的首要研究问题是:
- 什么样的训练和经验的结合能使BSA的成年志愿者最有效(就向青少年灌输性格结果而言)?
- 如何加强成人训练及制度,以支持青少年的品格发展?
- 童军BSA的成人训练实施有哪些变化?
与多样性、公平性和包容性相关的研究问题是:
- 成人领袖如何在与青年的工作中处理多样性和包容性问题,并通过这些努力潜在地促进青年性格发展?
- 青年的经历与BSA的多样性和包容性有什么关系?
- 如果有的话,在木徽章和童军团长特定职位的成人训练中,多样性是如何出现的?
第三波数据收集是在2019冠状病毒病大流行袭击美国时(2020年3月/ 4月)进行的。因此,我们能够在大流行期间增加与青少年心理健康相关的额外研究问题。研究问题是:
- 目标感更强的年轻人在2019冠状病毒病期间不太可能出现焦虑和抑郁症状吗?
- 青少年对自己的亲社会行为的描述在哪些方面与目的和心理健康之间的关系一致?
BSA BEST研究由四个组成部分组成,每个部分都同等重视:1)定量调查,2)定性访谈,3)观察,4)数据使用。我们在三个时间点对全国各地的童军团长、助理童军团长和童军进行调查。1339支部队共9667名青年和4362名成人参与了至少一波调查数据收集。我们还在3个时间点对全国约100名成年领袖和100名童军进行了电话采访。我们在9个州观察了Wood Badge培训,包括17个实地考察,在那里我们能够观察326名培训参与者和168名培训师。我们也观察了4个童军团长职位特定训练。
也许最重要的是,我们从一开始就关注数据的使用。我们的主要目标是为BSA的合作伙伴提供有意义、可操作和有用的研究结果。在整个研究过程中,一个数据使用小组召开了会议,该小组由来自BSA、美国研究所和火狐体育的代表组成。这些会议被两次数据使用务虚会打断。第一次静修专注于与培训相关的发现,并于2019年秋季亲自进行。第二组务虚会的重点是与多样性、公平和包容性相关的发现,于2020年夏季举行。
PACE项目是一种评估能力建设的创新方法,为青年品格发展项目的工作人员和评估人员提供了独特的专业发展机会。
对于项目人员来说,PACE旨在立即提高评估、改进、捍卫和寻求项目资金的能力。对于当前和未来的评估专业人员,PACE提供了一个独特的机会来发展评估能力建设和创新评估技术方面的专业知识,包括系统评估和以人为本的分析。
PACE方法的创新之处在于,它寻求超越项目人员的评估技能建设活动,同时也解决推动评估工作向前发展的好奇心、动机和仔细思考等更基本的条件。此外,该项目是围绕评估人员和规划人员之间的真正伙伴关系组织的,在这种伙伴关系中,评估过程的所有权是共享的,两组专业人员都为项目带来了专业知识。我们的希望是,这种方法将导致评估人员和青少年性格发展项目工作人员之间的持续关系,在项目结束后很长一段时间内保持这种关系,并在未来几年里产生高质量的青少年性格发展项目和评估工作。有关该项目的更多信息,请访问详细项目说明。

PACE项目将提供支持
- 16个青少年性格发展项目,每个项目都有2500美元的奖金(如果继续进行评估计划,还会有2000美元的奖金),以及差旅费
- 8名目前或未来的评估专家,每人有6000美元的奖励(如果继续与1或2个合作项目进行评估计划,则每个评估计划额外增加2500美元),以及差旅费
参与该项目的结果是,项目及其工作人员将:
- 增强评估能力
- 一个完善的变化理论
- 可用于与涉众沟通规划及其评估的规划与评估概要文件
- 定制的“谈话要点”,允许参与项目的员工将自己推广为品格/青年发展项目,并倡导他们的评估方法
- 一个评估性思维网站计划,旨在逐步改善组织文化和围绕评估的沟通
- 与专业评估人员建立了良好的关系
- 获得参与计划和评估人员的网络
那些选择制定完整的评估计划并与合作伙伴评估人员合作实施该计划的项目也将有一个正式和详细的评估计划。

评估人员将有:
- 增加了对进化评估、系统评估协议、评估思维、以人为中心的分析和品格美德发展规划的知识和理解
- 在评估能力建设环境中促进进化评估、系统评估协议和评估性思维活动的经验
- 与2个项目合作开发的经验:变革理论和项目与评估概况(pep)
- 与多达2个青少年品格项目合作评估计划的经验(如果双方都需要)
- 火狐体育PACE项目证书
PACE项目是围绕参与项目和评估人员之间的伙伴关系组织的,包括(对于每个项目队列):
- 2车间
- 几个在线研讨会
- 季度电话会议
- 最后的会议
- 与合作伙伴项目/评估者和促进者进行持续沟通