网络研讨会4 -为什么评估 & 教师发展相互需要:利用证据提高学生学习

秋季学期是校园里充满活力的一段时间! 这也是一个开始考虑你今年的评估计划的完美时间. 具体来说,你想用什么仪器来测量. 不幸的是,收集数据很常见, 仅仅去发现它并不能告诉我们要去发现什么(见 Dr. Finney的网络研讨会,关于实现Fidelity数据 求它的解!). 不管你是在调整你目前正在使用的东西,还是你想尝试一些不同的东西, 评估准则, 调查, 焦点小组是很好的选择. 这篇摘要文章来自有效使用评估工具“由Dr. 美国帕雷德斯,博士. Tancy Vandecar-Burdin和Dr. Sheri Popp会带你从每一个开始!

评估准则

什么是标号?
在IE工作评估中,共享的术语总是很重要的——读写能力促进协作. 标尺是一种教学和评估工具,旨在清楚地描述某项学习或评估任务的特点和质量. 它为如何评价或判断事物建立了标准.

为什么我要考虑使用标号?
这对学生和教师都有好处. 教师甚至可以和学生一起建立校徽, 这能帮助他们批判性地思考任务, 结果, 和质量.

对于学生来说,标语牌可以清晰地表达他们的期望,并清楚地说明什么是“好”. 它可以告诉和展示学生如何成功. 标题还提供有用的和有针对性的反馈, 让学生掌握自己的学习. 最后,它鼓励元认知反思,因为学生可以用一个标号进行自我评估.

为教师, 标题有助于教学决策的清晰性, 当你清楚地表达学生完成任务和完成项目目标所需的知识和技能时. 它是一个指向性能组件部分的映射. 这反过来又通知了需要指导的区域,将所有内容联系在一起.

标号还能鼓励更稳定的得分. 然而所有的评分都是主观的,评分标准并不能完全消除这一点, 这将有助于这一过程更加客观. 也许最好的原因之一是,标号可以节省时间! 而创建一个标号和校准需要时间, 从长远来看,这样可以节省时间, 特别是当你获得许多项目时.

质量标尺的特点
有效的评分标准有五个属性:

  • 语言清晰度:避免使用一般的术语,如好/坏. 相反,使用非常具体的语言. 他的语气很适合观众.”
  • 注重质量(而不是数量):而项目必须遵循长度等方向.,标号考虑质量因素.
  • 简单(4点)刻度:一个奇怪的刻度会被吸引到中心,超过4点就太复杂了.
  • 可管理的长度:标题应该是完整的,但可管理的-不超过一页.
  • 基本标准:您真正想从这个工具中了解什么? 一些共同的主题可能是思维质量, 内容知识量, 以及产品的组织. 如果你想包含的东西很难定义, 不要跳过它, 但要说清楚(你的学生需要这点).

我如何创建一个标题?
幸运的是,这里有很多资源. 你可以参考文献和专业机构, 哪些经常有例子和说明. 通常,搜索你需要的项目或规程的类型会产生一个很好的起点或借鉴. 您也可以从零开始创建自己的! 收集学生作品样本, 按照good/better/best来分类和分组, 然后对这些原因的属性进行分类,并将这些原因压缩成集群, 哪些构成了标题类别. 这个练习在课堂上也很有效.

调查

什么是调查?
虽然我们都做过调查,但大多数人从来没有设计过. “调查”一词最常用于描述从个体样本中收集信息的方法. 调查提供了对人们态度的定量或数字描述, 感知, 首选项/意见, 或者通过研究该人群的样本来了解实际的行为/经历.

为什么要使用调查?
当现有的数据来源不够充分,你需要关于人们观点的信息时,最常使用调查, 感知, 信仰, 或经验. 他们可以提供数据,可用于做出重要决策或更改课程, 项目, 政策, 等.

特别是在评估方面,调查可以帮助衡量:

  • 程序评估/有效性
  • 学生的学习成果
  • 学生满意度
  • 雇主的满意度
  • 校友的经历

如何创建调查?
首先,确定你的“大”问题——你需要知道什么? 对于评估,它应该与你的项目、课程或单元的目标和目的相关.

然后你要关注这个问题以便概念化和操作你需要衡量的东西. 哪些维度和指示器可以帮助您回答您的问题? 维度可能是任务或活动、频率、价值或技能. 指标可以包括满意度, 计划继续使用某个服务, 如果有人能推荐什么, 或评级.

最后,您需要为进行调查制定计划. 了解你的群体是至关重要的. 你如何联系他们? 一旦你获得了联系信息,你就可以决定你的调查方式(电话), 面对面, 网络, 邮件, 或结构). 当你考虑你的收件人, 考虑可能影响调查的其他方面, 比如识字问题, 词汇和术语, 访问技术, 和激励

记住,你不需要总是做无用功! 使用已有的调查和问题是很常见的, 也可以咨询你的同事和专业协会.

我如何写出好的调查问题? 这可能是一篇完整的文章! 但在短, 问题需要可靠和有效, 它们应该能够回答你的大问题(如果不能的话), 删除它们!).

在你起草时,考虑问自己以下问题:

  • 是否有不清楚或难以理解的问题?
  • 你在一个问题里问了不止一个问题吗?
  • 回答选项是否与调查问题“任务”匹配?
  • 响应选项是否详尽且相互排斥?
  • 调查是否顺畅?
  • 对调查目的而言,是否有多余或不必要的问题?
  • 是否有遗漏的问题?

焦点小组

什么是焦点小组?
一个可爱的定义是“类似于朋友或邻居之间的生动对话的小组讨论”(摩根), 1988). 更实际的是,它可以被定义为一个机密的小组讨论 有训练有素和熟练的版主 使用开放式的问题,促进互动,探索参与者的观点和经验,在一个结构化但轻松的氛围中,旨在生成定性数据.

如果调查是可靠和有效的,焦点小组是严格和相关的. 调查是非常定量的,但有时不清楚这些数字总是意味着什么. 焦点小组可以帮助回答定量数据背后的原因.

为什么使用焦点小组?
焦点小组是收集数据的好方法,了解参与者如何对感兴趣的话题有意义(唯一来源)。, 如何构建调查(探索性), 或帮助解释调查结果(后续).

更一般的, 焦点小组可以支持专业人员回答增加的问责(外部和内部). 此外,学院和大学充斥着定量数据——一切都被计算过了. 焦点小组可以帮助数据讲述一个更完整的故事,因为在这些实例中,涉众的经验不太清楚, 因为这些数据并没有告诉我们数字背后的含义. 焦点小组的定性数据解决了难以捉摸的“为什么”?来进一步理解什么才是真正重要的.

以下是一些潜在的焦点小组想法:

  • 获得老板的反馈
  • 确定学生的学习情况和技能应用情况
  • 制定大学战略规划
  • 评估学生服务
  • 评估教职员工和学生的归属感
  • 制定质素提升计划
  • 检查大学生活质量(工作/生活平衡)

如何进行焦点小组讨论?
组织一个焦点小组有六个步骤, 不过请注意,有很多书都是专门讨论这个话题的!

  1. 开发一个提议, 定义的目的, 写下研究问题(这些问题是最重要的).
  2. 选择参与者(通常是5-12人), 但你也可能运行多个小组来获得好的数据), 包括两个版主.
  3. 设计主持人指南.
  4. 选择并培训版主.
  5. 组织焦点小组. 通常这些都会被记录下来,版主也会记录下非语言交流, 如点头, 手提高, 表达式, 等.
  6. 分析数据并报告结果.

同样,每个步骤都可以有详细的文章和章节来介绍! 作为开始的目的, 这里有一些技巧,可以帮助你写好与你的研究目标相关的焦点小组问题.

Do

  • 将问题与项目目标或研究问题联系起来
  • 使用清晰、明确的语言
  • 使用开放式的问题
  • 使用让人们反思或“回想”的问题

  • 问“为什么?——相反,你可以说“告诉我更多”或“详细说明”
  • 问一些诱导性的问题(或者如果你必须这么做,至少要少问一些)
  • 使用双重问题,即你问两件事而不是一件事

例子问题:

  • 你是如何参与…?
  • 告诉我你的经历 .…
  • 当我说…,我想到的是什么?
  • 对……有什么影响??
  • 你将如何提高……?
  • 你对……有什么建议??
  • 你怎么用…?

如何分析数据?

通常你会有一个会话的音频记录, 哪些被转录,然后与主持人的笔记一起分析. 看数据的时候, 确定主题或相似的主题, 关注这些事件的频率和广泛性. Also consider context; comments may be specific to certain situations that were discussed, 而你的工作就是推断和背景. 这也适用于任何来自主持人笔记的非语言交流. 这种分析应该将主题联系在一起,形成“大想法”.”

我们希望你能从这篇概述中得到激励,在今年秋天更新你的工具! 如果你想要更多的资源,一定要查看:

没有回复

留下你的评论