文章简介:作为高等教育领域的研究者或学习者,教育评价指标构建是必须要掌握的基本技能之一。指标既是量表和调查问卷设计的基础,又是进行相关性研究、因果性研究的前提。
作为高等教育领域的研究者或学习者,教育评价指标构建是必须要掌握的基本技能之一。指标既是量表和调查问卷设计的基础,又是进行相关性研究、因果性研究的前提。那么,一个指标构建到底需要哪些步骤,我们需要如何思考指标的构建问题呢?
一般而言,指标构建需要五个标准化步骤,分别是“项目选择——经验关系的检验——指标赋值——缺失值处理——指标的鉴定。”
项目选择
简单来说项目就是描述指标的具体话语。一般而言,我们构建一个指标,都需要从不同方面进行描述,这样构建的指标一般就是复合指标。
建立指标的第一步是为复合指标选择项目,即用哪些具体的话语来描述。
经验关系的检验
经验关系的检验是指不同项目之间一定要具有相关性。具体而言,不同项目之间的关系包括两种:
1)二元关系:即两个项目之间的关系。譬如反映学生学习投入程度的指标出勤率与周复习时间之间存在关联,出勤率高的学生其周复习时间,会比出勤率低的学生在周复习时间上高的多。值得注意的是,指标构建中的项目之间不可以不关联,也不可以高度相关。
2)多元关系:如果有更多的项目被列入考虑的话,研究者就应该考虑更复杂的交互关系。
指标赋值
在选定了指标的最适当项目以后,就可以对不同的回答选项赋予分值,将多个选项结合成单一的复合指标。步骤包括:
1)先确定指标分值的范围,这里可以通过考虑变异范围确定指标测量的两极。
2)给每一个回答选项赋予分值,一般给每个选项相同的权重,不同时要说明理由。
处理缺损资料
在指标建立时如果出现资料缺损,可以通过以下方法处理。
1) 直接剔除,在缺损资料的样本量很少的情况下,可以剔除这些样本。
2)根据缺损资料补充,通过对既有的回答或者分析缺损资料进行补充。
指标的鉴定
为了说明测量的成功与否,就必须要对指标进行鉴定,使之有效化。鉴定复合指标的方法包括:
1)项目分析(内在鉴定):评估复合测量中所包含的每个项目是具有独立的贡献,还是只复制了其他项目的贡献。例如以出勤率、周预习时间、周复习时间、向教师提问频率以及同学间学习交流频率反映学生学习投入程度,在对指标进行鉴定时,我们可以经验性判断出勤率100%的学生学习投入偏向较高,以此观察比较出勤率100%与出勤率80%学生,出勤率100%的学生在周复习时间上是否比出勤率80%的学生长。
2)外在鉴定:如果指标真正测量了某个变量,那该指标应该和测量该变量的其他指标相关。即出勤率低的学生相应地在周复习时间与提问频率上也会较低。
3)不好的指标与不好的鉴定项目:若指标无法通过外在鉴定,将面临两种可能,一指标无法充分地测量变量,二检验项目无法充分地测量变量。这种情况下可以考察外在鉴定项目与指标中个别项目之间的关系,根据指标在后来分析中的重要性决定是否采用。
(责任编辑:编辑102)