怎么评：改进评价技术，提高了区域教育质量综合评价的科学性

（三）怎么评：改进评价技术，提高了区域教育质量综合评价的科学性

教育评价方法技术是达到评价目的、实现评价目标的手段。而就教育质量综合评价现状而言，研究、挖掘、创造科学实用的评价方法技术，已成为区域教育质量综合评价的主要任务之一。我们主要从工具开发、数据挖掘、分析反馈三个方面提升。

1.明确了评价工具的开发流程和技术保障

一是规范了相对科学的问卷开发流程。问卷的开发，是将抽象的测量对象不断显性化的过程。通过几年摸索，我们形成了相对科学的问卷开发流程：界定测量特质内涵—搭建测量维度框架—确定关键行为观测点—设计具体问题及磨题（详见表2）。

表2　问卷开发流程

续表

在确定行为观测点的基础上，设计相应的情境和提问方式，形成问卷的具体问题。

二是设置问题设计的技术保障。在具体问题开发过程中，我们也设置了具体的流程和相应的技术要求，以此来规范问题的设计和打磨过程（详见表3）。

表3　问卷设计技术保障(https://www.daowen.com)

续表

2.厘清了评价数据的挖掘思路与应用路径

从教育质量评价庞杂的大数据中，发现数据背后的稳定规律和潜在问题，是教育质量综合评价的价值所在。本课题在依据评价数据的复杂性，从单变量到多变量，从单一层面到多个层面，从结果的描述分析到系统建构研究上，将数据挖掘的思路主线梳理为描述分析—相关分析—预测解释—分类分析—系统建构五个层次。

3.构建了数据分析报告撰写的基本流程

基于市、县具体实际，从客观立场出发，在现场测试和数据分析挖掘后，我们开展数据分析报告撰写工作。在现状分析客观性、问题诊断聚焦性、行动改进针对性原则基础上，探索了一套温州式的数据分析报告撰写流程（见图1）。近年来，共撰写了近20份市级质量监测分析报告和上百份县级质量监测分析报告。

图1　温州式的数据分析报告撰写流程