依托智学网精准分析学业质量----以我校2018学年第一学期六年级期中测试为例

赖才炎

分析

试卷

维度

对比

题型

学业

细目

可以

章节

班级

依托智学网精准分析学业质量

----以我校2018学年第一学期六年级期中测试为例

    科大讯飞的智学网，为各学科的学业测试、批阅和精准分析，提供了智能化服务，让试卷命题质量分析与学生学业质量分析，走上了基于智能数据的科学化分析----即结论有数据支持，以及基于个性需求的针对性分析----即基于维度选择的分析。

如何充分发挥智学网的精准分析功能，有以下几个关键点：

①基于试卷命题的双向细目表，是否清晰、专业和科学，是试卷命题质量与教学质量分析的基础；

②基于学业质量常规数据（如班级或年级的均分、合格率、优秀率、各分数段比例等）的分析，是否有横纵向对比，这是宏观层面的整体分析；

③基于每一具体小项目得分的分析（如各小题、每位学生或每个知识点的得分情况）是否存在较大偏差，这是微观层面的典型分析；

④基于若干维度划分的组合性分析（如能力维度、题型维度、知识单元维度，以及学生特征维度），关键是合理选择与划分分析维度，这是中观层面的模块化分析，是宏观与微观分析之间必要的桥梁，能彰显教师质量分析的关键能力。

一、命题质量分析：做好双向细目表

命题质量的评价，可以从下两个角度进行。
一是测试后，查看智学网平台自动生成的“三度”指数---即难度（包括难度比例）、信度和区分度，看它们是否在合理的范围之内，或偏差是否过大。对比的标准，可以基于本学科纵向长期积累的常模数据；当常模数据没有建立或生成之前，可以对比本次测试的横向数据（即以横向平均数据为对比）。试卷“难度”指数介于0-1之间，值越大表示试题越简单，难度在0.7-0.8间是难度较为合适，有利于反映学生真实水平，难度小于0.4或大于0.8属于偏难或偏简，无法有效区分学生水平；试卷难度比例（难：中：易）是于题目得分率决定，得分率小于0.3为难题，大于0.7为容易题，中间为中等题，可把试卷期望难度比例与实测反映的难度比例进行对比，看期望与实际的差距。试卷“信度”指数介于0-1之间，反映成绩的真实性及说明题目与教学的相关程度，值越大表示信度越好，0.9以上为优秀，0.35以下为低信度，中间段为中等信度。信度除了要说明成绩的真实性之外，还要说明题目涉及的内容与教学的相关程度。试卷“区分度”介于-1至+1之间，反映能否将不同水平的考生区分开来，0.4以上为很好， 0.3-0.39为良好，0.2-0.29为尚可，0.19以下为不好，负数代表总分存在高能低分。下图是2018学年六年级第一学期语文期中考试试卷的“三度”数据。

二是对比命题期望值与实际测试值之间差异，来评价试卷命题质量。需要命题者在制定双向细目表时，有正确的预期，如均分期望值多少、难中易比例多少，甚至各小题难度层次（即该题属于难、中、易哪个层面），这是评价试卷预期与真实测试之间差异的关键。虽然这种差异大小受多因素影响，但对于试卷质量分析极为重要。
由此可见，试卷命题人对双向细目表编制和把握非常重要。要做到以下几点：一是题型确定，且对接好中高考题型；二是各小题分别测试哪一种能力维度，即认识、掌握、理解和运用四个中的一个（或偏重于哪一个）；三是章节单元维度，综合题时，可以按小题或步骤得分，大致对应到章节，网上批阅时也能按小题或步骤给分。

二、宏观整体分析：对比好常规数据

在网上阅卷完成后，智学网会生成系列宏观数据（全科统计，成绩分档、分段对比，达线、分段人数对比，优劣势学科对比等），用于从宏观上把握年级、班级的学业质量情况。另外，还可以进一步进行横纵向对比，如与同类的横向对比，既可以学校同年级的班级之间进行对比，还可以不同学校的相同年级之间进行对比，能看出本班或本年级各项学业常规数据在横向上的位置；以及与班级自身历史数据的纵向对比，可以看出本班级学业成绩发展的总体趋势，当然这需要更多数据的积累与支撑。

1.全学科分析（包括平均分对比）：是所有参与测试学科的总体分析，反映一个班级总体学业成绩位置与特征。总分（均分）名次反映位置，优秀率、合格率和低分率反映特征。如本次六年级语数外三门学科测试，语文优秀率最低，数学及格率最低，英语低分率最高，可以看出该年级英语和数学两极分化较为严重。

2.成绩分档（分段）对比：通常情况下按85分、70分、60分、40分，作为优秀、良好、合格、不合格、低分的分界线，当然也可以从“设置分数段”中进行个性化设置，然后系统自动统计并显示。由下图表可以看出1、3、6班的优秀段人数过少，不合格段6班人数过多，1、3班的低分段人数过高，建议1、3、6班重视低分段学生的补差补缺和中等生的培优工作；4、5班重视优等生培养。

3．达线人数对比：达线人数对比，是指满足一个或多个条件的人数比例，如按名次前50名或100名（可自由设置），各班人数的分布情况如下图所示；还可以设置3条分数线，如总分的和各学科的分数线，然后进行统计分析，这可以很好地对应分析中高考的上线率等。

4．分段人数对比：可以按名次或分数进行分段统计，如统计50-100名（共51名学生）在各班的分布情况，或统计总分为200-250分区域内人数在各班的分布情况，区域可以自由设置，有利于按教师的需求自由地获得各种统计数据，支持自己的分析结论或教学对策。

5．优劣学科对比分析：系统把学科成绩换算成标准分进行比较，数据的大小可以看出各班级每门学科的优劣势。特定班级可以与年级平均对比，也可以与参照班级对比，还可以几个班级一起对比。由下图可以看出，4、5两个班各门学科的优势比较明显，有一种整体学习优势；1、3、6三个班级各门学科学业水平都偏低，整体学习有待提高。

三、微观典型分析：找准个别化典型

智学网的试卷分析，除了对试卷本身难度、难度比例、信度和区分度进行自动计算外，还包括了大题、小题、知识点和作答情况，四个维度对试卷微观典型分析。下面以我校2018年第一学期数学期中测试为例，说明如何依托智学网进行试卷的微观典型分析。

1．大题分析：从主客观题角度看，以主观题为主，主客观题的分值比为82：18，彼此得分率相差不大；从题型角度看，以填空题为主，选择题、填空题、计算题、解答题的分值比为18：45：16：21，得分率解答题偏低，计算题得分率最好。当然还可以获得各班级的数据，彼此与年级平均数据进行对比，可以看出各班级在题型上得分的差异。

2．小题分析：本套数学测试试卷共有29个小题，可以从智学网上导出以下数据表，从中可以看出每个小题的得分情况，获得哪些题目的失分率偏高，如第11、15、18、26小题的失分率偏高，可以进一步分析原因；以及基于测试结果智能判断的难度、区分度，可用于与双向细目表对比分析，判断期望与现实的差距。另外，小题分析也可以用雷达图直观显示。

 3．知识点分析：该功能由于智学网系统中知识点的设定，与具体试卷对应知识点的设定不一致，即差异较大，平台显示的知识点数据对上海教材而言参考价值较小。需要教师根据试卷的“双向细目表”来重新确立，并组合分析。
 

4．作答情况分析：系统显示每一小题分值、平均分、区分度、得分率之外，还显示客观题的每一个选项有多少人选择，主观题的每一个区间分值有多少人。这些数据为进一步分析错误率的分布，以及精准分析错误背后的原因，提供了方向与可能。如14小题单项选题，2班选错误答案B的同学有16位，占44.4%，年级平均也有32.7%选错误的答案B，教师在教学质量具体分析时，能抓住这个典型错误进行分析，就会是一个有针对性的分析。

四、中观维度分析：选择好维度指标

任何一个平台，都只能解决普遍层面的自动分析，要进行个性化的针对性分析，还需要教师学会从中观层面多维度地进行分析。智学网一方面提供了中观维度分析操作的灵活性，如成绩分档或分段的对比分析，教师可以以名次或成绩来分段，段的大小与多少，也可以自由设置，教师如何来选择维度，以及如何划分区域，由教师的具体需要和分析角度决定，能较好地体现出教师的教育思想和分析能力。
另一方面，从智学网中可以导出“小题分析”的具体数据，为教师进一步灵活组织多元中观维度的分析，提供了多种可能。如从管理者角度出发，教学质量的中观维度分析，至少有以下几方面。

1．基于能力维度的学业质量分析
我们一般把学生学习能力的考查目标划分为四种类型，即识记、理解、掌握和应用，由于命题“双向细目表”中，每一道题都对应一种能力（大题可尽量划分为小项去对应，或主要对应哪种），最后可形成基于能力维度的学业质量分析表（如下图所示）。从表中可以看出，识记得分率最低，应用能力偏低，掌握、理解较好。班级之间拉大分数差距的，主要在应用和掌握上。

2．基于章节（单元）的学业质量分析
从试题的章节分布中，我们可以看出哪些章节应是学习的重点，以及哪些题型是跨章节的综合题。从而决定我们分析时，可以按跨两个章节的综合题、跨三个以上章节的综合题、不跨章节的试题等三个维度进行分析。或者几个章节合并在一起，成为若干新单元，然后按单元分析。如可把这次数学测试的19个小章节，划分为四个相对独立的新单元，即整数和整除、分解素因数、分数的意义和性质、分数的运用。然后按这四个新单元进行分析，如下图所示。

3.基于题型角度的学业质量分析
具体参见智学网平台上“试卷分析”中的“大题分析”。当智学网平台上固定的题型与“双向细目表”中的题型不一致时，一般按双向细目表中的题型进行分析。如本次六年级数学期中测试，平台上题型为选择题、填空、计算、解答四种类型，而双向细目表中还有“简答题”（平台把简答题合并到解答题中了），我们可以按双向细目表的题型，重新分析，如下表所示，从中可以清晰看出年级或班级，哪些题型得分率偏差较大。

4．其它创新角度的学业质量分析
学业质量分析，除了依常规或常用的角度进行分析外，还可以根据教师自身或实际情况或研究需要，创新性地提出一些分析角度与研究区域，教师一方面要充分利用好智学网的“成绩分档对比”和“分段对比”功能，另一方面要打开思路，以怀疑的态度提出问题，用科学的精神进行验证----即提出一些假设，再进行数据验证。如对某些题型（或内容）的正确率与学生某些特征（如性别、身份、角色等）是否相关的假设，一些知识点和章节的相关性分析研究等等，为指导教师针对性教学和学生更有效的学习，提供科学的建设性意见。

上海长宁

2019-3-12