第２７卷第５期 常州工学院学报 ＶＯ１．２７ ＮＯ．５ ２０１４年ｌ０月 Ｊｏｕｒｎａｌ ｏｆ Ｃｈａｎｇｚｈｏｕ Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｔｅｃｈｎｏｌｏｇｙ Ｏｃｔ．２０ｌ４ ｄｏｉ：１０．３９６９／ｊ．ｉｓｓｎ．１６７１—０４３６．２０１４．０５．１４ 关于高职院校教学质量 定量分析评价若干问题的探讨 陈刚 ，王慨 （１南通职业大学基础课部，江苏南通２２６００７；２．南通职业大学现代教育技术中心，江苏南通２２６００７） 摘要量化是目前高职院校教学质量评价的主流方法，但由于主客观之间的距离、资源的紧缺 等因素的制约，尚有诸多问题亟待解决。对此，基于统计学相关理论，提出以调节权重缩小简单平 均的计分偏差、以设置宏观参数提高组间的可比性、以网络视频技术拓宽评价的样本容量等方法， 并对新的计算方法给出了简明的推导，旨在提高量化评价的可靠性、客观性和公正性。 关键词 高职院校；教学质量；评价；量化；加权平均 中图分类号：Ｇ７１８．５ 文献标志码：Ｂ 文章编号：１６７１．０４３６（２０１４）０５—００６４—０４ Ｐｒｏｂｌｅｍｓ ｉｎ Ｑｕａｎｔｉｔａｔｉｖｅ Ａｎａｌｙｓｉｓ ａｎｄ Ｅｖａｌｕａｔｉｏｎ ｏｆ Ｈｉｇｈｅｒ Ｖｏｃａｔｉｏｎａｌ Ｃｏｌｌｅｇｅ Ｔｅａｃｈｉｎｇ Ｑｕａｌｉｔｙ ＣＨＥＮ Ｇａｎｇ ，ＷＡＮＧ Ｋａｉ （１．Ｄｅｐａｒｔｍｅｎｔ ｏｆ Ｂａｓｉｃ Ｃｏｕｒｓｅｓ，Ｎａｎｔｏｎｇ Ｖｏｃａｔｉｏｎａｌ Ｕｎｉｖｅｒｓｉｔｙ，Ｎａｎｔｏｎｇ ２２６００７； ２．Ｃｅｎｔｅｒ ｏｆ Ｍｏｄｅｍ Ｅｄｕｃａｔｉｏｎ Ｔｅｃｈｎｏｌｏｇｙ，Ｎａｎｔｏｎｇ Ｖｏｃａｔｉｏｎａｌ Ｕｎｉｖｅｒｓｉｔｙ，Ｎａｎｔｏｎｇ ２２６００７） Ａｂｓｔｒａｃｔ Ｑｕａｎｔｉｉｆｃａｔｉｏｎ ｉｓ ａ ｃｏｍｍｏｎ ｍｅｔｈｏｄ ｉｎ ｅｖａｌｕａｔｉｎｇ ｔｈｅ ｑｕａｌｉｔｙ ｏｆ ｈｉｇｈｅｒ ｖｏｃａｔｉｏｎａｌ ｔｅａｃｈｉｎｇ． Ｈｏｗｅｖｅｒ，ｐｒｏｂｌｅｍｓ ｅｘｉｓｔ ｂｅｃａｕｓｅ ｏｆ ｔｈｅ ｄｉｓｐａｒｉｔｙ ｏｆ ｓｕｂｊｅｃｔｉｖｉｔｙ ａｎｄ ｏｂｊｅｃｔｉｖｉｔｙ ｏｒ ｖｏｃａｔｉｏｎａｌ ｒｅｓｏｕｒｃｅｓ． Ｈｅｎｃｅ，ｂａｓｅｄ ｏｎ ｔｈｅ ｔｈｅｏｒｉｅｓ ｏｆ ｓｔａｔｉｓｔｉｃｓ，ｗｅ ｐｒｏｐｏｓｅ ｓｅｖｅｒａｌ ｍｅｔｈｏｄｓ ｌｉｋｅ ａｄｊｕｓｔｉｎｇ ｗｅｉｇｈｔｓ ｔｏ ｎａｒｒｏｗ ｔｈｅ ｄｉｆｆｅｒｅｎｃｅ ｏｆ ｓｉｍｐｌｅ ａｖｅｒａｇｅ，ｓｅｔｔｉｎｇ ｕｐ ｍａｃｒｏｓｃｏｐｉｃ ｐａｒａｍｅｔｅｒｓ ｔｏ ｉｍｐｒｏｖｅ ｔｈｅ ｃｏｍｐａｒｉｓｏｎ ｏｆ ｇｒｏｕｐｓ，ａｎｄ ａｐｐｌｙｉｎｇ ｎｅｔｗｏｒｋ ｖｉｄｅｏｓ ｔｏ ｂｒｏａｄｅｎ ｔｈｅ ｓａｍｐｌｅ ｓｉｚｅｓ ｏｆ ｅｖａｌｕａｔｉｏｎ．Ｗｅ ｆｕｒｔｈｅｒ ｐｒｏｖｉｄｅ ｔｈｅ ｓｉｍｐｌｅ ｄｅｒｉｖａｔｉｏｎ ｏｆ ｎｅｗ ｃｏｍｐｕｔａｔｉｏｎ，ｉｎ ｏｒｄｅｒ ｔｏ ｉｍｐｒｏｖｅ ｔｈｅ ｒｅｌｉａｂｉｌｉｔｙ，ｏｂｊｅｃｔｉｖｉｔｙ ａｎｄ ｆａｉｍｅｓｓ ｏｆ ｑｕａｎｔｉｔａｔｉｖｅ ｅｖａｌｕａｔｉｏｎ． Ｋｅｙ ｗｏｒｄｓ ｈｉｇｈｅｒ ｖｏｃａｔｉｏｎａｌ ｃｏｌｌｅｇｅ；ｑｕａｌｉｔｙ ｏｆ ｔｅａｃｈｉｎｇ；ｅｖａｌｕａｔｉｏｎ；ｑｕａｎｔｉｆｉｃａｔｉｏｎ；ｗｅｉｇｈｔｅｄ ａｖｅｒａｇｅ 《国家中长期教育改革和发展规划纲要 是应对这一趋势的有效途径。＿２ 但目前高职院校教 （２０１０－－２０２０年）》指出，提高质量是教育改革发 学质量评价的定量化普遍存在均值计算简单化、评 展的核心任务，要求不断改进教育教学评价方法， 价管道平行化、样本抽取狭窄化和技术手段传统化 并将于学校及其部门之外的第三方引入评价 等问题。鉴于此，通过运用数理统计原理和信息技 体系。…随着社会经济的快速发展，高职人才培养 术手段提出相应的改进建议，旨在创新教学质量评 的需求日趋多样化、复杂化，教学质量评价的内容 价机制，进一步提高定量分析的科学化程度，增强 和方法也随之日益多元化、精细化。引入量化分析 评价的合理性、客观性和公正性，以评促教、以评促 收稿日期：２０１４－０９—１８ 基金项目：２０１１年江苏省高等教育教改研究课题（２０１１ＪＳＪＧ０８５） 作者简介：陈刚（１９６４一），男，副教授。 第５期 陈刚，等：关于高职院校教学质量定量分析评价若干问题的探讨 ６５ 改、以评促学，取得更好的人才培养效果。 １ 定量评价中主客观的对立统一 用评分方式度量事物人文属性的高低，从定 性走向定量，是当代社会的一大进步，并在大多数 领域中得到了广泛应用。教学质量评价是教学质 量监控的重要环节，其中描述性评价固然必不可 少，但在教育普及程度日益提高、教学评价项目不 断细化的今天，定量评价以其综合性、直观性和可 比性，对调动教师关注人才培养质量、潜心研究教 材教法的积极性具有高效的激励功能 Ｊ，且已成 为教学质量评价的主流。 然而，教学质量的定量评价是主观认知对客 观现实的量化，必定存在一定的偏差。＿４ Ｊ一方面， 基于客观公正的评价准则，评分法的设计从开始 就约定要多人评分。另一方面，统一但又描述性 的评价标准，使专家对其内涵的理解、尺度的把握 存在差异。产生差异的原因很复杂，既有个人认 识上的误差，也有观点上的碰撞，对于前者，可通过 不断的实践来缩小，对于后者则可加强交流、逐步 趋同。此外，用分值来抽象地概括教师某个教学周 期的表现，信息的取舍也是造成差异的另一个重要 因素，因而需要运用科学的方法来处理评价数据， 以减少偏差，使评价更客观真实。 为了保障评价的客观性，从统计学角度看，样 本容量越大，评分结果越接近真值，一般来说，听 一堂课的专家不宜少于３位。由于资源条件的限 制，目前高职院校的听课小组大多安排３位专家。 因此突破条件制约，扩大样本容量是提高教学质 量评价客观性的渠道之一。 同一个听课组内３位专家（本文以此为例） 对同一堂课的打分彼此也会有差异，有时差异很 大，而目前普遍采用的均值处理过于简单，常常掩 盖了非一致的实质，使评价的客观性大打折扣，偏 离了激发教师提高教学质量积极性的初衷。因 而，探索更加合理的统计方法来弥补简单均值法 的不足是非常必要的。 学校宏观层面更需关注评价在整体上的公平 公正，综合平衡各专家组的评价结果，以达到或接 近总体的合理分布。教学评价的组织形式是分配 给每个专家组一定数量的听课对象，除了考虑回 避外，分配是随机的。一般情况下，专家组之间的 评分结果也会存在差异，主要表现在：①有的组评 分值偏大，有的偏小，即估值中心不一致；②有的 组高低分差距较大，有的较小，即分值的离散程度 不一致。这些都会影响组问的可比性。由于听课 对象在各专家组随机分配，按统计理论，其教学水 平的高低分布应该相近，即估值中心和离散程度 一般都不会有很显著的差异，因此，上述评分结果 的差异，主要来自于各专家组对评分标准的把握。 总之，量化分析在高职院校教学质量评价中因 其独特的优势发挥着不可替代的作用，但量化是多 个评价主体从客观到主观的转化，难免带来数据偏 差而导致评价的失真。因此，需要在坚守评价基本 原则的前提下修正这些偏差，事实上，只要对评价 数据的生成环节细致分析，运用科学的理论和方法 加以改进，采用先进的信息网络技术处理，实现教 学质量评价中主客观的对立统一是完全可行的。 ２单次评价数据的加权与权重调节 处理 听一堂课的专家通常不宜少于３位，以此为 例，将其评分值按大小排列，记作Ｙ ≤Ｙ：≤），，，其 中Ｙ 是中位数，Ｙ 和Ｙ，的相邻差异量分别为ｃ＝ Ｙ 一Ｙ 和ｍ＝Ｙ 一Ｙ 。现行大多做法是直接以算 术平均值（）， ＋Ｙ：＋Ｙ，）／３作为本次评价的结果， 但这种方法过于简单，当专家彼此间存在较大差 异，即ｃ或ｍ偏大时常常会引起争议。 为直观起见，评分以百分制为例，并约定差异 达到５分及以上视为差异显著，即０≤Ｃ≤４，０≤ ≤４属于正常差异，当ＣＩ＞５或ｍｔ＞５时差异偏大。 以下对０≤Ｃ≤４，ｍ≥５时的情形展开讨论，最终 得到普遍适用的算法。 当Ｙ，偏大时，平均值会向Ｙ，方向偏移，ｍ值 越大，这种拉动越明显。在极端情况下，如ｍ＞ １０，Ｙ 的作用将远大于Ｙ 和Ｙ 。因此，当ｍ≥５ 时，Ｙ 的隐性权重偏大，应适当降低，可设置一个 权重ｋ（０＜ｋ＜１），将Ｙ。修改为 ＋（１一ｋ）歹，其 含义是：Ｙ 以权重ｋ加入计算，剩余的权重１一ｋ 要归于平均值，既体现了对Ｙ 的尊重，又排除了 偏大差异的干扰。 修改后，求简单均值 常州工学院学报 一２０１４正 Ｙ１＋Ｙ２＋［ ３＋（１一ｋ）ｙ］ Ｙ ————— ——一由此解得 ≥ ，其中ｃ值不定，但注意到 由此可解得 ０≤ｃ≤４，故可取其平均值Ｃ＝２，并将不等号改为 （１）ｌ Ｉ＼ ／ ｌ 歹： Ｖ＝一， ２ ｋ Ｊ－ 等号（取临界值），即得 ． 权重值ｋ的确定。若ｍ≤４，则差异正常，取 ｋ＝１计算均值。若 ≥５，既然部分认可式（１），那么 式（１）的计算值就不应小于ｍ＝４时的计算值，即 ２＋ｋ ≥ ３ １０ ３ｍ—２ —（２） －式（２）为差异偏大时权重的计算式，其中ｍ 是偏大的差异量（ｍ＞４）。为方便应用，将不同ｍ 值对应的ｋ值列于表１。 表１差异量与权重的对照表 对于Ｙ 差异偏大的情形，即Ｃ３５，类似地将 式（２）中ｍ换成ｃ来计算Ｙ 的权重ｋ。 综合起来，３位专家评分的综合结果按式（１） 推广为加权平均，即 便服从标准正态分布Ｎ（０，１），消除了ｉ的差别，实 现了可比性。＿５ 但这些标准数据都是小数值，缺乏 直观性，需将其恢复为百分制，其方法是选定一个 统一的（总体）均值 和标准差 ，按式（４）换算： ｋｌＹ１＋Ｙ２＋ｋ３Ｙ３ ｙ ■ （３） ｗ ＝孚 ＋ （４） 其中：足 、 的取值根据Ｙ 、Ｙ，与中位数Ｙ 的 差异量大小按表１确定。如Ｙ ＝８３，Ｙ：＝８４，Ｙ，＝ Ｗ 作为第ｉ个专家组的第 个教师的最终评 价分数。统一的均值 和标准差 ，可在教学质 量评价实践中根据全校的评价水平状况，不断积 累和调整，确定一个合适的数值。在评价初期，建 议用总平均值（加权平均）和总标准差（来自于方 差的加权平均）代替。即令： ９１，取ｋ ＝１，ｋ３＝０．５３，按式（３）计算综合结果 ＝８５．０７。 当差异量不是整数时，权重直接由式（２）确 定。当听课专家超过３位时，如果出现评分异常 差异，同样可采用加权平均予以调节。 １ １＋ ２ ２＋…—＋ｎｒ ｘｒ ｘ＝—３ 专家组评分结果的可比性调整 设 为第ｉ个专家组对其第 个教师的评价 ，ｚ１＋，ｚ２＋…＋，ｚ （５） 分数，其中：＇『＝１，２，…，ｎ （ｎ 是第ｉ个专家组的听 课数量）；ｉ＝１，２，…，，．（ｒ是专家组的数目）；每个 均由式（３）求得。第ｉ个专家组的估值中心表 １ ｎｉ 一式（４）是将所有专家组的估值中心和离散程 度都调整到同一水平，但在实践中会引起一些争 议。尽管听课对象的分配有一定的随机性，但为 相对集中地安排在同一专家组。然而不同院系的 现为平均值＿ｆ＝÷∑ ¨离散程度用标准差衡 ＂ 了增加可比性，总会尽量将来自同一院系的教师 １ 量，为了计算方便，采用矩估计给出标准差 — ————一 整体教学水平并非整齐划一，在一定程度上体现 在各专家组的评分结果中，因此可以用加权的方 法将 和 揉入式（４）中，将式（４）修改为 ｓ √玄 （ 根据统计原理，可认为数据 ，服从正态分 布，将其标准化 Ⅱ一 ｆ Ｗ ｆ＝ Ａ） ］ Ｅ．ｓｆ＋（１一 ）Ｓ］ Ａ ｉ＋（１一 （６） 第５期 陈刚，等：关于高职院校教学质量定量分析评价若干问题的探讨 ６７ 即第ｉ个专家组的估值中心１ｊ和离散程度 分别 以权重Ａ和 参与调整。但这种参与不能起主 要作用，故建议取０＜Ａ＜０．３，０＜ ＜０．５。 当规模不大时，上述评价数据的修正算法用 Ｅｘｃｅｌ便可实现。值得注意的是，无论采用什么方 法，对评价数据的后期统计处理都必须坚守评价 的性、客观性和公正性，以尊重专家的原始数 据为前提，以全局分布的合理性为参照标准。权 重的调节、参数的取值应在评价数据分析的基础 上，组织专家充分论证，针对出现的异常情况进行 适当的微调。 ４运用现代信息技术丰富评价样本 保证和增加评价样本的数量，是提高量化评 价结论全面性、准确度和说服力的有效途径。 移动通信和网络技术的迅猛发展，多媒体传 输速度的快速提高以及成本的大幅降低，为解决 高职院校教学质量评价资源稀缺的困难提供了有 效的途径，也是促进高职院校教学质量评价体系 现代化建设的一条全新而可行的思路。 教学视频的保存和再现功能以及网络视频的 实时传播功能，使传统随堂听课模式无力解决的 困难迎刃而解。视频是教师教学表现的真实记录， 通过回放，专家可在不同时段观看和评价同一堂 课。另外，实时的、与教学同步的听课评价则可通 过网络视频来实现，在移动通信技术的支持下不再 受地点和场所的制约。 时空的解除，意味着教师的每堂课都可 以安排专家来听课，不会发生时间冲突。对一位 教师的评价，同组专家可以选择听同一节课，也可 分工听几节课，听课的时长也不必限定于完整的 一节课。从统计学角度看，这就给抽样的随机性、 评价的全面性带来了更加有力的保障。此外，听 课组增加专家数不再困难，这样就可以根据评价 的置信度要求设定合适的样本容量，从而提高了 量化评价结果的可信度和说服力。 高职院校实践教学迫切需要校外企业人员的 评价与指导ｌ＿６ ，但因种种条件却难以实施。 网络视频技术的普及，突破了传统的第一时间须 在教学现场听课评价的。校外企业人员可以 在其工作单位利用移动终端实时观看教学视频， 也可在工作之余观看教学录像回放，通过网络进 行在线评价。这一模式还可拓展到学生家长和其 他部门参与评价，为高职院校教学质量监控引入 第三方评价提供了顺畅的通道。同时，网络视频 也为优秀教学范例的传播推广提供了渠道。 将现代信息技术运用到教学质量监控体系， 能够拓宽听课评价时间、地点的选择范围，听课评 价的组织安排可以更加宽松有序，同时也提高了 评价的样本容量和抽样随机性，使量化评价数据 处理更具科学性，评价结果更具可信度。 ５ 结语 高职教育为经济建设和社会发展培养了大批 高素质技能型人才。产业结构升级转型，将对高 职人才质量的内涵提出更多、更高的要求，高职院 校教学质量评价方法和手段应与之相适应。追求 评价的客观公正，促进教学质量的提高是这项工 作永恒的目标，不断提升量化分析的科学化、合理 化程度，以信息技术构建现代高职院校教学质量 监控平台，引入第三方评价，将为培养适应现代化 经济建设需求的高职人才发挥越来越大的作用。 ［参考文献］ ［１］教育部．《国家中长期教育改革和发展规划纲要（２０１０－－２０２０ 年）》［ＥＢ／ＯＬ］．（２０１０—０７—２９）［２０１４～０８～１２］．ｈｔｔｐ：／／ ＷＷＷ．１ａｗ—ｌｉｂ．ｃｏｒｎ／ｌａｗ／ｌａｗ＿ｖｉｅｗ．ａｓｐ？ｉｄ＝３１７５７１． ［２］杨莲．高职院校思想政治理论课教学质量监控体系的构 建［Ｊ］．继续教育研究，２０１３（８）：１３５—１３６． ［３］尹德志．基于系统论的思想政治理论课“教学管”一体化质量 监控体系探索［Ｊ］．高等教育研究，２０１３（９）：６５—６６． ［４］秦澄．定量分析法在高职教学考核评价中的应用［Ｊ］．职教论 坛，２０１１（３２）：７５—７６． ［５］朱建国．一类次序统计量的数学期望［Ｊ］．南通职业大学学 报，２０１０（２）：６８—６９． ［６］彭淑华，陈旭东．用ＩＳＯ ９０００标准构建高职实践教学质量保 证体系［ｊ］．南通职业大学学报，２０１２（４）：６２—６５． 责任编辑：周
