德尔菲法在智能录播系统评标指标体系构建中的应用

尝试运用德尔菲法构建智能录播系统评价指标体系，提出投标报价、产品性能、售后服务及技术支持和综合评价等4个维度的指标；通过均值和标准差等科学方法统计各级指标的权重，以提高评标指标体系的科学性和准确性。研究结论能够为各级教育装备采购部门决策提供依据。

智能录播系统，是一套教师、学生活动的视音频、多媒体教学内容等教学现场信息以数字化形式同步采集、压缩、录制，并自动合成实时教学录像的录制与播放系统。利用智能录播系统对中小学课堂教学的全过程进行实录，供教师观摩和评课，并向相关学校进行实时转播，是深化课堂教学改革、促进教师专业发展的有效手段。目前市场上各种智能录播系统品种繁多、配置不一、区分度大，可供选择的范围很广，市场竞争日益激烈。

德尔菲法是20世纪60年代初美国兰德公司的专家们为避免集体讨论存在的屈从于权威或盲目服从多数的缺陷提出的一种预测方法。它运用匿名方式反复、多次征询专家意见，并进行背靠背的交流，以充分发挥专家们的智慧、知识和经验，最后汇总得出一个能比较反映群体意志的结果。德尔菲法具有保密性好、反馈性强、统计性好和精确性高等优势。

如何建立科学有效的智能录播系统评标指标体系？如何构建各级指标的权重？本文将根据实际操作经验，探讨德尔菲法在智能录播系统评标指标体系构建中的应用，期待研究结论能够为各级教育装备采购部门决策提供依据。

利用德尔菲法构建智能录播系统评标指标

智能录播系统评标指标体系构建的原则

1）系统和全面相结合原则。智能录播系统指标体系的构建实质上是一个多目标的决策问题，需要对评标对象进行综合评价。录播系统采购不但包括产品供应，而且包括售后服务、技术支持、投标报价和综合评估，这就决定了指标体系具有系统性和全面性。

2）定性与定量相结合原则。指标体系的构建需要对各组成因素进行定性分析和描述，以强调各因素的综合性和关联性，做到客观全面。在定性分析的同时，有必要将定性指标进行量化处理以权重形式加以反映，以表明各因素在指标体系中的重要性，实现定性与定量的有机结合。

3）信度和效度相结合原则。信度是指评价结果的可靠性或一致性，即同样一个项目由不同专家在不同场合、时间进行评价所得到的结果的一致性程度；效度是指该指标体系对项目进行评价的准确性程度，即指标含义须具有单一性特征，指标的定义无兼并、交叉、重复。效度的作用比信度更重要。

4）理论性和可行性相结合原则。指标体系的构建需要理论支持，做到有据可依，有法可依。可行性是指所设各项指标易被专家理解和掌握，计算公式简易明了，操作性强。

智能录播系统评标指标体系的架构2000年《中华人民共和国招标投标法》和2003年《中华人民共和国政府采购法》的先后实施，为各项教育装备采购招标提供了法律依据和操作指南。本文在智能录播系统定义和功能的基础上，结合教育部颁发的《国家精品课程教学录像上网技术标准》，采用目前教育装备常用的采购招标方法――综合评分法，初步预测一个智能录播系统评标指标体系框架。4个一级指标，分别是投标报价、产品性能、售后服务及技术支持和综合评价。对一级指标进行分解和诠释，得到11个二级指标。三级指标则是对每个二级指标的解读和说明，同时配以“评审标准”，对三级指标的实施过程进行定性和定量的表述。评估指标体系预测框架建立之后，采用德尔菲专家咨询方法，主要目的是征求专家对指标体系预测框架构成因素和权重的意见。

德尔菲法的应用实例

1）专家的选择。先由部分著名专家推荐一些专家，从中选出推荐率较高者。笔者共选择17名专家，年龄在31～48岁之间，都为本科以上学历，中学高级以上职称，专业背景为教育装备专家、中小学学科教师和行政领导。

2）第一轮征询问卷的发放和分析。笔者将指标体系预测框架制成征询问卷，详细说明本研究的目的和所要解决的问题。采用面谈、网络即时通讯与电子邮件相结合的方式进行，主要请专家对所拟定的三级构成因素的重要性进行评判，并给出需要调整和补充的意见。评判等级为5个等级。第一轮共发放问卷17份，回收17份，有效问卷16份，有效率为94.1%。将评判的5个等级分别赋值“2”“1”“0”“－1”“－2”，以此计算出每一项目的总分。

据统计，构成智能录播系统指标的四项一级指标中，选择“非常必要”和“必要”选项的占绝大多数，投标报价29分，产品性能27分，售后服务及技术支持27分，综合评价23分，说明一级指标的拟定是合适的。11项二级指标中，“互动课堂子系统”指标只有5分，认可度很低，专家认为目前录播系统互动模块技术还不成熟，实际操作复杂，决定取消此二级指标。大部分专家建议增加二级指标“软硬件升级和扩展服务”。修改后的课堂智能录播系统评标指标由4个一级指标、11个二级指标和22个三级指标组成（如表1所示）。

3）第二轮征询问卷的发放和回收。笔者将修改后的指标整理后重新制成专家咨询问卷，采用面谈、网络即时通讯与电子邮件相结合的方式进行，同时在咨询过程中与个别专家进行深度访谈。主要请专家对三级指标的重要程度给出权重值，使所有因素分值的总和为100分。简单说明赋值的原因。

第二轮咨询的专家同上轮，共发放16份问卷，回收16份，有效问卷15份，有效率93.8%。采用以下几个统计参数进行分析[1]。

专家意见的集中程度，用均值描述，表达式为：。式中Mj为j指标算数平均值；mj为参加j指标评价的专家数；Cij为i专家对j指标的评价值。

专家意见的离散程度，用标准差σj描述，表达式为：。式中σj为j指标的标准差，反应专家对第j个指标影响智能录播系统采购招标的评价的分散程度，该值越小，表明专家评价结果的分散程度越小。汇总后各级指标权重的均值、标准差的达成度较低，不能形成统一意见。

4）第三轮征询问卷的发放和分析。将智能录播系统评标指标和权重的均值、标准差的统计结果制成征询问卷发放给各位专家，要求专家进行比较，考虑是否同意大家的意见，如有不同的见解，则说明理由。并且请专家再次对三级指标的重要程度给出权重值，使所有因素分值的总和为100分。问卷收齐后，对于权重分数进行再次统计，如表2所示。至此，绝大部分专家对于权重分数持相同意见，个别专家保留自己的观点。

启示与讨论

德尔菲法应用的注意事项

1）选择专家要精心。选择具有代表性的专家组是德尔菲法在综合评价中成功应用的首要前提。本研究选择的专家人数为17人，都是在地市级层面的中小学教育教学领域被广泛认可的行家，有的是学科教学专家，有的是教育技术应用专家，有的是教育装备采购的行家里手，还有的是学校行政领导。

2）征询问卷设计要合理。首先，征询表格的主题要明确，预设的因素要全面；其次，问卷导语要明确、易懂；第三，问卷的操作性强，获得的定性答案应简练、准确，定量的答案有可比性和统计性。就本例而言，主题是智能录播系统评标指标体系构建；问卷的导语操作性强，各级指标整体性强，又有等级层次。其中涉及的录播系统的专业术语有确切的解释，并向各种不同类型的专家提供适当的背景资料。采集到的数据准确，便于统计处理。

3）统计方法要恰当。使用正确的信息统计方法涉及到专家反馈意见的选择、汇总的准确性。定性的描述要能集中绝大多数专家的意见，不同意一致意见的个别专家允许其保留个人观点。定量的答案采用均值、标准差等统计参数进行描述。

智能录播系统指标结构特征与手动操作的录播系统、大学精品课程相比，中小学课堂使用的智能录播系统构成指标具有自己的特征。其一，整体结构清晰，等级层次分明。4个一级指标、11个二级指标和22个三级指标共同构成完整的评标指标体系。先综合后具体，同类项目先简单后复杂，由浅入深连贯排列。其二，智能化特征的指标权重较大。“U241”“U242”等体现智能化特征的指标，说明“一键式”简单、方便的操控方式，自然、平稳的剪切效果是深受欢迎的。第三，师生拾音指标、教师板书效果权重较高。“U213”“U223”“U232”指标权重都高于4分，说明常规教学过程中，课堂声音的再现、教师板书的呈现效果是影响效果的重要因素。

参考文献

[1]李明珍,马克芬.图书馆中文报刊采购招标评价体系研究――评价指标体系的建立[J].情报杂志,2007(9):159-161

（作者单位：江苏省常州市教育装备与勤工俭学管理中心）

本文为全文原貌 未安装PDF浏览器用户请先下载安装 原版全文