归一云思
主页网络文摘杂文
文章内容页

基于头脑风暴法的文献检索课试卷质量控制

  • 作者: 图书馆界
  • 来源: 归一文学
  • 发表于2023-11-09
  • 热度19569


  •   (广西医科大学图书馆,广西 南宁 530021)

    1 引言

    头脑风暴法又称智力激励法、脑力激荡法,是由美国创造工程学家A·F·奥斯本于1939年首次提出的一种激发创造性思维的方法。它是以会议形式,针对会议主题,让每一个参会者自由发言,陈述自己的设想和观点,让各种观点、设想、方案如泉水般涌出和振荡,好像掀起一场头脑风暴,从而产生新设想和可行方案。近年来我国许多学者倡导将头脑风暴法作为一种训练集体创造性思维的方法推广于教学领域。针对笔者所在教研室两年来医学文献检索与利用课(简称文献检索课)试卷质量存在的问题,笔者将头脑风暴法应用于文献检索课试卷编制过程,取得了良好的试卷质量控制效果。

    2 试卷质量评价指标

    为大学生开设文献检索课是高校图书馆直接参与学校教学的主要方式,目前主要以学生考试成绩来衡量教学质量。而考试依赖于试卷,考试成绩能否有效地检测教与学的水准,则取决于试卷编制质量。与试卷质量密切相关的因素是试题的难度、区分度、信度和效度。

    2.1 难度

    试题难度是指测评试题的难易程度,即考生做试题时所遇到的困难程度,其统计量称为难度系数,以P表示。P值与难度大小成反比。一般认为P值<0.5为难度偏大的试题,P值>0.7为难度较小的试题,P值在0.5~0.7为中等难度试题。试题难度可通过以下两个方法测评。

      2.1.1 通过率难度。适用于选择题,是以通过的百分率作为评价指标。通过率难度一般定义为答对率,计算公式为P=R/N。其中P代表试题难度,N代表全体被试人数,R代表答对该题人数。比如参加考试的80人中有40人答对某题,那么,该道题的通过率难度为P=40/80=0.5。

      

    2.2 区分度

    区分度是表示试题或试卷能测量出不同水平的学生加以区别的能力,也称为鉴别力,用于分析考生对试题的反应和参照准则之间的相关程度,从而衡量试题的性能及对整个考试的贡献和影响。如果某一试题分数与全部分数有正相关,这一试题称为有良好区分度。试题与总分相关程度高,意味着该试题能把不同的被试者区分开来,而区别度愈大,则考试的有效性就愈高。

      试题的区分度是一个统计量,它的计算方法也多种多样,比较简单易行的方法是内在一致性衡量区分度的方法。但不论哪种方法,都是估计试题与总分的相关。内在一致性衡量区分度的方法是先把参加预试的答卷分为两组,考试总分较高的为高分组,考试总分较低的为低分组。具体取法是把答卷按得分由高到低的次序排列,由最高分往下按顺序取出高分组试卷(一般占总份数的27%),由最低分往上按顺序取出低分组试卷(比例也是总份数的27%),这样就得出两组试卷。然后,分别求出这两组被试者在某一试题上的答对率,以高分组该题答对率减去低分组该题答对率,所得差数即称区分指数。计算公式为D=P-P,其中D代表区分指数,P代表高分组答对人数百分比(答对率),P代表低分组答对人数百分比(答对率)。一般认为区分度D≥0.4 为优秀试题,D=0.30 ~0.39 为良好试题,D=0.20 ~0.29 为尚可(一般)试题,D <0.20 为劣等试题。对于课程考试而言,只要大多数试题区分度在0.2以上就可以了。

    2.3 信度

    信度即考试结果的可信程度,是指同一组考生考试成绩的稳定性程度或多次考试后考生所得到成绩的一致性程度,是衡量考试质量高低的重要指标。即一项考试的信度是指这项考试的一组成绩,和对同一组考生实施等价考试所得的另一组成绩相比较,它们的一致性程度。信度有以下两种计算方法。

      2.3.1 等式法。编制出形式相同、可互换但具体题目不同的两套试题分两次测试,然后相比较,求出考试信度。这种方法是测试和计算考试信度较为理想的方法,但须精心编制两套等价试卷,且测试两次,比较麻烦。

      2.3.2 分半法。把一次考试试题分成两套题数相等的题目,把考生对这两套题解答所得分数相比较,求得相关系数。这种方法简便易行,被广泛采用。根据“斯皮尔曼-布朗”公式:r=2r/r(其中 r为考试信度,r半为分半信度),可以采用分半法求得分半信度后,利用上式算出整个考试的信度。一般试题信度在0.5~0.9为宜。提高信度,减少测试误差,增加考试的客观性和准确性,这对于提高考试质量无疑是十分重要的。提高考试信度一般采用的方法是:1)增加考试的数量,扩大试题覆盖面。2)提高试题鉴别力指标,准确反映不同水平考生分数差异。3)尽量消除测试中的干扰因素,减少随机误差。4)提高评卷、评分的客观性和准确性。

      通过对资源财政税收预算管理工作中存在的问题进行分析,提出相应的解决策略:健全完善制度体系;及时转变人员观念;高效使用预算资金;实现财税科学管理,希望能进一步提升我国国土资源财政税收预算管理工作的科学性,从而促进我国国土资源的有效利用,使其能进一步推动我国社会经济的发展。

    2.4 效度

    考试效度是指一个考试实现既定目标的成功程度,也就是考试在多大程度上体现教学大纲的要求和有效地检验学生对知识的掌握和灵活应用。效度主要用以下两种方法进行评价。

      2.4.1 内容效度。对于课程考试而言,内容效度是较为合适的效度评价指标。因为课程考试具有明确的内容指向和目标要求,考试分数能体现教学的每个章节和重点内容所占的比例。

      2.4.2 标准关系效度。是比较一次考试和作为标准的考试的数学方法,通常是求同一组考生在两次考试中所得成绩的相关系数,或称为效度系数,用r表示,计算公式为:

      

      

      总的说来,若试卷的难度在0.5左右,区分度在0.4以上,信度在 0.5 ~0.9 范围,效度在 0.4 ~0.7之间,这份试卷就较好地达到考试要求,既在广度上覆盖了各章节的知识点和重点内容,又在深度上符合考试大纲的要求;既能测量出学生掌握知识的程度,也能很好鉴别考生能力;同时较好掌握考试的合格线,力求使考试合格的考生都能达到规定的标准,达到规定要求的考生都能取得理想的考试成绩。

    3 头脑风暴法的实施

    3.1 建立定期讨论制度

    教研室每学期开学后4~6周及期末考试前3~4周对试卷质量问题进行定期讨论。前者是对学校考试中心上个学期试卷检查存在的问题展开讨论,分析试题质量;后者是对本学期期末考试试卷质量控制进行讨论,优选良好试题组成本学期期末考试的试卷。

    3.2 确定讨论议题

    以试卷质量控制为宗旨,对以往试卷(主要是简答题、检索题和分析题)存在的需要解决的共性问题及本学期如何减少或杜绝劣等试题作为会议讨论议题,提前一周通知教研室全体教师,以便他们做好充分准备,更好地分析相关问题的影响因素及处理对策等。

    3.3 会议畅谈

    会议开始,教研室主任简要介绍会议议题,要求每一位教师要切实尊重发言的教师,既不能随意打断发言,也不能对他人提出的试题方案进行任何评价(包括批评或赞扬),随后引导大家自由发言。发言人的每个设想都在投影仪上呈现。当看到别人发表新奇的设想时,旁观者思维受到刺激,情绪受到感染,潜意识被自然地唤醒,巨大的创造智慧自然地迸发出来,大量的信息不断地充斥着人的大脑,奇思妙想就会喷涌而出。经过与会者“思维共振”的“头脑风暴”,会迅速获得许多新颖、科学可行的设想。

    3.4 论证与总结

    经过讨论,主持人对发言记录进行归纳、整理,找出适用、可行的设想,以及富有新颖性的试题,并把类似的试题进行合并,然后由全体教师进行集体论证,每一道试题都预选出5份最好的设想。根据试题的难度、区分度、信度和效度4个评价条件来衡量哪一份设想是解决问题的最佳试题,每个条件值3分。每个教师根据符合每一个条件的程度在这个范围内打分并计算总分,最高者即为最佳试题方案。

    4 实施头脑风暴法应注意的问题

    4.1 控制时间

    会议时间由主持人掌握,一般而言,会议讨论时间以60分钟左右为宜。讨论时间太短,既不利于参会教师畅所欲言,也不利于方案的优选。时间过于冗长,容易让人产生疲劳感,直接影响头脑风暴法的效果。

    4.2 追求数量,以量求质

    头脑风暴法的目的是获得尽可能多的设想和方案,追求新设想和新方案的数量是它的首要任务。每一位教师从不同角度和不同层面提出独创性的设想后,除了未表达清楚者外,不宜就此展开讨论,更不应将时间和精力集中在对其的完善和补充上而忽视了其他设想和试题的开发。设想或试题越多,找到切实可行的试题的概率就越大。

    4.3 激发灵感

    头脑风暴法的特点是让参会者自由畅想,畅所欲言,激发他们的创意与灵感,在思维共振下,最大限度地做到智力互补。即用一个设想诱发另外一个设想,或用一个灵感激发另外一个灵感。将他人提出的设想或试题加以完善补充变成更具新颖性的设想或试题,或将他人的设想或试题与自己的设想或试题进行多层次、全方位的比较,从而融合产生更新的设想或试题。这样激发灵感,通过不断参照他人的思维成果,使得自身头脑中实现创造性的思维波动,在脑力震荡中不断产生新的思维成果。

    4.4 延迟评价

    头脑风暴法是以讨论会的形式进行,但它与专题讨论是截然不同的两种方法。后者是针对某一专题开展的讨论,在讨论中大家畅所欲言,提出各种各样的设想和方案,并即时对提出的设想和方案进行评价,当即肯定或否定某个设想和方案,从而达到优化方案、解决问题的目的。专题讨论法与头脑风暴法最大的区别在于头脑风暴法排斥评论。头脑风暴法坚持会议畅谈期间不对任何设想做出评价的原则,一切评价要延迟到集体论证和总结阶段才能进行。因为评价批评对创造性思维无疑会产生抑制作用,进而影响创新性设想和优良试题的大量产生。

    5 实施头脑风暴法的效果评价

    目前头脑风暴法的适用范围非常广泛,并可取得理想的应用效果。结合本文的应用实践,笔者体会到头脑风暴法应用于文献检索课试卷质量控制,具有以下方面的显著作用。

    5.1 提高了试卷质量

    头脑风暴法应用于试卷质量控制,能够发现以往试卷编制过程中存在的共性问题及缺陷,较好地摒弃了难度不理想、区分度不高、信度和效度都较低的试题,保障了文献检索课试卷质量的有效控制和持续提高。从广西医科大学2010年以来实施头脑风暴法的结果来看,效果比较理想。一是学校考试中心每年各教研室试卷检查排名,医学信息检索教研室在第2组28个教研室中,1998年、1999年检查排名为倒数第2名和第3名,而在2010年、2011年和2012年检查排名上升为第14名、第15名和第8名。二是连续3年考试结束后进行的试卷质量满意度抽样调查,300名大学生中认为试卷难度适宜、有较好的区分度、信度和效度的学生分别占90%、87.5%、86%和 85%,对试卷的总体满意度达88.5%。表明头脑风暴法应用于试卷质量控制是行之有效的,可发现以往试卷存在的诸多问题,针对性地采取防范对策,精选各种类型的优良试题,从总体上提高了试卷质量。

    5.2 提高命题水平

    应用头脑风暴法这种自由畅谈的会议方式,既为每位教师提供了一个展现自我的平台,又为他们创造了公平、均等的发言机会,让其在自由愉快、毫无拘束的氛围中大胆表述自己的所思和所想,哪怕是天马行空的设想和思考。通过多次自由畅谈和论证总结能让教师发现自己所出试题存在的缺陷,自己的命题水平在哪些方面有待提高,从而激发其更自觉地学习命题编制原则、命题质量标准等与考试命题有关的业务。此外,通过自由发言和讨论,教研室主任更清晰地了解每位教师的表述能力、思维能力、分析能力、创新能力等方面的优势和缺陷,更明了教研室考试命题存在的问题和薄弱环节,有针对性地开展考试命题知识的学习,或让教师参加有关考试命题知识的培训,从整体上提高教研室的命题水平。

    5.3 打造高效和创新教学团队

    实现教学的高效和创新,离不开集体的力量。团队创新对解决相关问题有显著的“高效”特点:1)因为在个人畅所欲言的基础上,集体讨论共同解决问题时,目的性和有效性被彼此互相加强和优化,既有利于融合产生可行的解决问题方案,又有利于增强团队的凝聚力;2)因为每一位教师的思考往往都是沿着同一条思路进行,大脑的信息联系是相同的。当一位教师提出不同的设想时,其他教师大脑中有可能被唤起新的联想,产生难能可贵的思想闪光,从而产生超常的信息组合;3)集体思维提供了一种从各种角度和不同的层面分析问题同时又自我批评地思考设想的可能性和方案的可行性;4)随着一个问题的解决,会进一步激发教师们提出新的设想和方案。而头脑风暴法的宗旨就是强调集体智慧的开发和团队力量的融合。每位教师都有自己的优势,也有自己的短处,只有互相尊重和学习,团结协作,充分发挥自己的聪明才智和无限能力,才能最大限度地做到优势资源互补,打造出高效和创新的教学团队。

    6 结语

    头脑风暴法应用于文献检索课试卷质量控制是行之有效的,可以及时发现以往试卷存在的问题,有效地提出防范对策,针对性地实行整改方案。但实施头脑风暴法应注意控制好会议时间和激发与会人员的创意与灵感,在思维共振下最大限度地做到智力互补,创造出团队的智慧之光,以融合产生更新的设想或试题方案,从而更有效地编制优良试题,达到提高试卷质量的目的。

      [1]头脑风暴法是什么[EB/OL].[2009-07-04].http://zhidao.baidu.com/question/29332404.html.

      [2]李运萍.头脑风暴法在学科教学中的应用研究——以市场营销专业为例[J].河南科技学院学报,2012(2):126—129.

      [3]谭志敏,郭 亮.头脑风暴法在教学中的运用及其注意要点[J].继续教育研究,2007(5):142—144.

      [4]葛晓飞.头脑风暴法在参与式课堂教学中的运用及注意事项[J].商场现代化,2010(4):172—173.

      [5]张志莉,雷存才.试卷质量的数量统计分析[J].呼伦贝尔学院学报,2011(6):90—92.

      [6]边 丽,张海丛.高等特殊教育院校课程试卷考核质量评价研究[J].科技促进发展(应用版),2010(6):243—244.

      [7]王良朝.刍议头脑风暴法在学校管理中的尝试[J].考试周刊,2011(87):193.

      [8]胡选振.基于“头脑风暴法”的高校图书馆管理创新[J].图书馆学刊,2010(8):13—15.

      [9]陈万龙.“头脑风暴法”在数学课堂中的尝试[J].新课程导学,2012(2):1—2.

      [10]谢春鸣,盛立琨,朱海燕.试论头脑风暴法在大学图书馆参考咨询服务中的运用[J].科技情报开发与经济,2010(25):33—35.

      本文标题:基于头脑风暴法的文献检索课试卷质量控制

      本文链接:https://www.99guiyi.com/content/805371.html

      • 评论
      0条评论
      • 最新评论

      深度阅读

      • 您也可以注册成为归一的作者,发表您的原创作品、分享您的心情!