2012年04月 总第177期第04期 里河学刊 Heihe Journal Apr.201 2 Serial NO.1 77 No.04 基于课程平台的网络学习绩效影响因素研究 ⑥扈静静,魏忠 (上海海事大学经济管理学院,上海200433) 【摘 要】研究以某高校基于Sakai课程平台进行《网络工程管理》一门课程学习的学生作为研究对象,利 用Kirkpatrick评价理论设计网络学习调查问卷,从而进行实证分析网络学习影响因素,为网络教学提供参考。 【关键词】网络学习;影响因素;课程管理系统;Sakai平台 【中图分类号】F273【文献标识码】A【文章编号】1009—3036(2012)04—0147—03 一、引言 态度,期末考核等。 近年来,以教育信息技术为基础的E—learning在教 本研究的数据采集采用调查问卷法,问卷如果编制 育领域迅速普及开来。作为E—Learning的载体,课程管 或选用得宜,则研究才更具可靠性与价值性。下表2-1 理系统以其出众的协作性和互动性也越来越受到重 为根据柯氏评价理论所设计的原始调查问卷。 视。网络教学可以使教师和学生更快捷的分享资源,提 表2—1调查问卷 交和反馈任务,并且可以进行在线交流,从而使反应信 第二屡 编 息的表现形式及传播方式趋于多样化,促进学生学习。 评价因 第一层评价子因素 素 口 作为一种新兴的学习方式,网络教学环境下哪些 Q1 网络教学平台的资料传输速度会影响我的学习绩敬 02 网络教学平台数据的显示速度会影响我的学习绩效 因素直接影响学生学习绩效这一问题显得尤为重要。 Q3 网络教学平台的功能完整性会影响我的学习绩教 二、Kirkpatrick评价理论 O4 同络教学平台的操作方便性会影响我的学习绩敛 反 O5 同络教学平台的性能稳定性会影响我的学习绩敬 柯氏评估模型是由唐纳德・L・柯克帕特里克 Q6 网络教学平台的访问高效性会影响我的学习绩敬 应 O7 网络教学平台的风格统一会影响我的学习绩敏 (Donald.L.Kirkpatrick)提出的一个针对培训的评价 O8 同络教学平台的页面的美观性会影响我的学习绩效 层 09 嘲络教学平台的知识覆盖商会影响我的学习绩放 模型,其将培训效果的评估分为4个递进的层次:反应 QlO 网络教学平台的课程呈现的丰富程睦(图片、动画、声音、色 凋等)会影响我的学习绩技 层、学习层、行为层和效果层。这种评价工具虽多用于 0t1 网络教学平台的实例与演示会影响我的学习绩敛 员工对所参加培训的评价,但这四个层次与学生的学 Ol2 网络教学平台的学习辅导材料全影响我的学习绩敌 O13 网络教学平台的内容可获得性会影响我的学习绩教 习过程相吻合,因此对于高校学生的学习绩效影响因 Ol4 网络教学平台的在线提交作业的方式会影响我的学习绩效 OI5 网络教学平台的“讨论”功能会影响我的学习绩敬 素评价同样适用。在网络环境下这四个层级的评价指 Q16 网络教学平台的是否完成老师分配的教学任务会影响我的学 习绩效 标如下: 学 0I7 网络教学平台的内容测验会影响我的学习绩效 1.反映:针对学员对课程及学习过程的满意度进行 018 网络教学平台的电子公告会影响我的学习绩敬 习 0I9 网络教学平台的聊天室会影响我的学习绩敬 评估,目标是测试学习者对学习过程的感受程度。 O2O 网络教学平台的常见问题解答会影响我的学习绩效 层 021 网络教学平台的学生的作业成绩会影响我的学习绩敬 2.学习:针对学生完成课程后,对学习成果进行评 O22 网络教学平台的测试成绩会影响我的学习绩敬 Q23 网络教学平台的各种网络行为的统计与排名会影响我的学习 估,目的是在检测学习者的知识、技能的获得程度。 赜效 O24 网络教学平台 WIKI使用会影响我的学习绩敬 3.行为:是指学习者学习之后的学习转移应用情形, 行 曝程的实验操作(如利用IIS发布个人网站会影响我的学习绩 此层面可以直接根据学生的行为来反应教学的效果。 为 Q25 敏、傲交换机、路由器和VLAN实验会影响我的学习绩敬)会 层 影响我的学习绩效 4.结果:对结果层面的评估是指学生的课程结束之 结 Q26 网络教学自主的学习方式提高丁我的学习绩效 果 027 我对网络教学的时空便利性的教学方式的满意程度为 后的一些可以测量的指标,如自信心、同学关系、学习 层 Q28 网路教学提升了我的学习效果 【基金项目】上海市哲学与社会科学暨上海市教育科学研究重点项目(AI122)。 【作者简介】扈静静(1987一),女,河南信阳人,上海海事大学经济管理学院2010级硕士在读,研究方向:实训教学;魏忠 (1969一),男,上海人,博士后,上海海事大学经济管理学院教授,硕士生导师,研究方向:电子商务、实验教学。 ・l47・ 学者Berdie(1994)根据研究经验认为在大多数的 2.因子分析。下图3-2为KMO检验统计量和巴特 情况此调查问卷采用李克特量表形式,其属评分加总 式量表最常用的一种,重视“内在一致性程度”,是量表 利球星检验统汁量,说明原始变量适合做因子分析。 KM0 and Barllett’S Test Kaiser—Meyer-Olkin tvleasu re of Sampling  ̄:lequacy .题项两两之间关系强度的函数,也是题项与潜在变量 间的关系指针。该量表由一组陈述组成,每一陈述有 “非常同意”、“同意”、“不一定”、“不同意”、“非常不同 意”五种回答,分别记为5,4,3,2,1,以说明态度强弱或 744 Bartlett's Test of App rox Chi—Square 606 0日7 Sphe ricity df 210 在这一量表上的不同状态。 三、数据处理与分析 实验环境是基于Sakai教学平台的《网络工程管 理》课程,实验样本是某高校三年级此课程的全体学 生。课程从2010年9月中旬到2011年1月底结束,时 间将近4个月。 调查问卷总共有28个题目,共有63位同学作答, 通过统计分析法利用SPSS18.0进行数据处理。 1.项目分析。调查问卷采取27%作为高低分组的界 限,高低分组的分数分别为123分、108分(高分组为第 一组、低分组为第二组)。以t—test检验高低二组在题项 上的差异,T检验的目的是利用来自两个总体的独立样 本,推断两个总体的均值是否存在显著差异。如果题项 的CR值达显著水准(<0.05),即表示这个题项能鉴别 不同受试者的反应程度,此题项应予以保留。 SPSS将自动依据单因素方差分析的方法计算F统 计量和概率P值,并自动计算出统计量的观测值和对 应的概率P值。 h钟峨■s枷脚l Ⅱ 图3—1 T检验结果表 在对28个题目进行了T检验后,共有21个项目 通过了显著性检验,说明其有较好的鉴别度,有7个题 目的鉴别度较低,分别为Q5、Q7、Q8、Q14、Q18、Q19、 Q24;决定将其删除,问卷剩下21个题目。 ・148・ SIg 000 图3—2 KMO和巴特利球星检验统计表 然后观察碎石图来确定因子变量个数,从下图3—3 可以看出,从第七个因素后,坡度线曲线于平坦,因此 保留7个因子较为适宜。 图3—3碎石图 在确定7个因子后,选择Varimax方差极大法旋转 矩阵,由下图3—5可以发现,Q4、Q2o、Q6的因子负荷值 较小,将其删除。 ROn●ed COm∞●●tM圳 u CombOnent 1 2 3 4 5 6 7 QOQg 2123 @ .294 233 12153 3951 211308 21 43 217 r O10 157 1 ̄7 158 Q3 t97 264 354 159 CQ曙2178 5 1O 12357 @ 31052@ 357 319552 Q01231 1 228751 .124081768 13302385 ⑦ 117295 ・12387g6 。 O0Q215 2 47’82 32058 311768 .棘36@ @ 1 .51253 108 ●L 0Q256 214518 . 123537 2 3,688g 1 08 1驰 ④ 368r Q4 106 35S 216 Q2O 3'34 上35 1D口 136 329 Q6 454 110 197 149 236 图3—4正交旋转因子分析 由于每删掉一个项目,其他项目之间的关系也会 发生变化,故每删掉一题就重新作一次正交旋转的因 子分析。在做第二次分析时,因子变量个数依然为6・,所 以,最终问卷选出18个题目。被删除的三个题目为Q4、 Q6、Q20。 因素可归结为三类:课程内容、平台操作的便利性、测 试和成绩。 四、结论 3.信度分析。因子分析完后,继续要进行分析的是 调查表各层面与总调查表的信度检验。所谓信度 (reliability)就是调查表的可靠性或稳定性,在态度量表 上述研究结果表明: 1.网络课的课程内容会显著地影响网络学习绩效。 因此在网络课程的部署时,要注重课程内容的丰富化, 法常用检验信度的方法为L.J.Cronbach所创的。系数, 其公式为:克隆巴赫(信度)系数(Cronbach’S alpha), 是心理或教育测验中最常用的信度评估信度工具。其 依据一定公式估量测验内部的一致性,作为信度的指 标。克服部分折半法的缺点,是目前社会研究最常使用 即学习内容要能够符合学习目的,使学生能够利用网络 进行学习活动并找到想要的知识,从而提高学习绩效。 2.对课程管理平台的认知性会显著影响网络学习 绩效。即如果学生感觉到学习平台能提高自己的学习效 率和效果,其学习成绩就会较高。当学生登录课程管理 的信度指标,它是测量一组同义或平行测“总和”的信 度。克隆巴赫系数公式: 2 一. 平台进行测试、下载资料或进行讨论时,如平台硬件环 境限制或课程资料杂乱、更新不及时等,都会导致对课 程管理平台的认知性降低,从而降低学生的积极性,影 响网络学习绩效。 3.协助互动与学习绩效没有显著性相关。与传统的 面对面的授课方式相比,通过课程管理平台进行的协 助互动缺少情感的交流,而且教师不能立即了解教学 反馈。金 【参考文献】 [1]Bostrom,R…P L.Olfman,and M.K.Sein(1988).“End- user computing:Areseareh framework for investigating the training/ learning process,”HumanFactors in Management Information Systems,221-250. :(n/n-1)( 一∑≥ (公式3.1) 为信度系数,n为测验题目数,为每题各被试得 分的方差,为所有被试所得总分的方差。一般来说,该 系数愈高,即工具的信度愈高。在探索性研究中,信度 只要达到O.70就可接受,介于0.70—0.98均属高信度, 而低于O.35则为低信度,必须予以拒绝。 本研究的6个因子变量的 值分别为:0.815、 0.753、0.792、0.730、0.626、0.629,第五和第六个因子变 量的 值小于0.7,将其删除,删除后总调查表的 值 为0.876,代表此调查表的信度颇佳。 第五和第六个因子变量对应的题目为Q25、Q26、 Q1、Q2、Q15。 [2]Engelbrecht,E.(2005).Adapting to changing expectations: Postgraduate students experience of an e—learning tax program. Computers and Education,45(2),217-229. [3]Manochehr N.-N.(2006),The Influence of Learning Styles on Leamem in E-Learning Environments:An Empirical Study. 4.结果分析。经过一系列数据处理,调查问卷剩余的 题目数为l3个,此13个题目就是影响网络学习绩效的 因素,即Q3、Q4、Q9、Q10、Q1 1、Q12、Q13、Q21、Q22、Q23、 Q27、Q28。 Computers in Hisher Education Economics Review,i8(1)。10-14. [4]Kirkpatrick,D.,‘‘Great Ideas Revisited:Techniques for Evaluating Training Programs.”Human Resource&Development 因此,教学平台资料的传输速度、显示速度,平台 的界面(风格、美观性),教学平台内部的交互式的聊天 工具(电子公告、聊天室、常见问题解答)等小于课程内 容,平台操作的便利性、可用性,测试和作业成绩对学 生的学习绩效影响,即课程管理平台学习绩效的影响 (50:1)。1996.54—57. 【5】吴明隆.SPSS统计应用实务【M】.北京:中国铁道出版社, 2009. 口编辑/徐霄天 ・149・