公務(wù)員期刊網(wǎng) 論文中心 正文

高職在線課程評價指標(biāo)體系淺議

前言:想要寫出一篇引人入勝的文章?我們特意為您整理了高職在線課程評價指標(biāo)體系淺議范文,希望能給你帶來靈感和參考,敬請閱讀。

高職在線課程評價指標(biāo)體系淺議

摘要:為了進(jìn)一步豐富和完善教育主管部門原有在線課程評價指標(biāo)體系,更好地指導(dǎo)高職教育教學(xué)改革,讓高職在線課程建設(shè)者能夠基于學(xué)習(xí)者學(xué)習(xí)能力、學(xué)習(xí)特點(diǎn)、學(xué)習(xí)目標(biāo)和職業(yè)教育目的,不斷修正和完善已建在線課程,使高職在線課程能被更多的高職學(xué)生有效利用,提高課程資源的使用率,為高職學(xué)生選擇合適的在線課程提供充分指導(dǎo)。本文基于調(diào)研學(xué)生體驗(yàn)的高職在線課程評價中遇到問題,綜合運(yùn)用文獻(xiàn)對在線課程評價研究的主要相關(guān)論文進(jìn)行可視化分析;建立在線課程質(zhì)量評價要素語料庫,對評價要素進(jìn)行聚類、分層,構(gòu)建評價指標(biāo)體系。

關(guān)鍵詞:學(xué)生體驗(yàn);在線課程;評價指標(biāo)體系

信息技術(shù)的飛速發(fā)展加快了在線教育資源建設(shè)步伐。世界各國在線課程不斷蓬勃發(fā)展與完善,一些發(fā)達(dá)國家對在線課程的研究領(lǐng)域更加全面,成果更加豐碩。在線課程的質(zhì)量標(biāo)準(zhǔn)體系建設(shè),歐美國家研究更系統(tǒng)和成熟,相關(guān)研究既有定性研究也有定量研究,研究成果經(jīng)過了具體在線課程評價的實(shí)踐驗(yàn)證,更關(guān)注學(xué)習(xí)者的在線課程學(xué)習(xí)體驗(yàn)以及學(xué)習(xí)評價等方面的研究,這些研究成果對我國在線課程評價體系的構(gòu)建都有重要的啟示。在教育部的引領(lǐng)下,國內(nèi)在線課程建設(shè)及質(zhì)量提升研究也進(jìn)入了高速發(fā)展期。教育部于2018年3月推出的首批490門“國家精品在線開放課程”中占據(jù)高等教育半壁江山的高職精品課程僅有22門,2019年高職課程增至111門。高職生源與普通本科生源之間存在顯著的區(qū)別,學(xué)生的學(xué)習(xí)基礎(chǔ)、動機(jī)、習(xí)慣、方法、興趣差異顯著。而且,普通本科與高職教育的課程性質(zhì)、學(xué)習(xí)目標(biāo)也有顯著不同,所以高職在線課程的建設(shè)不能按照普通高等教育在線課程的評價標(biāo)準(zhǔn)來評判。近年來,我國關(guān)于在線課程評價的研究呈上升趨勢,但多以理論為主,實(shí)踐研究還有待進(jìn)一步提升。2020年突發(fā)的新冠疫情,使各在線課程平臺用戶爆滿,在線課程建設(shè)者也使出渾身解數(shù),為教師和學(xué)生提供各種在線課程資源及建設(shè)平臺,原本是用于輔助線上線下混合式教學(xué)的在線課程成了教與學(xué)的主戰(zhàn)場,高職院校教師與學(xué)生都有了一定在線教與學(xué)的體驗(yàn),積累了進(jìn)一步對在線課程評價的條件。目前在線課程的建設(shè)與評價標(biāo)準(zhǔn)都是由教育教學(xué)機(jī)構(gòu)及其管理部門來設(shè)置,在線課程沒有充分從用戶視角與維度考慮課程的體驗(yàn)性,沒能兼顧用戶心理上、官能上的體驗(yàn),不能很好地使學(xué)習(xí)者積極、持續(xù)地參與進(jìn)去。在線課程的建設(shè)質(zhì)量及其評價標(biāo)準(zhǔn)應(yīng)該從在線課程的學(xué)習(xí)者角度來設(shè)計,由他們通過自身體驗(yàn)與應(yīng)用來對其做出評判。

1研究意義

本研究主要側(cè)重于高職學(xué)生學(xué)習(xí)過程和體驗(yàn),根據(jù)高職學(xué)生學(xué)習(xí)內(nèi)容、學(xué)習(xí)方法和學(xué)習(xí)路徑來確定評價指標(biāo),重點(diǎn)是增強(qiáng)為高職學(xué)生服務(wù)的意識,指導(dǎo)高職學(xué)生學(xué)習(xí)。基于客觀數(shù)據(jù)的搜集、科學(xué)的統(tǒng)計方法保障,進(jìn)一步豐富、補(bǔ)充和完善在線課程評價指標(biāo)體系理論研究,為高職在線課程建設(shè)評價,也為混合式教學(xué)研究提供數(shù)據(jù)支撐,同時進(jìn)一步深化高職教育課程建設(shè)理論。

2研究方法

(1)文獻(xiàn)分析法。通過研究和梳理文獻(xiàn),學(xué)習(xí)和借鑒國內(nèi)外在線課程建設(shè)的評價方法、理論依據(jù),分析其優(yōu)缺點(diǎn)。(2)實(shí)證研究法。本研究始于高職院校教師和學(xué)生大量使用在線課程的體驗(yàn),研究數(shù)據(jù)來自于應(yīng)用實(shí)踐,來自于一手的體驗(yàn)、經(jīng)驗(yàn)和問題,同時所得出的研究結(jié)果通過實(shí)踐進(jìn)行驗(yàn)證和完善。(3)德爾菲法。以問卷的形式征求高職在線課程使用者對在線課程的體驗(yàn)與評判,經(jīng)過多輪的意見征求與修訂,使專家的意見趨于一致,逐步分析出基于學(xué)生使用體驗(yàn)的評價指標(biāo)體系與要素。(4)定性分析與定量分析相結(jié)合法。用成對比較法和1~9分標(biāo)度構(gòu)造成對比較矩陣,基于調(diào)查數(shù)據(jù),構(gòu)建在線課程評價指標(biāo)體系,采用層次分析法(AHP)計算在線課程建設(shè)評價指標(biāo)體系指標(biāo)權(quán)重值和綜合評價值。

3研究發(fā)現(xiàn)

3.1在線課程評價研究特征與趨勢分析

2021年1月23日,在中國學(xué)術(shù)期刊網(wǎng)絡(luò)出版總庫(CNKI)以主題“在線課程”AND主題“評價”的限定條件進(jìn)行數(shù)據(jù)高級檢索,檢索起止時間范圍限定為2003年1月到2021年1月,來源類別為CSSCI、CSCD、核心期刊。對檢索到的文獻(xiàn)進(jìn)一步進(jìn)行篩選整理,剔除無關(guān)鍵詞文獻(xiàn),一共獲得183篇期刊論文和33篇碩博論文作為本文分析的樣本。利用CiteSpace5.7.R1的關(guān)鍵詞共現(xiàn)/聚類分析等功能,運(yùn)用文獻(xiàn)計量、文獻(xiàn)統(tǒng)計分析對樣本進(jìn)行可視化分析,宏觀把握研究態(tài)勢。

3.2在線課程評價要素篩選

首先,課題組從183篇核心論文和33篇碩博士論文中提取在線課程評價體系的所有評價要素進(jìn)行匯總,將匯總的指標(biāo)要素中涉及教育主管部門和授課者角度的評價指標(biāo)相關(guān)內(nèi)容剔除,確定指標(biāo)的初選范圍。按照在線課程使用者高職學(xué)生視角進(jìn)行分類形成語料庫。碩博論文在線課程評價體系指標(biāo)要素匯集了1032條,高職在線課程質(zhì)量評價體系指標(biāo)要素匯集了679條。其次,運(yùn)用Excel數(shù)據(jù)排序和分類功能,將文獻(xiàn)中搜集到的所有與在線課程相關(guān)評價要素分別進(jìn)行篩選。通過數(shù)據(jù)篩選功能對所有要素進(jìn)行降序排列之后,運(yùn)用“數(shù)據(jù)”中“分類匯總”命令自動分級顯示列表,并計算同一要素出現(xiàn)頻次總數(shù)。最后,結(jié)合當(dāng)前在線課程開設(shè)資源和學(xué)生學(xué)習(xí)情況,課題組根據(jù)山東省高職院校開設(shè)在線課程情況調(diào)查結(jié)果,參照教育部2018年發(fā)布的《精品在線開放課程評價指標(biāo)體系》以及《山東省高等學(xué)校在線開放課程建設(shè)實(shí)施方案》(魯教高字〔2017〕11號),結(jié)合文獻(xiàn)研究結(jié)果,依據(jù)高職在線課程評價的概念、指標(biāo)選取原則和范圍,經(jīng)過反復(fù)的邏輯思辨,對評價體系指標(biāo)進(jìn)行經(jīng)驗(yàn)選擇/篩選,剔除重復(fù)的指標(biāo)。

3.3評價體系的初步構(gòu)建

遵循主客觀相結(jié)合、宏微觀相結(jié)合、簡便易行和分類差別化的原則,將選取的評價指標(biāo)及分層情況以信函形式發(fā)送給專家,經(jīng)過幾輪征詢,使小組專家的意見趨于一致,初步設(shè)計了基于學(xué)生體驗(yàn)的高職在線課程評價指標(biāo)體系,包含1個目標(biāo)層指標(biāo),5個系統(tǒng)層指標(biāo),19個要素層指標(biāo),96個指標(biāo)層要素。

3.4對評價指標(biāo)框架的進(jìn)一步修改

為了使評價指標(biāo)體系更加科學(xué)和有效,本研究采用專家意見法對各評價指標(biāo)篩選和修改。根據(jù)初步制定好的評價指標(biāo)體系,生成專家調(diào)查咨詢表,向邀請的專家寄送,請他們獨(dú)自填寫后再匿名寄回。通過專家意見的幾輪征詢,直至專家意見基本趨于一致為止,最終獲得具有高準(zhǔn)確率的集體判斷結(jié)果。大致的流程為:匿名征求專家意見、統(tǒng)計、歸納,再匿名反饋給各專家,再征求意見,整理、再反饋,若干輪后停止。通過對專家咨詢及指標(biāo)修改意見進(jìn)行處理總結(jié)歸納,最終發(fā)現(xiàn)評價指標(biāo)體系還存在以下幾個問題:(1)指標(biāo)描述的規(guī)范性及全面性還有待于提高,專家指出,有些指標(biāo)描述的角度并沒有從學(xué)生的視角出發(fā),所確定的評價指標(biāo)體系的落腳點(diǎn)應(yīng)在學(xué)生體驗(yàn)角度上。(2)指標(biāo)先后順序不合理,三級要素層指標(biāo)和四級指標(biāo)層指標(biāo)在層內(nèi)的順序缺少邏輯性,沒有凸顯先后順序。(3)四級指標(biāo)缺失內(nèi)容需要補(bǔ)充。

3.5評價指標(biāo)選取及結(jié)構(gòu)層次確定,評價體系的初步構(gòu)建

3.5.1確定核心指標(biāo)要素。在遵循主客觀相結(jié)合、宏微觀相結(jié)合、簡便易行和分類差別化的原則上,聽取專家意見,最終形成初步的125條在線課程評價指標(biāo)。3.5.2構(gòu)建判斷矩陣。本研究采用層次分析法(AHP)確定指標(biāo)權(quán)重。層次分析法是將決策問題按總目標(biāo)、各層子目標(biāo)及評價準(zhǔn)則分解為不同的層次結(jié)構(gòu),然后用求解判斷矩陣特征向量的辦法,求得每一層次的各元素對上一層次某元素的所占比例最大值,最后再加權(quán)和的方法遞階歸并各備擇方案對總目標(biāo)的最終權(quán)重,此最終權(quán)重最大者為最優(yōu)方案。3.5.3專家權(quán)重賦值。將24位專家(8位教師和16名學(xué)生)填寫的層次分析調(diào)查問卷進(jìn)行匯總,去掉最低分和最高分取平均值,小數(shù)點(diǎn)后保留兩位。3.5.4層次分析。、權(quán)重和一致性檢驗(yàn)運(yùn)用統(tǒng)計軟件SPSSAU計算判斷矩陣的最大特征根,并進(jìn)行一致性檢驗(yàn)并確定相應(yīng)的指標(biāo)權(quán)重。3.5.5體系建構(gòu)完成及修正。統(tǒng)計結(jié)果表明,各判斷矩陣均通過一致性檢驗(yàn),根據(jù)統(tǒng)計所得各級評價指標(biāo)權(quán)重,建立基于學(xué)生體驗(yàn)的高職在線課程評價指標(biāo)體系。基于學(xué)生體驗(yàn)的在線課程評價指標(biāo)體系構(gòu)建完成后,研究團(tuán)隊(duì)將根據(jù)評價指標(biāo)體系,面向山東省高職院校在線課程學(xué)習(xí)的學(xué)生編制量表,進(jìn)行調(diào)研,根據(jù)他們的反饋結(jié)果,對量表進(jìn)行了修改,發(fā)布到問卷網(wǎng),請部分在線學(xué)習(xí)的學(xué)生根據(jù)量表要求給各評價維度打分。搜集了一定數(shù)量的樣本之后,對本次試填寫的量表的信度和效度進(jìn)行了檢驗(yàn)。

4研究預(yù)期

本研究所得出的基于使用者學(xué)生體驗(yàn)的高職在線課程評價指標(biāo)體系預(yù)期用于豐富和完善在線課程建設(shè)理論。進(jìn)一步豐富和完善教育主管部門原有的評價指標(biāo)體系,并進(jìn)一步制定相應(yīng)政策,更好地指導(dǎo)高職教育教學(xué)改革。也能夠指導(dǎo)高職在線課程建設(shè)者可以根據(jù)使用者的學(xué)能、特點(diǎn)、學(xué)習(xí)目標(biāo)和職業(yè)教育的特點(diǎn)與目的,不斷修正和完善已建設(shè)的在線課程。使高職在線課程能被更多的高職學(xué)生有效利用,提高課程資源的使用率,為高職學(xué)生選擇合適的在線課程提供充分指導(dǎo)。

參考文獻(xiàn)

[1]童小素,賈小軍,宣軍英.基于德爾菲法的微課程評價指標(biāo)的設(shè)計[J].中國教育信息化,2016,(24):40-46.

[2]唐曉君,路瑩,劉娜,等.基于德爾菲方法的在線開放課程質(zhì)量評價系統(tǒng)研究與實(shí)現(xiàn)[J].中國教育信息化,2018,(07):93-96.

[3]金賢.開放在線課程教學(xué)質(zhì)量評價指標(biāo)體系研究[J].江蘇科技信息,2019,(04):56-74.

[4]潘曉彥,蔣家瓊,莫蘭,等.美國“QM質(zhì)量標(biāo)準(zhǔn)”與我國“精品在線開放課程”評價指標(biāo)體系比較研究[J].湖南師范大學(xué)教育科學(xué)學(xué)報,2019,(05):105-110.

[5]陳然,張曉,唐榮.我國開放大學(xué)在線課程質(zhì)量評價研究[J].成人教育,2020,(02):27-32.

[6]陳春芳.應(yīng)用型本科院校在線課程質(zhì)量評價指標(biāo)構(gòu)建研究[J].吉林工程技術(shù)師范學(xué)院學(xué)報,2020,(03):40-43.

作者:樊宇 單位:山東經(jīng)貿(mào)職業(yè)學(xué)院