公務(wù)員期刊網(wǎng) 論文中心 正文

高職在線課程評(píng)價(jià)指標(biāo)體系淺議

前言:想要寫(xiě)出一篇引人入勝的文章?我們特意為您整理了高職在線課程評(píng)價(jià)指標(biāo)體系淺議范文,希望能給你帶來(lái)靈感和參考,敬請(qǐng)閱讀。

高職在線課程評(píng)價(jià)指標(biāo)體系淺議

摘要:為了進(jìn)一步豐富和完善教育主管部門原有在線課程評(píng)價(jià)指標(biāo)體系,更好地指導(dǎo)高職教育教學(xué)改革,讓高職在線課程建設(shè)者能夠基于學(xué)習(xí)者學(xué)習(xí)能力、學(xué)習(xí)特點(diǎn)、學(xué)習(xí)目標(biāo)和職業(yè)教育目的,不斷修正和完善已建在線課程,使高職在線課程能被更多的高職學(xué)生有效利用,提高課程資源的使用率,為高職學(xué)生選擇合適的在線課程提供充分指導(dǎo)。本文基于調(diào)研學(xué)生體驗(yàn)的高職在線課程評(píng)價(jià)中遇到問(wèn)題,綜合運(yùn)用文獻(xiàn)對(duì)在線課程評(píng)價(jià)研究的主要相關(guān)論文進(jìn)行可視化分析;建立在線課程質(zhì)量評(píng)價(jià)要素語(yǔ)料庫(kù),對(duì)評(píng)價(jià)要素進(jìn)行聚類、分層,構(gòu)建評(píng)價(jià)指標(biāo)體系。

關(guān)鍵詞:學(xué)生體驗(yàn);在線課程;評(píng)價(jià)指標(biāo)體系

信息技術(shù)的飛速發(fā)展加快了在線教育資源建設(shè)步伐。世界各國(guó)在線課程不斷蓬勃發(fā)展與完善,一些發(fā)達(dá)國(guó)家對(duì)在線課程的研究領(lǐng)域更加全面,成果更加豐碩。在線課程的質(zhì)量標(biāo)準(zhǔn)體系建設(shè),歐美國(guó)家研究更系統(tǒng)和成熟,相關(guān)研究既有定性研究也有定量研究,研究成果經(jīng)過(guò)了具體在線課程評(píng)價(jià)的實(shí)踐驗(yàn)證,更關(guān)注學(xué)習(xí)者的在線課程學(xué)習(xí)體驗(yàn)以及學(xué)習(xí)評(píng)價(jià)等方面的研究,這些研究成果對(duì)我國(guó)在線課程評(píng)價(jià)體系的構(gòu)建都有重要的啟示。在教育部的引領(lǐng)下,國(guó)內(nèi)在線課程建設(shè)及質(zhì)量提升研究也進(jìn)入了高速發(fā)展期。教育部于2018年3月推出的首批490門“國(guó)家精品在線開(kāi)放課程”中占據(jù)高等教育半壁江山的高職精品課程僅有22門,2019年高職課程增至111門。高職生源與普通本科生源之間存在顯著的區(qū)別,學(xué)生的學(xué)習(xí)基礎(chǔ)、動(dòng)機(jī)、習(xí)慣、方法、興趣差異顯著。而且,普通本科與高職教育的課程性質(zhì)、學(xué)習(xí)目標(biāo)也有顯著不同,所以高職在線課程的建設(shè)不能按照普通高等教育在線課程的評(píng)價(jià)標(biāo)準(zhǔn)來(lái)評(píng)判。近年來(lái),我國(guó)關(guān)于在線課程評(píng)價(jià)的研究呈上升趨勢(shì),但多以理論為主,實(shí)踐研究還有待進(jìn)一步提升。2020年突發(fā)的新冠疫情,使各在線課程平臺(tái)用戶爆滿,在線課程建設(shè)者也使出渾身解數(shù),為教師和學(xué)生提供各種在線課程資源及建設(shè)平臺(tái),原本是用于輔助線上線下混合式教學(xué)的在線課程成了教與學(xué)的主戰(zhàn)場(chǎng),高職院校教師與學(xué)生都有了一定在線教與學(xué)的體驗(yàn),積累了進(jìn)一步對(duì)在線課程評(píng)價(jià)的條件。目前在線課程的建設(shè)與評(píng)價(jià)標(biāo)準(zhǔn)都是由教育教學(xué)機(jī)構(gòu)及其管理部門來(lái)設(shè)置,在線課程沒(méi)有充分從用戶視角與維度考慮課程的體驗(yàn)性,沒(méi)能兼顧用戶心理上、官能上的體驗(yàn),不能很好地使學(xué)習(xí)者積極、持續(xù)地參與進(jìn)去。在線課程的建設(shè)質(zhì)量及其評(píng)價(jià)標(biāo)準(zhǔn)應(yīng)該從在線課程的學(xué)習(xí)者角度來(lái)設(shè)計(jì),由他們通過(guò)自身體驗(yàn)與應(yīng)用來(lái)對(duì)其做出評(píng)判。

1研究意義

本研究主要側(cè)重于高職學(xué)生學(xué)習(xí)過(guò)程和體驗(yàn),根據(jù)高職學(xué)生學(xué)習(xí)內(nèi)容、學(xué)習(xí)方法和學(xué)習(xí)路徑來(lái)確定評(píng)價(jià)指標(biāo),重點(diǎn)是增強(qiáng)為高職學(xué)生服務(wù)的意識(shí),指導(dǎo)高職學(xué)生學(xué)習(xí)?;诳陀^數(shù)據(jù)的搜集、科學(xué)的統(tǒng)計(jì)方法保障,進(jìn)一步豐富、補(bǔ)充和完善在線課程評(píng)價(jià)指標(biāo)體系理論研究,為高職在線課程建設(shè)評(píng)價(jià),也為混合式教學(xué)研究提供數(shù)據(jù)支撐,同時(shí)進(jìn)一步深化高職教育課程建設(shè)理論。

2研究方法

(1)文獻(xiàn)分析法。通過(guò)研究和梳理文獻(xiàn),學(xué)習(xí)和借鑒國(guó)內(nèi)外在線課程建設(shè)的評(píng)價(jià)方法、理論依據(jù),分析其優(yōu)缺點(diǎn)。(2)實(shí)證研究法。本研究始于高職院校教師和學(xué)生大量使用在線課程的體驗(yàn),研究數(shù)據(jù)來(lái)自于應(yīng)用實(shí)踐,來(lái)自于一手的體驗(yàn)、經(jīng)驗(yàn)和問(wèn)題,同時(shí)所得出的研究結(jié)果通過(guò)實(shí)踐進(jìn)行驗(yàn)證和完善。(3)德?tīng)柗品āR詥?wèn)卷的形式征求高職在線課程使用者對(duì)在線課程的體驗(yàn)與評(píng)判,經(jīng)過(guò)多輪的意見(jiàn)征求與修訂,使專家的意見(jiàn)趨于一致,逐步分析出基于學(xué)生使用體驗(yàn)的評(píng)價(jià)指標(biāo)體系與要素。(4)定性分析與定量分析相結(jié)合法。用成對(duì)比較法和1~9分標(biāo)度構(gòu)造成對(duì)比較矩陣,基于調(diào)查數(shù)據(jù),構(gòu)建在線課程評(píng)價(jià)指標(biāo)體系,采用層次分析法(AHP)計(jì)算在線課程建設(shè)評(píng)價(jià)指標(biāo)體系指標(biāo)權(quán)重值和綜合評(píng)價(jià)值。

3研究發(fā)現(xiàn)

3.1在線課程評(píng)價(jià)研究特征與趨勢(shì)分析

2021年1月23日,在中國(guó)學(xué)術(shù)期刊網(wǎng)絡(luò)出版總庫(kù)(CNKI)以主題“在線課程”AND主題“評(píng)價(jià)”的限定條件進(jìn)行數(shù)據(jù)高級(jí)檢索,檢索起止時(shí)間范圍限定為2003年1月到2021年1月,來(lái)源類別為CSSCI、CSCD、核心期刊。對(duì)檢索到的文獻(xiàn)進(jìn)一步進(jìn)行篩選整理,剔除無(wú)關(guān)鍵詞文獻(xiàn),一共獲得183篇期刊論文和33篇碩博論文作為本文分析的樣本。利用CiteSpace5.7.R1的關(guān)鍵詞共現(xiàn)/聚類分析等功能,運(yùn)用文獻(xiàn)計(jì)量、文獻(xiàn)統(tǒng)計(jì)分析對(duì)樣本進(jìn)行可視化分析,宏觀把握研究態(tài)勢(shì)。

3.2在線課程評(píng)價(jià)要素篩選

首先,課題組從183篇核心論文和33篇碩博士論文中提取在線課程評(píng)價(jià)體系的所有評(píng)價(jià)要素進(jìn)行匯總,將匯總的指標(biāo)要素中涉及教育主管部門和授課者角度的評(píng)價(jià)指標(biāo)相關(guān)內(nèi)容剔除,確定指標(biāo)的初選范圍。按照在線課程使用者高職學(xué)生視角進(jìn)行分類形成語(yǔ)料庫(kù)。碩博論文在線課程評(píng)價(jià)體系指標(biāo)要素匯集了1032條,高職在線課程質(zhì)量評(píng)價(jià)體系指標(biāo)要素匯集了679條。其次,運(yùn)用Excel數(shù)據(jù)排序和分類功能,將文獻(xiàn)中搜集到的所有與在線課程相關(guān)評(píng)價(jià)要素分別進(jìn)行篩選。通過(guò)數(shù)據(jù)篩選功能對(duì)所有要素進(jìn)行降序排列之后,運(yùn)用“數(shù)據(jù)”中“分類匯總”命令自動(dòng)分級(jí)顯示列表,并計(jì)算同一要素出現(xiàn)頻次總數(shù)。最后,結(jié)合當(dāng)前在線課程開(kāi)設(shè)資源和學(xué)生學(xué)習(xí)情況,課題組根據(jù)山東省高職院校開(kāi)設(shè)在線課程情況調(diào)查結(jié)果,參照教育部2018年發(fā)布的《精品在線開(kāi)放課程評(píng)價(jià)指標(biāo)體系》以及《山東省高等學(xué)校在線開(kāi)放課程建設(shè)實(shí)施方案》(魯教高字〔2017〕11號(hào)),結(jié)合文獻(xiàn)研究結(jié)果,依據(jù)高職在線課程評(píng)價(jià)的概念、指標(biāo)選取原則和范圍,經(jīng)過(guò)反復(fù)的邏輯思辨,對(duì)評(píng)價(jià)體系指標(biāo)進(jìn)行經(jīng)驗(yàn)選擇/篩選,剔除重復(fù)的指標(biāo)。

3.3評(píng)價(jià)體系的初步構(gòu)建

遵循主客觀相結(jié)合、宏微觀相結(jié)合、簡(jiǎn)便易行和分類差別化的原則,將選取的評(píng)價(jià)指標(biāo)及分層情況以信函形式發(fā)送給專家,經(jīng)過(guò)幾輪征詢,使小組專家的意見(jiàn)趨于一致,初步設(shè)計(jì)了基于學(xué)生體驗(yàn)的高職在線課程評(píng)價(jià)指標(biāo)體系,包含1個(gè)目標(biāo)層指標(biāo),5個(gè)系統(tǒng)層指標(biāo),19個(gè)要素層指標(biāo),96個(gè)指標(biāo)層要素。

3.4對(duì)評(píng)價(jià)指標(biāo)框架的進(jìn)一步修改

為了使評(píng)價(jià)指標(biāo)體系更加科學(xué)和有效,本研究采用專家意見(jiàn)法對(duì)各評(píng)價(jià)指標(biāo)篩選和修改。根據(jù)初步制定好的評(píng)價(jià)指標(biāo)體系,生成專家調(diào)查咨詢表,向邀請(qǐng)的專家寄送,請(qǐng)他們獨(dú)自填寫(xiě)后再匿名寄回。通過(guò)專家意見(jiàn)的幾輪征詢,直至專家意見(jiàn)基本趨于一致為止,最終獲得具有高準(zhǔn)確率的集體判斷結(jié)果。大致的流程為:匿名征求專家意見(jiàn)、統(tǒng)計(jì)、歸納,再匿名反饋給各專家,再征求意見(jiàn),整理、再反饋,若干輪后停止。通過(guò)對(duì)專家咨詢及指標(biāo)修改意見(jiàn)進(jìn)行處理總結(jié)歸納,最終發(fā)現(xiàn)評(píng)價(jià)指標(biāo)體系還存在以下幾個(gè)問(wèn)題:(1)指標(biāo)描述的規(guī)范性及全面性還有待于提高,專家指出,有些指標(biāo)描述的角度并沒(méi)有從學(xué)生的視角出發(fā),所確定的評(píng)價(jià)指標(biāo)體系的落腳點(diǎn)應(yīng)在學(xué)生體驗(yàn)角度上。(2)指標(biāo)先后順序不合理,三級(jí)要素層指標(biāo)和四級(jí)指標(biāo)層指標(biāo)在層內(nèi)的順序缺少邏輯性,沒(méi)有凸顯先后順序。(3)四級(jí)指標(biāo)缺失內(nèi)容需要補(bǔ)充。

3.5評(píng)價(jià)指標(biāo)選取及結(jié)構(gòu)層次確定,評(píng)價(jià)體系的初步構(gòu)建

3.5.1確定核心指標(biāo)要素。在遵循主客觀相結(jié)合、宏微觀相結(jié)合、簡(jiǎn)便易行和分類差別化的原則上,聽(tīng)取專家意見(jiàn),最終形成初步的125條在線課程評(píng)價(jià)指標(biāo)。3.5.2構(gòu)建判斷矩陣。本研究采用層次分析法(AHP)確定指標(biāo)權(quán)重。層次分析法是將決策問(wèn)題按總目標(biāo)、各層子目標(biāo)及評(píng)價(jià)準(zhǔn)則分解為不同的層次結(jié)構(gòu),然后用求解判斷矩陣特征向量的辦法,求得每一層次的各元素對(duì)上一層次某元素的所占比例最大值,最后再加權(quán)和的方法遞階歸并各備擇方案對(duì)總目標(biāo)的最終權(quán)重,此最終權(quán)重最大者為最優(yōu)方案。3.5.3專家權(quán)重賦值。將24位專家(8位教師和16名學(xué)生)填寫(xiě)的層次分析調(diào)查問(wèn)卷進(jìn)行匯總,去掉最低分和最高分取平均值,小數(shù)點(diǎn)后保留兩位。3.5.4層次分析。、權(quán)重和一致性檢驗(yàn)運(yùn)用統(tǒng)計(jì)軟件SPSSAU計(jì)算判斷矩陣的最大特征根,并進(jìn)行一致性檢驗(yàn)并確定相應(yīng)的指標(biāo)權(quán)重。3.5.5體系建構(gòu)完成及修正。統(tǒng)計(jì)結(jié)果表明,各判斷矩陣均通過(guò)一致性檢驗(yàn),根據(jù)統(tǒng)計(jì)所得各級(jí)評(píng)價(jià)指標(biāo)權(quán)重,建立基于學(xué)生體驗(yàn)的高職在線課程評(píng)價(jià)指標(biāo)體系。基于學(xué)生體驗(yàn)的在線課程評(píng)價(jià)指標(biāo)體系構(gòu)建完成后,研究團(tuán)隊(duì)將根據(jù)評(píng)價(jià)指標(biāo)體系,面向山東省高職院校在線課程學(xué)習(xí)的學(xué)生編制量表,進(jìn)行調(diào)研,根據(jù)他們的反饋結(jié)果,對(duì)量表進(jìn)行了修改,發(fā)布到問(wèn)卷網(wǎng),請(qǐng)部分在線學(xué)習(xí)的學(xué)生根據(jù)量表要求給各評(píng)價(jià)維度打分。搜集了一定數(shù)量的樣本之后,對(duì)本次試填寫(xiě)的量表的信度和效度進(jìn)行了檢驗(yàn)。

4研究預(yù)期

本研究所得出的基于使用者學(xué)生體驗(yàn)的高職在線課程評(píng)價(jià)指標(biāo)體系預(yù)期用于豐富和完善在線課程建設(shè)理論。進(jìn)一步豐富和完善教育主管部門原有的評(píng)價(jià)指標(biāo)體系,并進(jìn)一步制定相應(yīng)政策,更好地指導(dǎo)高職教育教學(xué)改革。也能夠指導(dǎo)高職在線課程建設(shè)者可以根據(jù)使用者的學(xué)能、特點(diǎn)、學(xué)習(xí)目標(biāo)和職業(yè)教育的特點(diǎn)與目的,不斷修正和完善已建設(shè)的在線課程。使高職在線課程能被更多的高職學(xué)生有效利用,提高課程資源的使用率,為高職學(xué)生選擇合適的在線課程提供充分指導(dǎo)。

參考文獻(xiàn)

[1]童小素,賈小軍,宣軍英.基于德?tīng)柗品ǖ奈⒄n程評(píng)價(jià)指標(biāo)的設(shè)計(jì)[J].中國(guó)教育信息化,2016,(24):40-46.

[2]唐曉君,路瑩,劉娜,等.基于德?tīng)柗品椒ǖ脑诰€開(kāi)放課程質(zhì)量評(píng)價(jià)系統(tǒng)研究與實(shí)現(xiàn)[J].中國(guó)教育信息化,2018,(07):93-96.

[3]金賢.開(kāi)放在線課程教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系研究[J].江蘇科技信息,2019,(04):56-74.

[4]潘曉彥,蔣家瓊,莫蘭,等.美國(guó)“QM質(zhì)量標(biāo)準(zhǔn)”與我國(guó)“精品在線開(kāi)放課程”評(píng)價(jià)指標(biāo)體系比較研究[J].湖南師范大學(xué)教育科學(xué)學(xué)報(bào),2019,(05):105-110.

[5]陳然,張曉,唐榮.我國(guó)開(kāi)放大學(xué)在線課程質(zhì)量評(píng)價(jià)研究[J].成人教育,2020,(02):27-32.

[6]陳春芳.應(yīng)用型本科院校在線課程質(zhì)量評(píng)價(jià)指標(biāo)構(gòu)建研究[J].吉林工程技術(shù)師范學(xué)院學(xué)報(bào),2020,(03):40-43.

作者:樊宇 單位:山東經(jīng)貿(mào)職業(yè)學(xué)院