第二單元 員工培訓的有效性評估
【學習目標】
通過學習,了解培訓有效性評估的含義、作用和內容;掌握培訓效果評估的一般程序,培訓有效性評估的方法和技術,培訓效果評估方案的設計,培訓評估效果信息的收集,培訓效果的跟蹤與監(jiān)控,以及培訓效果評估實施的程序和方法。
【知識要求】
一、培訓有效性評估的含義和作用
(一)培訓有效性評估的含義
培訓有效性指的是培訓為什么發(fā)揮作用及培訓實現(xiàn)其目標的程度。對組織而言,培訓有效性意味著組織利潤的增加、成本的下降、市場占有率的擴大;對個人而言,培訓有效性指的是專業(yè)素質的提升、知識的增長和技能的提高。而對培訓有效性的評估是指系統(tǒng)地收集必要的描述性和判斷性信息,以幫助作出選擇、使用和修改培訓項目的決策。
培訓有效性評估應該始于培訓目標。根據培訓目標,可以確定預期的培訓結果,為了衡量預期的培訓結果,就需要建立培訓有效性的評估指標。
培訓評估是一個完整的培訓流程的后環(huán)節(jié),既是對整個培訓活動實施成效的評價與總結,同時評估結果又為以后培訓活動的培訓需求提供了重要信息。在管理實踐中,不少管理者在信念上認識到培訓具有一定的價值,但是卻不認為培訓會帶來組織的績效的提高,或者認為培訓后的效果無法進行相應的正確評估,因此,培訓通常被認為是一種耗費金錢卻無法感知效果的活動。要讓人們認識到培訓的重要性,就要正確地在企業(yè)內部進行培訓有效性的評估。
(二)培訓有效性評估的作用
1.從企業(yè)培訓的一般角度看培訓評估。隨著培訓費用的不斷增加,人們更加關注巨大的預算對組織的貢獻是什么,此時培訓評估更顯重要。培訓評估可以對當年的培訓效果進行一個反饋,它是衡量企業(yè)培訓效果的重要手段。而培訓活動的有效性對增強企業(yè)的競爭力,實現(xiàn)企業(yè)的戰(zhàn)略目標都有重要意義。培訓評估的作用主要體現(xiàn)在以下幾個方面。
(1)對培訓效果進行正確合理的判斷,以便了解某一項目是否達到原定的目標和要求。
(2)考察受訓人知識技術能力的提高或行為表現(xiàn)的改變是否直接來自培訓本身。
(3)找出培訓的不足,歸納出教訓,以便改進今后的培訓。
(4)發(fā)現(xiàn)新的培訓需要,從而為下一輪的培訓提供重要依據。而且通過對成功的培訓作出的肯定性評價,也往往能提高受訓者對培訓活動的興趣,激發(fā)他們參加培訓活動的積極性和創(chuàng)造性。
(5)檢查出培訓的費用效益。評估培訓活動的支出與收入的效益如何,有助于使資金得到更加合理的配置。
(6)客觀地評價培訓者的工作。一般來說,培訓的效果反映了培訓者的水平和對待培訓的態(tài)度。對培訓效果的檢測評估,有助于培訓人員進行自我檢查,進一步端正態(tài)度,從而不斷提高培訓的質量。同時也可以正確地對培訓者進行績效評估。
(7)為管理者決策提供所需的信息。管理者(主要是)對培訓結果的重視,往往也會引起企業(yè)其他人員對培訓結果的重視,從而促進了對培訓的積極性。
2.從企業(yè)的戰(zhàn)略角度看培訓有效性評估。僅從培訓活動本身出發(fā)的評估,從表面上看是因為培訓工作的各方的利益可以進行協(xié)調,而從全局看是沒有將公司戰(zhàn)略落實到培訓之中。當公司把培訓作為實現(xiàn)公司目標和員工目標的戰(zhàn)略工具時,培訓和目標之間的聯(lián)系似乎很明顯,但在日常實施培訓計劃時,聯(lián)系經常中斷。這時,培訓成為一種活動而非一項戰(zhàn)略。把培訓作為一種活動和把培訓作為一項戰(zhàn)略是有很大區(qū)別的。用作戰(zhàn)略的培訓要有細致的目標定位、可選方案的系統(tǒng)評價、成效的嚴格評價等,它是一種分析方法。
培訓目標與組織戰(zhàn)略目標之間的關系應該是對組織戰(zhàn)略管理形成過程的理解以及與人力資源活動的良好配合,避免在培訓流程中出現(xiàn)不支持、不合作的組織管理者之間的群體行為,避免影響到培訓利益的合理分配以及培訓目標的實現(xiàn)程度。所以,一個置于企業(yè)戰(zhàn)略角度下的有效培訓應該是不僅要知道對培訓人員有多少好處,還要了解能為組織及其成員帶來什么好處和多少好處。
從企業(yè)戰(zhàn)略角度看培訓有效性評估,就是要用更高的、統(tǒng)一的、具有戰(zhàn)略意義的培訓目標來對培訓有效性評估進行指導,同時也是對組織和部門行為進行約束和激勵,此時的培訓目標已經成為組織目標的一部分,而不再僅是培訓部門的部門目標。只有這樣才能驅使組織、部門共建和共享培訓利益而不是割裂爭奪培訓利益,此時應該是站在同組織戰(zhàn)略相互聯(lián)結和整合的、系統(tǒng)的、持續(xù)改進的過程的角度進行評估。同時由于培訓投資環(huán)境中存在諸多不確定和不可控因素,企業(yè)獲得培訓投資收益的遲滯性和間接性,以及培訓投資在數量、內容和結構上的模糊性,容易使得在進行有效性評估時陷入進退維谷的境地。只有在企業(yè)戰(zhàn)略角度下,才能使內部不同的成員看到目標的一致性,才能共享資源和信息,才能夠克服在進行培訓有效性評估中的障礙。
二、培訓有效性評估的內容
(一)培訓的有效性內容培訓成果是培訓有效性評估的主要內容。培訓成果包含五種類型:認知成果、技能成果、情感成果、效果性成果和投資凈收益,培訓評估要始終圍繞這五個部分開展。
1.認知成果。認知成果被用來判斷受訓者對于培訓項目所強調的原則、事實、技術、程序和流程的熟悉程度。它可以衡量受訓者在培訓項目中學到了哪些知識。
2.技能成果。技能成果包括技能的獲得或學習與技能的應用(技能轉化)兩個方面的內容。它用來評估受訓者的技術和運動技能水平及其行為。
3.情感成果。情感成果包括受訓者的態(tài)度和動機兩個方面的內容。情感成果的一種類型是受訓者對培訓項目的反應,其他一些類型還包括對多元化的容忍度、學習的動機、對安全的態(tài)度以及在客戶服務中的定向。
4.效果性成果。效果性成果用來判斷培訓項目給企業(yè)帶來的回報。
5.投資凈收益。投資凈收益是指對培訓所產生的貨幣收益與培訓成本進行比較之后,企業(yè)從培訓項目中所獲得的價值。
(二)培訓的有效性信息類型分析培訓的有效性信息類型是確定培訓效果信息的前提條件,不了解培訓效果信息的種類或培訓效果信息的集存點,就無法全面、準確地收集信息,自然也就導致終分析的偏差。
1.培訓的及時性。培訓及時性信息是指培訓的實施與需求在時間上是否相對應。培訓的實施必須有前瞻性,不能何時需要何時再培訓,應當在崗位工作需要前就做好培訓,以適應新工作的需要。同時,培訓也不能太提前,這樣有可能在工作需要時再進行補充培訓或強化培訓,否則會因為受訓人忘記培訓內容而失去或者削弱培訓作用,使培訓效果大打折扣。
2.培訓目標設定的合理性。培訓目標來源于培訓需求分析。在設定培訓目標時,是否真正全面、細致地對培訓需求進行研究,也就是說培訓目標設定是否能真正滿足培訓需求。這包括有形的需求和無形的需求、長期需求和短期需求。
3.培訓課程設置與培訓內容安排的適用性。培訓課程及其內容的設置是否合理適用,是達到培訓目的關鍵環(huán)節(jié),是保障培訓有效性的基礎。
4.培訓教材的選用與開發(fā)。教材選用與開發(fā)方面的信息是指所選用和開發(fā)的教材是否符合培訓的需求,運用這些教材進行培訓能否達到培訓目的。它的深度及細致程度是否能被受訓人員接受,會不會過于簡單或者過于煩瑣,而導致受培訓人員收獲不大或難有收獲。
5.培訓教師的選派。教師選派方面的信息是指所選定的教師是否有能力做好這方面的培訓,是否了解受訓人員,是否有良好的教學水平,是否掌握受訓人員能接受的教學方法,是否能讓受訓人員全部或者部分地接受培訓內容。
6.培訓時間的安排。培訓時間安排包括三個方面的內容:一是培訓時機的選擇是否得當,二是具體培訓時間的確定,三是培訓時限的設定。這些因素影響受訓人員的培訓參與率及學員的學習情緒,也直接決定著培訓效果。
7.培訓場地的選定。培訓場地要根據培訓的具體內容而定,不同的培訓內容要選擇不同的培訓場所。理論或操作性不強的培訓可以選擇在教室進行,實際操作課程好選擇在操作現(xiàn)場或者能實施操作的地方進行。
8.受訓群體的選擇。受訓群體的選擇是指根據受訓人員在素質、知識水平、經驗上的不同,選擇相應的教材和適宜的授課方式。這主要從培訓效果和受訓人員的接受能力來考慮。
9.培訓形式的選擇。培訓形式選擇方面的信息,是指所選擇的培訓方式是否有助于受培訓人員接受培訓的內容,是否還有更好的方法。
10.培訓組織與管理狀況。培訓的組織與管理是對培訓活動順利開展的后勤保證,直接影響參訓人員對培訓活動安排的滿意度。
【能力要求】
一、培訓效果評估的一般程序評估是為了檢驗培訓管理體系的有效性,衡量培訓管理工作所取得的成績,找出培訓管理中存在的問題。所以,為了確保評估工作的順利開展和客觀公正,還必須規(guī)范評估的流程,科學地計算其經濟收益,做好評估后的反饋工作。
科學的評估程序是正確評估的基本保證,培訓管理體系的測評由四個步驟組成。
1.第一步:評估目標確定。主要內容包括確定培訓評估是否開展;進行培訓評估的可行性分析;確定培訓評估的項目;確定培訓評估的目標。
2.第二步:評估方案制訂。培訓評估方案一般包括培訓測評的價值分析,培訓評估的項目及目的,培訓評估的時間、地點和人員,培訓評估的方法、標準及步驟,培訓評估的分工與合作,培訓評估的報告撰寫與反饋等。
制訂培訓評估方案時,要征求培訓項目實施人員及外部培訓專家顧問的意見,確保培訓評估方案的科學性和可操作性。
3.第三步:評估方案實施。包括培訓信息的收集和整理分析。不同的培訓評估信息收集的渠道和收集的方法有所不同。常用的收集方法主要有原始資料收集法、觀察活動收集法、訪談活動收集法和調查問卷收集法。由于培訓評估需要的信息來自不同的渠道,信息的形式也各不相同。因此,有必要對收集到的信息進行分類,并根據不同的培訓評估內容的需要進行信息歸檔,通過表格及圖形將信息所表現(xiàn)的趨勢和分布狀況予以形象的處理。
4.第四步:評估工作總結。對培訓效果評估工作的整體進展情況進行總結和評價,指出評估方案實施過程中的收獲和不足,為下開展評估活動提出建議。對培訓項目的實施效果撰寫培訓評估報告。撰寫培訓評估報告是整個評估的后工作環(huán)節(jié),同時也是影響評估結果的重要一環(huán)。因此,撰寫評估報告時要在充分的信息收集的基礎上,征求多方面意見和觀點,提高培訓結果測評的價值。
二、培訓有效性評估的方法
在制訂培訓規(guī)劃時,應該對本次培訓實施中所采用的評估手段進行挑選,包括如何考核培訓的成敗,如何進行中間效果的評估,如何評估培訓結束時受訓者的學習效果,如何考察在工作中的運用情況等,需要注意的是選擇合適的方法并且實施培訓效果評估。
培訓評估的方法一般有觀察法、問卷調查法、測試法、情境模擬測試、績效考核法、360度考核、前后對照法、時間序列法和收益評價法等。
1.觀察法。一般由培訓管理者擔任觀察者。按照事先擬定的提綱對觀察對象實施觀察。
2.問卷調查法。是評估中常用到的方法,問卷設計要根據使用的范圍和時機加以調整,好是開放式問題和封閉式問題相結合。
3.測試法。主要用于對知識性和技能型內容的測試。
4.情境模擬測試。包括角色扮演和公文筐測試等多種方法,通過在接近實際工作環(huán)境的情境下進行測試而了解受訓者的真實水平。
5.績效考核法。收集受訓者的績效資料,對其在受訓前后的一段時間內績效的變化進行考察。
6.360度考核。通過被考核人的上級、同級、下級和服務的客戶對他進行評價,從而使被考核人知曉各方面的意見,清楚自己的所長所短,以達到提高自身能力的目的。
7.前后對照法。選取兩個條件相似的小組,在培訓前,對兩個小組進行測驗,分別得到兩組成績。一個小組施加培訓,一個小組不進行培訓,在培訓結束后,再對兩個小組進行測驗,比較每個小組的測驗成績,看培訓是否對小組起作用。
8.時間序列法。在培訓后定期作幾次測量,通過數據對比分析以準確分析培訓效果的轉移程度。
9.收益評價法。從經濟角度綜合評價培訓項目的好壞,計算出培訓為企業(yè)帶來的經濟收益。
三、培訓有效性評估的技術
培訓效果評估根據評估方法、內容和形式的不同分為以下幾種。
(一)泰勒模式泰勒模式誕生于20世紀30年代,泰勒評估模式與現(xiàn)代學生評估的關系為密切。這一模式的基本觀點集中體現(xiàn)在所謂的“泰勒原理”中!疤├赵怼笔怯蓛蓚密切相關的基本原理組成的:一個是評價活動的原理,另一個是課程編制的原理。泰勒模式對培訓評估的理論指導在于:培訓評估的首要任務就是確定培訓是否達到培訓目標,其理論依據就是泰勒的目標評估模式。
泰勒模式的評價步驟如下。
1.確定教育方案的目標。
2.根據行為和內容對每個目標加以定義。
3.確定應用目標的情景。
4.確定應用目標情景的途徑。
5.設計取得記錄的途徑。
6.決定評定方式。
7.決定獲取代表性樣本的方法。
泰勒模式的特點是以目標為中心,結構緊密,具有計劃性。它從目標出發(fā)指導實施,以目標為依據,找出實際活動與目標的偏離,根據反饋信息修改目標,比較簡單易行。泰勒模式在教育評估理論中占有重要的地位,主要用于學生評估。其缺點,一是沒有對目標本身進行評估;二是注重預期效果的評估,忽略非預期目標的評估;三是重視結果評估,忽視過程評估,不能得到及時的反饋;四是目標的制定大多是教育者的意見,較少注意學生的意見。
(二)層次評估法層次評估法是國外企業(yè)培訓效果評估方法中發(fā)展為完善的一種評估方法,也是運用得為廣泛的一種評估方法,它的著重點在于通過把培訓效果分層次進行評估,層層遞進?驴伺撂乩锟怂募壴u估模式、菲利普斯五層評估模式、考夫曼五層評估模式等都屬于這種方法。
層次評估法的主要特點在于:①層次分明,對培訓效果的評估由易到難,循序漸進;②定性和定量分析方法相結合;③其中的多層次評估法把對培訓效果的評估逐步由對個人素質能力提高的評估轉移到整個組織績效提高的評估上來。
層次評估法的主要貢獻在于:①把培訓效果具體化、形象化,分為若干層次,使對培訓效果進行有效評估成為可能;②菲利普斯五層評估模式與Kenney和Re1d的五層評估模式在柯氏四級評估模式的基礎上不斷完善,使評估的層次更加全面,更具說服力。
層次評估法的不足之處在于:①評估體系中考慮的因素不夠全面,因素的確定帶有一定的主觀性;②數據的取得是根據單個人的描述取得的,但是每個人的理解又有不同,容易造成混亂;③不能把各個層次形成一個有機的整體。
1.柯克帕特里克四級評估模式?驴伺撂乩锟怂膶哟闻嘤栐u估模式是目前國內外運用得為廣泛的培訓評估方法,柯氏四級評估模式將評估活動分為四個級別,對培訓效果進行評估?驴伺撂乩锟藦脑u估的深度和難度角度將培訓效果分為四個遞進的層次——反應層面、學習層面、行為層面、結果層面,見表3一5。
(1)一級評估:反應評估。所謂反應評估,是指評估學員對課程的滿意程度。通常邀請學員填寫課后問卷以了解學員對課程的滿意程度,并將搜集的意見作為未來舉辦同樣課程之改善參考。問卷項目通常包括課程實用性、深淺難易度、時間長短、講師講授技巧等。
反應是評估的低級別,柯克帕特里克將反應定義為受訓者對培訓的感受和看法。包括:①對培訓者的滿意;②對培訓管理過程的滿意;③對測試過程的滿意;④培訓項目的效用;⑤對課程材料的滿意;⑥對課程結構的滿意。一般由學習者的直接反饋得到評估數據,通過培訓后的學員填寫評估調查表。
該層次的評估時間,通常是培訓當場或課程一結束就進行。評估內容包括組織安排、場地、講師、課程內容等。評估方式一般都是使用問卷調查的手法搜集滿意度,有時也會進行抽樣訪談。
(2)二級評估:學習評估。學習反映受訓者對培訓內容的掌握程度。它主要測定學員對培訓的知識、態(tài)度與技能方面的了解與吸收程度。學習評估結果表明了培訓的質量,在一定程度上表明培訓的實際效果,且可用來預測培訓的終效果。
根據課程類型不同,有以下幾種不同的評估方式。
、贂鏈y驗。用來了解學員對專業(yè)知識的理解程度。書面測驗常于課后一周內舉行,包括是非題、選擇題、填充題和實作,及格分數大多設定為70分。測驗的目的是為了讓學員能于課后溫習,以便對于根本而重要的觀念能牢記在心。
、谀M情境。即在課后設計一些工作中的模擬情境,以觀察學員是否能正確應用所學的相關知識與技巧。這種情境模擬評估方式,通常在管理技能訓練與顧客服務訓練課程中較常被用來評估學習成效。
、鄄僮鳒y驗。例如電腦操作訓練,應設計實作題,以便評估學員是否已會操作使用。
、軐W前、學后比較(pretest-posttest)。即在課前先自我測試對于授課內容的了解程度,然后在上完課后再做測試,課前、課后差異的比較,能看出學習的成果。這種比較法通常是在管理技能訓練中使用。
上述前三種學習評估方式,亦常被企業(yè)作為員工能力評估的方法。
本層次的評估時間,一般是在培訓現(xiàn)場或培訓結束之后。評估內容包括培訓課程中所涉及的知識、技能和態(tài)度。評估方式主要有課堂現(xiàn)場測試(提問、展示等)、筆試、對比測評、設定基準分的測評、能力測評、情境模擬等。
(3)三級評估:行為評估。反映受訓者將培訓所學運用到工作中并改變工作行為的程度,是學習在工作中的轉化。行為指標水平可以由內部人員測定,也可由外部人員測定。內部人員指受訓者的直接管理者,外部人員指人力資源專家和顧客。
本層次的評估時間,通常在培訓結束后3個月進行。評估內容包括測評其工作行為是否因培訓而有所改變。評估方法主要有問卷調查法(主要通過同事、上下級來收集數據)、面談法、觀察法(一般技術操作類培訓可以采用這種方式)、行動計劃法(這是在培訓追蹤中較多使用的一種方法,要求學員列出培訓后需改進的地方并形成計劃,定期按計劃保持追蹤)。
(4)四級評估:結果評估?率鲜褂媒Y果來描述培訓項目導致的組織目標的實現(xiàn),反映培訓的終結果。主要是測定學員對組織經營成果有何直接且正面具體的貢獻,并且還要確定這些變化是否是培訓的效果。例如,產量增加、效率的改進、不良率的減少、成本費用的減少、抱怨的減少、意外事故的降低以及離職率的降低等。
柯氏評估模式認為,對各種評估來說都有一個基本的學習分級,或叫作學習的層次、步驟。培訓之后的問題首先是受訓者的反應問題。如果這種反應效果很差,受訓者就不大可能會學到知識,因而工作表現(xiàn)的改進也就談不上了;如果反應良好,受訓者可能學到知識,也有可能沒有學到知識;如果他們確實學到了知識,接下來是能否將知識運用到工作中,并且確實提高了工作績效。但同時,個人績效的提高并不意味著整體績效的提高。
該層次的評估時間,一般是在培訓后半年或一年。評估內容主要是與該培訓內容直接相關的績效指標。評估方式主要采用培訓前后績效周期的績效結果對比。這是建立在行為評估基礎上的,只有行為的改變,才有可能將績效結果的改變與培訓掛鉤。
柯氏模型具有兩個鮮明的特點:一是評估是分級進行的,并且是按照一、二、三、四的級別進行的。級別越高,對培訓項目的評估就越深入。二是如果某個分級評估的思想被接受,那么前一級別的評估信息可以作為下一級別的基礎數據。
柯氏模型的優(yōu)勢在于,其簡單且實用的分級評估策略適用于不同培訓項目的不同層次的培訓評估要求。但是,它在效果評估級別上缺少有效衡量的價值體系。
柯氏模型是目前應用廣泛的評估模型,它簡單、全面、具體,從反應、學習、行為、結果四個層面上進行了論述,有很強的系統(tǒng)性和操作性。
實際上,這個模型確實能解釋有關培訓計劃的大多數資料,同時為以后評估模型的發(fā)展研究奠定了基礎。但是,柯氏四層次模型中的反應僅僅是從情感上進行評估的,而缺乏對培訓效用程度的深入分析。
2.菲利普斯五層評估模式。菲利普斯五級投資回報率模式,是在柯克帕特里克四級評估體系的基礎上增加了一個第五級評估,見表3—6。
投資回報率是一個較為寬泛的概念,可以包含培訓項目的全部效益,有多種定義和計算公式。這里將投資回報率看作將培訓項目的成本和效益進行比較后所得出的實際價值。適合用于對培訓項目進行評估的公式是采用培訓項目凈效益除以成本,即投資回報率=(項目凈效益/項目成本)×100%五級投資回報率模式也是一個分級評估的模式,它彌補了柯克帕特里克的四級評估不對培訓效益進行定量計算的不足,是目前比較常用的一種評估方法。但是由于對培訓進行定量分析時變量很多,又很難區(qū)分工作改進到底是由什么因素帶來的,因此具體的運用存在很大的困難。
3.柯氏改良法?率细牧挤ㄊ窃诳率纤膶哟卧u估法的基礎上,針對四層次評估法的不足而形成的一種培訓整體效果評估的模式。培訓是一個完整連續(xù)的過程,培訓效果的評估不應該只是作為一個提高組織績效的方法,它還是完整培訓過程重要的組成部分?率细牧挤ò阉膫層次連接成為一個有機的整體,把培訓效果評估看作是培訓的一個重要部分,沒有把評估和培訓分割開。這樣一來可以有效地把培訓計劃和培訓內容以及培訓評估結合起來,使培訓評估對培訓計劃具有導向作用,使培訓計劃更加適合員工以及企業(yè)的培訓需求。它的不足之處在于把四個層次有機聯(lián)系的同時容易造成層次的混亂,使各個層次本來的評估內容不夠明晰。
(三)目標導向模型法
目標導向模型(Object1ve-or1ented Tra1n1ng Eva1uat1on Mode1)是由Jackson根據英國曼徹斯特機場的執(zhí)行方案進行改進而提出的。它的精髓在于:①關注的是受訓者而非培訓者的動機;②評估受訓者個人素質能力的提高;③把培訓效果的測量和確定作為優(yōu)先考慮的因素;④培訓者和公司的其他人員是培訓的執(zhí)行者和評估者。
目標導向模型法的評估重點是受訓者個人能力和素質的提高程度,重視的是受訓者的培訓需求而不是公司或者培訓者的培訓需求。它的大貢獻在于它的彈性和適應性,它可以根據評估者的要求設計成定量和定性相結合的評估方式,可以把落腳點放在受訓者的能力或者行為等方面,并且適用各種類型的組織,包括一些私營性質的企業(yè)。
不足之處在于:該評估方法在時間上要求是一個完整的過程,比如從調查、會見記錄、數據收集等都必須包括在內,而且要求是顯著的可信性,特別是第采用這種評估方法的企業(yè)必須花費很長的時間和精力。
四、培訓效果評估方案的設計
培訓效果評估方案的設計是一個運用科學的理論、方法和程序,從培訓項目中收集數據,并將其與整個組織的需求和目標聯(lián)系起來,以確定培訓項目的優(yōu)勢、價值和質量的過程。培訓效果評估的開展必須要遵循科學的程序,否則得出的培訓評估結果很可能失去客觀性。一般包括以下五個基本步驟。
(一)明確培訓評估的目的
培訓評估主要解決三個問題:一是評估的可行性分析,通過收集的相關資料確定評估有無價值以及評估有無必要進行;二是明確評估的目的,這是一個決策者和培訓項目管理者向評估者表達評估意圖的過程;三是明確評估的操作者和參與者,評估操作者可分為外部評估操作者和內部評估操作者,決策者應當充分考慮其優(yōu)缺點進行選擇。另外,還要明確評估的參與者,評估過程并非只是評估者的事情,它涉及培訓對象、培訓的、培訓管理人員及外部參與者。
(二)培訓評估方案的制訂
在制訂評估方案中,核心的工作內容包括評估方法選擇、評估設計方案和評估策略選擇。在制訂評估方案時好能夠由培訓項目的實施人員、培訓管理人員、培訓評估人員和培訓評估應用人員共同進行,如有可能,好邀請外部培訓顧問參與,以保證評估方案的科學性和切實可行性。
(三)培訓評估信息的收集
培訓評估數據的收集主要是注意數據的有效性、可靠性、簡單易行性和經濟的特點。培訓評估數據收集有許多方法,常見的有通過資料收集、通過觀察收集、通過訪問收集、通過參與收集、通過培訓調查收集等。值得注意的是,在數據收集過程中,為了防止數據的錯漏,好重新設計一個數據收集計劃,對數據收集做好事前安排。
(四)培訓評估信息的整理與分析
數據收集完畢后,要對收集到的信息進行分類,并根據不同的培訓評估內容的需要進行歸檔,還要應用相應的統(tǒng)計方法進行整理分析。如利用一些直方圖、分布曲線等工具將信息所表現(xiàn)的趨勢和分布狀況予以形象的處理,對培訓效果作出科學的、客觀的量化分析;并在數據分析的基礎上,對培訓成效作出判斷和評價。
(五)撰寫培訓評估報告
撰寫培訓評估報告是整個培訓評估的后工作環(huán)節(jié),同時也是影響培訓評估結果的重要環(huán)節(jié)。培訓評估報告應當客觀、公正,要綜合所有評估意見和觀點,在后上報之前一定要召開評估小組成員會議,反復修改,以確保其真正發(fā)揮培訓評估對領導決策、培訓工作者工作改善的重要作用。
培訓評估報告一般包含培訓背景說明與培訓概況、培訓評估的過程說明、培訓評估信息的總結與分析、培訓評估結果與培訓目標的比較、關于培訓項目計劃調整的建議等內容。培訓評估報告在定稿和呈報上級之前,要盡量召集培訓評估項目小組、培訓項目的管理者和實施者、項目實施顧問、學員代表等相關人員共同參加評估會議,共同討論評估報告的真實性和合理性,以確保培訓評估的客觀公正,真正發(fā)揮評估對領導決策、培訓管理者及培訓師等工作改善方面的重要作用。
五、培訓評估效果信息的收集
(一)收集培訓效果信息的目的
所謂培訓效果的信息收集,是指企業(yè)在培訓活動開始后對整個培訓過程進行的總結和反饋。這種反饋的形式應該是多種的,而且涉及的方面是多樣的,這樣才可以避免因為片面之詞而影響對整個培訓的評估。要做到有效的評估,對整個培訓過程中的培訓信息收集是必不可少的。
完善的培訓效果信息收集體系,一方面驗證了培訓結果是否達到了企業(yè)及員工個人的培訓期望;另一方面也為將來的培訓需求分析、課程設計、實施與管理提供了有科學價值的反饋信息,為改進培訓系統(tǒng)與效果提供了可靠的依據。
(二)不同類型培訓效果信息的采集
培訓效果信息的類型對于評估培訓效果的優(yōu)劣是非常重要的。要保證評估的準確性,就必須多方面收集信息,不能單一地就某一類型或渠道進行信息收集。依據單一的信息類型或渠道就會片面地作出評估結果,使評估結果不準確,終導致整個培訓評估計劃的失效。
全面的信息采集是做好培訓評估的保證。
1.主觀信息的采集。在確定信息采集主體后,結合調查問卷等信息采集方式,正面采集個體對培訓的反饋。在培訓過程中貫穿非正式的信息調查采集,如小范圍的座談、餐歇時的交流和傾聽培訓主體之間小群體的交流等。非正式渠道的信息采集要以確認正式渠道所采集的信息準確度為目的,注意形式的多樣和氣氛的控制。
2.客觀信息的采集。客觀信息的采集包括一切可用數據衡量的信息,如員工知識水平的提升、操作水平的改變等。在正式采集信息的前后可進行多次非正式的測試或評分模擬,以確認在正式采集時信息的準確性,排除偶然因素的干擾。但不能忽視時間作用對正式采集信息結果的影響,應在不同時間間隔時期進行多重檢測,確定信息的穩(wěn)定性。
3.信息之間的對比分析。在正式采集各主體的信息后,應對同一問題的不同主體之間的信息進行對比分析,這也是非正式信息采集的一種方式。
例如,同一問題不同主體之間的信息偏差過大,則存在進一步確認的必要,找到分歧所在,是信息技術處理問題還是主體理解程度問題等,從而保證信息的準確性。
(三)培訓效果信息的收集
渠道信息的準確性是保證培訓評估結果準確性的基礎所在。多樣的信息采集方式、全面的信息采集渠道、客觀而合理的信息收集技術等方面能正常地發(fā)揮作用并有機地結合在一起時,才能真正確保信息的準確性。人們在不同時期和不同情境下會出于本能進行有利于自己的信息整合,通過多渠道的信息檢測和采集才能真正地把握主體所提供的信息,并排除一些偶然因素的干擾。因此,多渠道、全面的信息采集是必不可少的。只有在培訓效果的信息收集十分全面、數據十分完整的情況下,才能有效開展對培訓的評估。培訓效果信息的收集方法主要有以下四種。
1.通過資料收集。收集的資料來源可以是各種各樣的。上課的教程、受訓員工的總結報告、培訓師的課堂總結等這些資料可以是對課程文字性質的描述,也可以通過數理的統(tǒng)計辦法反映到直觀的數字上。收集的資料也可以是其他收集辦法的書面體現(xiàn),如運用問卷調查法得到的調查問卷。
通過資料,可收集以下信息:①培訓方案的資料;②有關培訓方案的領導批示;③有關培訓的錄音;④有關培訓的調查問卷原始資料和統(tǒng)計分析資料;⑤有關培訓的錄像資料;⑥有關培訓實施人員寫的會議紀要、現(xiàn)場記錄;⑦編寫的培訓教程等。
2.通過觀察收集。這個方法是通過對員工上課的表現(xiàn)、課下員工的反應來體現(xiàn)的。在上課的過程中。員工的狀態(tài)可以反映出課程對他們的吸引力;課下員工的反應可以體現(xiàn)員工對于課程的認識深度等問題。
通過觀察,可收集以下信息:①培訓組織準備工作情況;②培訓實施現(xiàn)場情況;③培訓對象參加情況;④培訓對象反應情況;⑤觀察培訓后一段時間內培訓對象的變化。
3.通過訪問收集。訪問收集是一種成本較低也便于實現(xiàn)的方法,可以通過受訓員工的上級來實現(xiàn)。在課程結束后,上級應當了解員工對于此次培訓的看法及收益,還可以通過觀察員工培訓前后工作的變化來及時與受訓人員聯(lián)系和溝通。在上級主管日常的工作中就可以完成這項工作。在某種意義上,這種方法是與觀察法相結合進行的。
通過訪問,可收集以下信息:①培訓對象;②培訓實施者;③培訓組織者;④培訓學員領導和下屬。
4.通過調查收集。這種方法十分普遍,也比較容易得到結果。在培訓后及時填寫一份調查問卷,可以保證調查結果的時效性,而且便于收集。但在使用這種方法的時候要注意避免主觀因素的影響。調查對象不應只是員工或培訓師,而是對受訓員工、培訓師、上級領導甚至是未能參加培訓的員工的全面調查。只有客觀的調查結果才是后期統(tǒng)計和效果評估的客觀依據。由此可見,多種多樣的收集辦法是對后續(xù)工作客觀性和真實性的有力保障。
通過調查,可收集以下信息:①培訓需求調查;②培訓組織調查;③培訓內容及形式調查;④培訓師調查;⑤培訓效果綜合調查。
(四)培訓評估信息的處理
不同的培訓評估信息收集的渠道和收集的方法是有所不同的。例如,培訓計劃評估與培訓終效果效益評估的信息收集渠道和收集方法就有所不同,前者的信息收集渠道主要是培訓計劃制訂的參與者,收集方法是與參與制訂培訓計劃的相關人員進行溝通面談,并爭取得到與培訓計劃相關的所有資料和培訓計劃本身,而后者的信息收集渠道和信息收集方法則涉及的更加廣泛。
培訓評估需要的信息來自于不同的渠道,信息形式有所不同,因此有必要對收集到的信息進行分類。并根據不同的培訓評估內容的需要進行信息歸檔,同時要制作專用表格對信息進行統(tǒng)計,并利用直方圖、分布曲線等工具.以生動的圖像顯示出各種統(tǒng)計指標的變化趨勢和分布狀況。
(五)信息收集過程中的溝通技巧
收集信息的訪談過程是一個耗費時間的過程,如果時間短暫,設計、準備不充分則會導致不能全面、深入地了解被訪談者對于主題的看法,致使訪談達不到預期的效果。在效果信息訪談中,匆忙地進行訪談,除了達不到目的之外,還很可能使被訪談者感到自己不受重視,自己的意見沒有得到充分的尊重,對于訪談的積極性降低。久而久之,被訪談者勢必會對訪談產生抵觸心理,敷衍了事。因此,在訪談前做好充足的準備,包括了解被訪淡者相關信息、設計訪談方案、合理安排時間和地點等,絕對不打“無準備之戰(zhàn)”。
一般來說,可根據訪談對象的實際情況,進行有針對性的訪談。
1.培訓結束回到工作崗位后的訪談。
首先,培訓結束后一段時期,需要通過調查參訓者的工作效益來評定培訓成效。如培訓后每隔6個月,以實地訪問的方式了解受訓者受訓后在工作上的獲益情況。
其次,受訓員工回到工作崗位一段時間后,訪問受訓者主管或下屬,了解他們對受訓員工工作表現(xiàn)的看法,如人事主管人員是否認為受過培訓的員工的工作有進步,根據所得意見來評定培訓的成效。無論是主管還是下屬的意見,均為評定受訓者培訓成效的重要依據。
后,根據受過培訓與未受培訓的員工工作效率的比較來評定培訓成效。
2.培訓結束時的個人訪談和集體會談。
首先,了解受訓者在接受培訓后的個人收獲,以及對培訓效果的滿意度等。
其次,了解員工關于培訓的改進建議。培訓結束時把調查表發(fā)給受訓員工,征求他們對培訓的意見,如員工確能提出有價值的改進建議或其他意見,則表示培訓已獲得應有的重視,并且受訓者具有更深的認識,可斷定培訓已有成效。
后,了解培訓期間出席人員的變動情況。在培訓期間,應隨時了解詢問培訓的進行情況及受訓人員對培訓教學效果的反應并收集相關信息,根據主持培訓及協(xié)助培訓的人員的總結報告等來評定培訓成效。
六、培訓效果的跟蹤與監(jiān)控
為了保證培訓取得預期的效果,就必須對培訓進行全程監(jiān)控和評估。對培訓進行全程監(jiān)控,可以保證培訓活動按照規(guī)劃進行,保證及時解決培訓過程中出現(xiàn)的問題,還能夠將各種影響培訓效果的因素記錄下來,以便在以后的培訓中加以改進和提高。
由于培訓監(jiān)控牽涉面廣、影響因素多,所以對培訓效果的跟蹤與反饋應從以下幾個方面進行。
(一)培訓前對預期培訓效果的分析對受訓者進行培訓前的狀況摸底,了解受訓者在與自己的實際工作高度相關的方面的知識、技能和能力水平,目的是為了與培訓后的狀況進行比較以測定培訓的效果。如果培訓的內容比較單一,摸底也沒有必要在很大的范圍內進行,只需在與培訓內容相關的方面進行即可。
(二)培訓中對培訓效果的監(jiān)控與評估
1.受訓者與培訓內容的相關性。培訓要取得預期的效果,就必須保證培訓內容與受訓者實際需求的合理銜接,即把培訓提供給那些真正需要這些培訓的人員。實際運作中的銜接方式有兩種:一是先定培訓內容,再根據培訓內容選擇受訓者,如財會培訓班;二是先定受訓者再定培訓內容,如經理培訓班。對前者就要審視受訓者的選擇是否合理,對后者就要根據培訓前的摸底情況審視培訓內容的設計是否恰當。
2.受訓者對培訓項目的認知程度。根據成人教育理論。只有當受訓者對培訓項目的內容有了充分的了解,他才可能對培訓產生興趣.具有參與培訓的積極性。因此,為了提高受訓者的參與意識,培訓的組織者就應該采取適當的措施,向受訓者宣傳此次培訓活動的目的、內容、進程和方式方法,讓受訓者相應調整自己的態(tài)度和行為。此時要監(jiān)測受訓者對培訓的參與熱情和持久性,在培訓過程中的出勤率和教學合作態(tài)度等諸多方面的表現(xiàn)。
3.培訓內容。監(jiān)控的目的是及時發(fā)現(xiàn)實際提供的培訓內容與計劃的培訓內容之間的差異,保證實際提供的培訓與計劃高度一致。差異主要表現(xiàn)為內容缺失或不完整、培訓內容錯位或非標準化等。導致出現(xiàn)這種差異的原因可能是:培訓項目的管理機構或人員沒有嚴格按照計劃實施培訓;計劃中的培訓內容沒有得到受訓者的認同,從而在執(zhí)行中走了樣;不同項目之間的交叉或相互影響,從而對培訓內容作了調整;外部環(huán)境的干擾。一般情況下,應該保證培訓按照計劃進行,除非有充分的理由證明調整和改變的必要性。
4.培訓進度和中間效果。監(jiān)控培訓進度能夠保證培訓項目在時間進度和資源投入進度方面與計劃保持一致。監(jiān)控中間效果能夠評估受訓者在不同培訓階段的提高和進步幅度。及時發(fā)現(xiàn)受訓者取得的進步以及與計劃預期的差距并采取補救措施。如果只是在培訓結束后才來檢查,即使發(fā)現(xiàn)問題也為時已晚。這種監(jiān)控在大型培訓項目中,特別是那些連續(xù)性很強的培訓項目中非常重要。
5.培訓環(huán)境。根據學習轉換理論,規(guī)劃時一般都會使培訓的實施環(huán)境與受訓者的工作環(huán)境盡量相似,以保證培訓效果得到大的轉換,因此,在具體培訓實施過程中,就需要及時分析受訓者的實際工作環(huán)境的變化,調整培訓的實施環(huán)境,以保證培訓適應新環(huán)境下的新需求。
6.培訓機構和培訓人員。包括培訓的管理人員和培訓教師。培訓的管理人員和培訓教師都是培訓的具體執(zhí)行者,培訓終效果的好壞與他們的工作密切相關。評估的內容主要是他們的行為表現(xiàn),如管理人員的工作積極性、合作精神、領導能力和溝通能力,教師的教學經驗、能力、方法等。評估主要是為了保證培訓機構和培訓人員有能力做好培訓,使其滿足真正的需要。
(三)培訓后的效果評估
在培訓結束后評估培訓究竟發(fā)揮了多大效果.培訓使企業(yè)和受訓者的行為發(fā)生了多大程度的改變。效果評估是培訓評估的重點,主要包含以下幾個層次。
1.評估受訓者究竟學習或掌握了哪些東西?梢砸钥季硇问交驅嵉夭僮鱽頊y試。這時就需要把測試結果與培訓前對受訓者的摸底情況進行對比分析。
2.評估受訓者的工作行為有了多大程度的改變。即受訓者把在培訓中學到的知識技能是否有效地運用到工作中去。如果受訓者在培訓中學到的知識技能未能有效地運用到工作中去,培訓也就沒有發(fā)揮作用。
3.評估企業(yè)的經營績效有了多大程度的改進。如果一項培訓達到了改進受訓者工作行為的目的,那么這種改進是否有助于提高企業(yè)的經營業(yè)績呢?提高企業(yè)的經營業(yè)績是企業(yè)投資培訓的真正目的。
(四)培訓后的管理效率
評估培訓需要高層領導的大力支持,而取得高層領導支持的有效的方式就是提供一份詳細的培訓項目評估報告,讓他們知道自己的投資得到了什么樣的回報。只有當他們獲知培訓收益后,他們才會給予有力的行政支持和資金保證。效率評估除了向高層管理人員匯報外,也是對培訓部工作的一個很好的總結,有助于提高培訓效率。通過效率評估,可以與以前的培訓效率進行縱向對比,與不同企業(yè)之間的培訓效率進行橫向對比,與企業(yè)實際達到的效率和應該達到的效率進行基準對比,從而找出差距和改進措施,進一步提高培訓質量。
七、培訓效果評估的實施
(一)培訓效果綜合評估要求
通過一個有效的測評,可以對培訓效果進行正確合理的判斷,以便了解某一項目是否達到原定的目標和要求,判斷受訓者知識、技能的提高或行為表現(xiàn)的改變是否直接來自培訓的本身,可以找出培訓的不足,歸納、總結出教訓,以便改進今后的培訓,通過評估能發(fā)現(xiàn)新的培訓需求,從而為下一輪的培訓提供重要依據。同時還能培養(yǎng)受訓者對培訓活動的興趣,提高他們參加培訓活動的積極性和創(chuàng)造性。通過評估可以較客觀地評價培訓者的工作,培訓的效果反映了培訓者的水平和對待培訓的態(tài)度。也可以正確地對培訓者進行績效評估,會引起企業(yè)其他人員對培訓結果的重視,從而激發(fā)了對培訓積極投入的熱情。
通過對培訓效果的綜合評估,可以給出整個培訓工作開展的尺度。其恰當與否,對某一培訓活動的成敗乃至整個培訓工作都有極大的影響。由于測評目的和測評時間不同,測評的標準和辦法也會有相應的變化,但必須以培訓目標為基礎,與培訓計劃相匹配,可操作性強,并在一定時期保持穩(wěn)定。
培訓有效性的要求至少應包括以下幾個方面。
1.明確評估目的。評估是為了檢驗培訓方案的有效性,一般需要測評以下幾個問題。
(1)培訓目標定得合理嗎?
(2)培訓是否達到了預期目標?
(3)哪些目標沒有達到?需要采取什么樣的補救措施?
2.確定評估項目及評估內容。對培訓效果的評估可以概括為以下四個方面。
(1)受訓者對培訓計劃的滿意度。例如,受訓者是否喜歡這次培訓,他們是否認為培訓師很出色,是否認為這次培訓對自己很有幫助,認為這次培訓有哪些地方需要改進等。
(2)受訓者的知識收獲。判斷他們與未受訓者相比,受訓后是否掌握了較多的知識,學到了預期應學到的原理、技能。
(3)受訓者個人工作績效的改善?梢酝ㄟ^上級、下級、同事、客戶等相關人員對受訓者的業(yè)績進行評估測定,主要測定受訓者在受訓后工作行為是否有改善,是否運用了培訓中的知識、技能,是否在交往中態(tài)度更加友善。例如,商店投訴部門的雇員對待投訴顧客的態(tài)度是否有所轉變等。
(4)受訓者對組織績效的貢獻?梢酝ㄟ^事故率、產品合格率、產量、銷售量、成本、利潤等指標以及顧客抱怨投訴的數目文件等,借以確定培訓結果是否已經對組織績效產生了有利的影響。
3.培訓評估方式的設計。好的設計一般有以下三種方式。
(1)前測試:表明受訓者的知識、技能或績效的培訓前水平。
(2)后測試:表明受訓者的知識、技能或績效的培訓后水平。
(3)控制群體:控制群體中除了人員沒有經過該培訓以外,構成上與經過培訓的群體是完全相同的。
在設計培訓工作和考慮評估細節(jié)時應注意以下兩點:一是把盡可能多的評估放到培訓過程中去進行,這樣可適當降低事后評估重要性(對回到崗位后的學員進行跟蹤調查除外)。在培訓過程中進行幾次業(yè)績測評常能取得滿意的結果,這比培訓結束后對學員進行考試要省時得多。二是在決定實施培訓時就確定評估方法,這樣培訓結束后就能較快地完成評估工作。
(二)培訓效果的評估工具
1.問卷評估法。一份優(yōu)秀的問卷通常具備以下特點:以工作目標為基礎;與培訓目標緊密相連;與受訓者的培訓內容有關;關注培訓中的主要因素,如培訓師、培訓場地、培訓教材等和培訓主要環(huán)節(jié);評價結果容易數量化;能鼓勵受訓者真實反映結果。
評價問卷沒有統(tǒng)一的格式,題目也不固定。評估人員可根據評估目的、評估要求和評估重點自行設計。
2.360度評估。360度評估的核心特征:一是全方位、多角度,評估者由上級、同事、下級、客戶以及被評估者本人共同構成;二是可以動態(tài)地檢查發(fā)展效果;三是重視信息反饋和雙向交流的理念;四是減少誤差,實事求是。360度評估的理論基礎是真分數理論,目的就是為了追求“真分”,追求小的誤差,追求實事求是。
在培訓前使用360度評估工具,可以評估工作者的行為勝任素質,確定行為素質上需要彌補和提升的方面,診斷發(fā)展需要,作出正確的培訓選員決策,有效降低培訓風險;在培訓后可以動態(tài)地檢查受訓者培訓,成果的轉化與應用狀況,以便后續(xù)及時調整發(fā)展目標及規(guī)劃,提升培訓管理工作的質量。
3.訪談法。采取訪談方式或者集體討論方式,通過面對面的交流分享、互相啟發(fā),往往能夠達到意想不到的效果?梢栽儐柕膯栴}有“本次培訓有什么收獲?”“培訓過程中有什么困難?”“現(xiàn)在工作有什么障礙?”“對今后可能的培訓有什么需求?”等。應以明確、細致的問題為主,不可以問太抽象的問題,這樣會使員工感到無所適從。具體包括以下程序。
(1)明確需要采集的信息。進行訪談前要有明確的目的。通過確定高目標,然后將其層層分解,利用思維導圖或其他方式確定要采集的信息,一定是關鍵且具有影響力的。其他的相關信息,或許與目標有一定程度的聯(lián)系,只要不是重要的信息,可以不進行采集。
(2)設計訪談方案。明確需要采集的信息之后,就可以根據這些信息的種類選擇適當的訪談方案。對于基本信息,可以采取問卷調查方式;對于開放式的問題,則好進行面對面的交流,這樣獲得的信息更準確、更有價值。面對面交流時,也要考慮被訪談者的反應情況,確定哪些問題是可以當眾詢問,哪些應該私下進行的。這時,公司應該盡量擴展溝通的渠道,增強訪談方案的可選擇性。
(3)測試訪談方案。確定訪談方案后,要盡可能地找出時間先在小范圍內對訪談方案進行測試,對測試效果進行評估。如果基本符合事先預想的訪談效果,就可以在適當改進之后推廣而行;如果效果與預期差距較大,就需要大篇幅地改動,必要時甚至要重新設計訪談方案,避免真正的訪談無果而終。
(4)全面實施。實施階段是整個訪談過程中至關重要的一環(huán),如果出現(xiàn)差錯就可能將之前反復精心準備的訪談毀于一旦。在實施過程中要注意兩點:一是時刻按照計劃,全面地展開訪談,不能脫離計劃夸夸其談,不要噦唆;二是要隨時注意被訪談者的反饋信息,善于引導,調動其積極性,掌握訪談的主導地位。
(5)進行資料分析。至此,訪談工作進入后一個環(huán)節(jié)——分析。分析過程需要放棄前文提到的“多因多果”思維方式。另外,還需要注意的是,對于每個接受訪談的人都應該給予大的尊重,基本的尊重就是保密原則,尤其是一些個人敏感信息,不僅要做到不對外泄密,在內部也要對無關的人進行保密。一旦這些信息不慎泄露,不論是否造成惡劣影響,對于被訪談者的訪談積極性都會造成打擊。
4.測驗法。培訓過程中,受訓員工在參加培訓前后各進行測驗,可根據測評的結果進行對比分析。信度高的測試是指受訓者對測試題目的理解和解答在經過一段時間后并沒有發(fā)生改變。它可以使受訓者相信,相對于培訓前,培訓后測試分數上的提高是由于在培訓項目中進行了學習,而不是因為測試特點(如第二遍看題時更易理解)或測試環(huán)境(如受訓者之所以能在培訓后的測試中表現(xiàn)得更好,是由于教室更舒適、更安靜)等其他因素。
由于受訓者培訓前后的行為和態(tài)度的變化,不僅僅取決于培訓過程和本身,還取決于組織環(huán)境的變化、培訓期間個體的成熟程度、受訓者對培訓的認知等多種因素的復合作用。因此,必須設法從諸多變量中區(qū)分出培訓本身的影響,主要方法有以下兩種。
(1)前測與后測。提高培訓信度的一個方法是首先建立培訓成果的基準線或進行培訓前測量,培訓后,在相同的環(huán)境下進行有關成果的另外測量,能夠說明受訓者由于參加培訓而改變的程度。如果后測的環(huán)境顯然優(yōu)于前測的環(huán)境,則測試結果的信度必然會低。
(2)利用對照組,避免霍桑效應;羯P冈谠u估中,雇員僅僅因為受到關注而表現(xiàn)出高績效的現(xiàn)象。對照組是指不參加培訓項目的一組員工,但是他們會受到相同的對待,前測與后測使用的儀器相同,經歷時間相同。
而且他們具有與受訓者相似的條件,如性別、年齡、受教育程度、在職年限、技能水平等,因此。他們在企業(yè)受到的關注度差別不大。在培訓評估中,運用對照組有助于排除培訓之外的因素對成果衡量尺度的影響。運用對照組,能夠確認觀察到的雇員的成效是由培訓引起的,而不是因為受到了關注。如果被測者的前后測試環(huán)境相同,就有可能出現(xiàn)霍桑效應。
測評時,對受訓組和對照組在培訓前后分別進行安全行為測量,并且給予對照組和受訓組同樣的領導關注度,如果受訓者的安全行為水平較培訓前有所提高,而對照組在培訓前后沒有什么變化,或者變化程度明顯弱于受訓組,那么合理的結論就是:培訓導致了員工的行為發(fā)生了好的變化,而不是受訓組受到領導的關注導致了這一變化。
附加一個對照組,會給培訓增加成本,而且還需要考慮將哪些雇員歸入受訓組和對照組,一個途徑是在明確受訓者之后,對他們的特點進行描述,確保對照組中的成員有相同類型的特征;另一個途徑是可以采用隨機抽樣法,由于一般不太容易衡量所有能夠影響培訓成果尺度的個性特征,只能通過隨機抽樣,確保這些特征均勻分布在受訓組和對照組。