培訓項目評估方案

出自 MBA智库百科(https://wiki.mbalib.com/)

　　培訓項目評估方案是圍繞評估目標制訂的詳細評估計劃，是開展項目評估活動的操作指導。不同的評估目的對應不同的評估方案，但總體來看，每個評估方案都需要回答5個w和1個H的問題，即為什麼要評估(Why)、評估什麼(What)、由誰來評估(Who)、在哪裡評估(Where)、何時評估(When)以及如何評估(How)。

　　培訓項目評估方案的設計是評估規劃重要的組成部分之一。在這一階段，培訓評估所要解決的主要問題是：在充分考慮各種可行因素的基礎之上選擇恰當的評估方案。評估方案的選擇，直接決定了評估對非培訓因素的剔除能力，從而能夠更加準確地回答我們所關註的問題：(1)培訓產生了何種客觀的影響；(2)是否能確立培訓活動與影響之間的因果關係；(3)是否能確認培訓的作用機制；(4)是否能確認項目產出與其最終效果之間的作用機制。

　　在實踐中，常見的培訓評估方案可歸為以下幾類：實驗設計、準實驗設計和非實驗設計。根據圖3一]4所示，我們可以清晰地將這三者加以區分。

　　圖1　　實驗設計、準實驗設計、非實驗設計三者之間的關係

　　(一)非實驗設計

　　非實驗設計往往著眼於目標群體縱向的變化，它以項目涉及的整個目標群體作為參照，而不設計專門的控制組或對照組。

　　非實驗設計通常被運用於以下場合：

　　1．在培訓項目涉及的範圍十分廣泛時，準確地確認具有建設意義的控制組和對照組別是不大可能的，它的實際困難在於：你無法或至少是很難定義不參與的人群。

　　2．許多項目的目標群體包容了特定地域內的所有人員，這時，通常也會採用非實驗設計。

　　3．在許多情形之下，我們有把握確認培訓項目實施前後的目標群體在所有相關方面保持一致，也就是說假設沒有培訓項目的干預，事前測評和事後測評的結果應該是一樣的。在此種情形下，通常採用非實驗設計。在實踐中，常用的非實驗設計方案有兩種：(1)單組別事前測評事後測評設計；(2)簡單時間序列設計。

　　(二)實驗設計

　　實驗設計被認為是最具科學性、也最有說服力的評估設計。它具有以下幾個特點：

　　1．隨機實驗(實驗的參與者與控制組成員都是嚴格地根據隨機原則抽取的)是項目評估領域中的旗艦，因為它們能夠使項目本身在一個很高的置信度上對項目的結果(或無結果)做出解釋。

　　2．它們的研究結果都能在項目於預活動和實際結果之間建立起某種因果關係。因此，隨機實驗的結論廣泛地為政策制定者、項目人員以及公眾所信賴。

　　3．實驗設計的關鍵在於保證隨機性。在實踐中，常用的實驗設計方案有四種。(1)事前測評一事後測評控制組設計；(2)所羅門四小組設計；(3)單一事後測評控制組設計；(4)要素評估設計。

　　(三)準實驗設計

　　準實驗設計與實驗設計的關鍵區別在於隨機性。在實驗設計中，樣本的隨機分配形成了具有完全可比性的兩個組別：實驗組和控制組。準實驗設計用對照組取代了實驗設計中的控制組。研究者努力創造一個與實驗組在所有重要方面都儘可能相似的對照組，但與隨機分配產生的控制組而言，它的可比性已經大為遜色了。

　　準實驗設計通常都是回溯性的，即評估的決定是在培訓結束之後做出的。這時，無法按隨機性的原則產生控制組，實驗設計也就不可能實現了。當然，沒有隨機性的保證，的確無法確立全等價的控制組，但是設計恰當的準實驗設計同樣會比勉強的實驗設計更準確有效。

　　在實踐中，常用的準實驗設計方案有三種。(1)事前測評一事後測評對照組設計；(2)時間序列設計對照組設計；(3)單一事後測評對照組設計。

　　培訓項目評估對於培訓工作的校驗和培訓效果的改進具有明顯的推動作用，需要進行科學的設計。在對某個培訓項目做出評估決定後，制定出一個得體、實用的評估方案，這對於培訓項目評估的順利開展會起到關鍵性作用。

　　培訓項目評估方案的設計影響因素

　　針對不同的評估主體、內容或目的等，評估方案會有所不同。在進行培訓項目評估方案設計時，要充分考慮以下因素的影響：

　　1．項目實施的調整程度：由於評估的目的和評估結果的作用是要有效引導和修改培訓項目及計劃，使培訓活動能夠更加有利於學員個體和組織的需要。因此，在形成培訓項目評估方案前要充分考慮該培訓項目的方案或計劃在組織實施過程中是否會進行修改或調整。

　　2．培訓目標的實現程度：是指通過實施培訓活動，能否實現該培訓項目預定的目標和功能，如改善學員的知識結構、提高學員的素質能力、實現組織績效的提升等等。設計評估方案時要充分考慮到培訓目標，以及如何對目標達成的方面進行評估。

　　3．培訓範圍的覆蓋程度：包括培訓項目涉及的學員人數、比例、層級等，它決定了最終評估結果的可靠程度分析。如若一個培訓項目學員人數過少，那麼就難以判定該項目對組織工作績效產生決定性影響的依據。

　　4．培訓環境的適應程度：培訓工作的開展是否與組織的期望與價值相一致，學員的培訓環境與其工作環境是否相適應，是否有利於體現培訓的優勢等等。設計評估方案時，要充分考慮培訓成果應用環境的狀況，而不能單純地對培訓項目本身下定論。

　　5．評估主體的專業程度：評估主體的專業程度有助於分析和處理複雜的信息和數據成果，體現了評估的權威性，能確保評估結果的可靠與準確。因此，設計評估方案時，要充分考慮評估主體的專業狀況，採取適宜的評估方式與手段。

　　6．評估成本的保障程度：包括費用成本、人員成本和時間成本等，是設計制定培訓項目評估方案時要考慮的重要因素。實施項目評估要涉及培訓部門、學員本人及所在部門等不同主體，不可避免地會產生各種評估成本，因此要預先考慮，認真測算，提高評估效益。

　　培訓項目評估方案是圍繞評估目標制訂的詳細評估計劃，是開展項目評估活動的操作指導。不同的評估目的對應不同的評估方案，但總體來看，每個評估方案都需要回答5個w和1個H的問題，即為什麼要評估(Why)、評估什麼(What)、由誰來評估(Who)、在哪裡評估(Where)、何時評估(When)以及如何評估(How)。因此，評估方案的設計可以遵循一定的模式。

　　通常情況下，一個完整的培訓項目評估方案，應包含以下8個要素.

　　圖2　　培訓項目評估方案示例

　　1．評估目標：對應不同的培訓項目，評估應根據不同的培訓目標來進行，始終與培訓目標保持一致，偏離了培訓目標的評估檢驗是盲目和片面的。因此，在制定培訓項目評估方案前，應首先明確評估目標，而這也正是組織管理者或培訓項目管理者向評估主體傳達的評估意圖。

　　2．評估內容：即評估的具體事項，涉及培訓活動的方方面面，如培訓需求確認、培訓目的目標、培訓內容、時間、方式、師資、效果等等。評估內容的選擇取決於組織管理者或培訓項目管理者需要從培訓活動中瞭解和獲取的信息。

　　3．評估對象：即實施評估的受訪對象。通常以學員本人為主，也可將與學員有關的人員，如其上級、下屬、同事等，甚至培訓教師、培訓項目主管、組織管理者等都納入評估對象，以獲取更多的評估數據和信息，增加評估結果的可信度。

　　4．評估主體：即項目評估的實施者，可分為內部評估者和外部評估者兩種。需要註意的是，評估主體的職責要劃分明確，如誰來收集數據、誰來分析數據、誰來解說數據、誰將繼續實施後續的評估、誰來調整評估程式等等。多數情況下，固定由一個人或一個小組來持續實施比較合理，有利於保持評估的連貫性。

　　5．評估方法：即評估過程中用以判定培訓項目質量所採取的形式，包括長期評估法和短期評估法、定性評估法和定量評估法、效果評估法和項目評估法等等。根據不同的評估內容可靈活採用適宜的方法。

　　6．評估工具：是指在評估過程中用來收集評估信息和數據的方式。如電話訪談、調查問卷、座談會、學員年會，行為觀察，測驗和模擬等等。其中，最常用的工具是調查問卷，由於成本低、信息量大、操作便捷，而得到廣泛應用。

　　7．評估計劃安排：即實施評估的詳細安排，明確在每個時間段進行的具體評估活動。如進行評估的時間、地點、內容，實施評估的對象，評估採用的方法、工具等，是培訓項目評估具體工作的日程安排。

　　8．評估費用：即評估過程中預計將產生的相關費用支出。