2012 左永安顧問 安永經營管理商學院 EMBA 共通核心職能 TTQS評核委員在想什麼 單位願景、發展策略、訓練政策、核心訓練類別、訓練需求、年度計畫到執行、訓練移轉、訓練評核、訓練績效，都可以是環環相扣，交互影響。
本文僅供參考 ....
TTQS評核委員在想什麼
評核委員：戴楊健
四年已評核過約380家的企業機構和訓練機構。
98年起並通過TTQS講師認證，講授TTQS專業課程；
曾經擔任「協助企業人力資源提升計畫」(簡稱「個別型」及「聯合型」)輔導顧問
雖然不能保證所有評核委員的評核標準都能達到完全一樣，但是其間的誤差相信是非常少的；我的經驗是一份評核表下來，不同委員間的誤差通常都在1分內，最多也不超過2分(差太多)。
TTQS評核委員的評判標準，除了每一份評核表最下方對評核分數的定義外，究竟還會思考哪些面向？
僅以個人這幾年來從事TTQS評核工作的心得，為大家揭開TTQS評核委員評核時的考量重點：
1.時間掌握：按TTQS規定，單位簡報時間為30分鐘，一般都是自單位簡介開始，常見單位因成立時間久遠，所以從單位設立、組織沿革、產品/服務項目、分支單位據點….一一介紹，單位簡介完畢，時間可能已經過了15分鐘。其實評核委員主要是評鑑訓練相關制度與作為，單位簡介只要簡單說明即可，重點還是在TTQS評分表。我的建議是單位介紹以三張投影片三分鐘以內即可。其餘心力還是放在TTQS計分卡的PDDRO循環。
30分鐘的簡報，時間很短，評核委員在總共3小時的評核還要詢答、檢視資料、閉門會議、產出評核表及雙向交流，任何一個階段拖延都會影響下一階段進行。
我通常會視狀況提醒單位注意簡報時間，但不見得每位委員都會如此，只要超過時間，簡報者及評核委員都會感受到壓力，反而影響正常表現。我接觸到一些表現優秀的單位，都是在評核前多次演練簡報，時間及內容控制得恰到好處，結果也都皆大歡喜。
2.連結性：
TTQS的一大特點就是強調連結性，從單位願景、發展策略、訓練政策、核心訓練類別、訓練需求、年度計畫到執行、訓練移轉、訓練評核、訓練績效，都可以是環環相扣，交互影響。連結性的強弱，往往是評分高低的關鍵，如果每一項都做了但連結性不足，就不容易得高分。
例如，如果單位願景是成為高科技的技術領導品牌，策略卻是平價強攻市占
率，這二者間就有矛盾。又例如某些單位自稱以人為本、重視訓練，但在策略規
劃、SWOT 分析、年度經營目標等項目卻完全未提到人力資源，叫評核委員如何
相信這是以人為本的單位。
3.有做不等於做好：
有些受評單位自認評分表的項目都有做呀，為什麼成績
不盡理想？這其實是一種迷思，例如，我看過訓練結案報告只是滿意度調查統計，
連分析說明都沒有。
也有單位是三小時的訓練，卻做了4 頁的詳盡分析與檢討改
進意見。又如名為「課後行動計畫」，有些其實只能算是訓練心得，也有單位的
行動計畫，不僅列出目標、執行計畫、預定時程、成效評估方式，主管也用心審
閱加註意見。如果內容差異這麼大，卻要求評核委員只要看到有這個「名詞」就
認定有達到標準，可就不盡公允了。
4.少量施作不等於落實執行：
有些單位在簡報TTQS 時，搭配的舉例課程都
是同一個或同樣的二、三個課程，這往往會引發評核委員進一步探詢的興趣----
其他課程也都落實得這麼徹底嗎？按照規範，必須80%的課程都落實執行，才能
算是全面執行，如果只有簡報的少數課程有依據訓練品質手冊的規範落實，可能
就不被採信是完整執行。也有單位辯稱：「我們的規範就是外聘師資才做訓練規
劃及課後結案報告，內部師資不必」。如果是這樣，則又牽涉適當性與合理性的
問題了。
還有一種情形是訓練機構，前一年度只辦過一場訓練或甚至只有3 小時所謂
勞工教育，而僅有辦的這一場活動，都徹底落實訓練品質手冊的規範，也達到
TTQS 的標準。這種情形可能還是無法獲得高分，因為還無法證明單位有辦訓的
普遍能力。就好像一位代打上場的棒球選手，只上場一次就轟出全壘打，你能說
他打擊率是100%，而且是100%打出全壘打嗎？可能還是需要更多機會證明自己
的能力，才能獲得較好的評價。
5.改變不等於持續改善：
TTQS 評核的4 分與5 分的差距，主要就在於持續
改善，所謂持續的意義是三年以上。改善要依據前期的狀況進行調整，有些單位
自認為，我今年跟去年的做法有不同了呀，這就是改善！但從評核委員的角度來
看，我們還想知道：改變的原因是什麼？為什麼這樣改？有無經過核准生效？成
效如何？這種改變方式已經形成制度了嗎？重點是改變之後確實變得更好，而且
制訂定期檢視制度，以及執行層面需不需要改變，如果只是為改而改，就達不到
持續改善的的標準。
6.名實要相符：
前面第3點提過有些單位的「課後行動計畫」其實只能算是「課後心得報告」，類似這種名不符實的狀況所在多有，例如「職能體系」就是「特定人員資格鑑定表」、「課程結案報告」就是「滿意度統計」、「訓練體系」只是「課程分類」、「訓練計畫書」就是「課程公告」….。凡此類型，都難以獲得評核委員青睞，反而讓人認覺得對TTQS甚至訓練概念認識不清。承辦人員應該要知道每一項制度和表單的功用、內容應如何設計、適用何種情況、如何呈現效用。
7.依規辦事：
此種情形較常發生在訓練機構，當承辦產投計畫時，一切都遵照職訓局相關規定辦理；承辦失業者職訓時，一切按照縣市政府投標公告辦理；接辦產學合作時，又都符合業主要求。一個單位內因應不同訓練需求，產生出不同的規格流程，固然是彈性十足，但卻缺乏了自主能力。
訓練機構要獲得標案才能生存，遵守補助單位規範天經地義，但這是外在呈現的不同，訓練機構本身還是要有自己的一套基本制度，才能達到訓練水準一致化的要求。實地訪視過程中，也常發現所謂「公版」訓練品質手冊，有些甚至連單位名稱都沒改到。這種情形下，評核委員自會判斷該給何種等級分數。
8.其他行為跟訓練的關係：
主要發生在Outcome(成果)項目，如「訓練的組織擴散效果」，受評單位提出營業額成長、專利件數、客訴率等等數據，但無法說明這些結果與訓練間的關聯，或者二者間因果關係很勉強，例如前一年度有辦過三小時的專利權講座，所以當年專利數大幅成長；這種推論很難讓評核委員信服。
又如「特殊訓練績效」，舉出公司員工愛心捐款多少金額、總經理獲得十大傑出青年、公司是客戶的綠色夥伴…等等，這些成果都很好，但是這些行為本身跟訓練間的關係何在？畢竟TTQS是針對單位的訓練做評估，其他行為的發生如果跟訓練扯不上邊就別提了吧。
9.制度或文件的有效性：
單位內的制度必須有一定的制定流程，並經公告生效。有時候會遇到單位提出的願景、使命、價值觀看來頗好，但一問是誰在何時制定、有無公告周知，卻莫衷一是。也有發生過簡報的單位願景跟張貼在牆上的願景不一致的情形。
還有SWOT/TOWS，分析得鞭辟入裡，結果卻是人資單位自己擬的，公司其他單位並不知情。尤有甚者，提出的訓練品質手冊沒有制訂者、審核者、生效日期等，一問之下單位才坦承是幾天前臨時”變”出來的。
單位的制度或文件，如果沒有一定的生效程序，可以由承辦人員自行決定，很不容易穩定作業，更可能人息政亡。
單位內的訓練部門雖然立意良善，但若總
是自己關起門來做，也難以獲得單位內其他部門的認同與合作。
10.訓練辦得好未必符合TTQS要求：
在實地評核過程中遇到過某些單位自恃規模大，組織營運績效好，在訓練方面確實也投入不少心力，成效也相當良好，但評核結果卻與其自評有相當差距，這種差異往往是因為對TTQS認知不足。
TTQS有其一定的流程與檢核項目，如果不按照TTQS的規範簡報說明，拿出自以為是的訓練簡報，評核委員很難深入了解。好比國際體操比賽有一定的動作要求與評分標準，如果在台上打出一套功夫或雜耍路數，這教評審如何給分。
TTQS作為一套訓練評核指標，也許不見得每一個單位都受用，但卻是經過多年及許多單位驗證確實有效。如果不認同TTQS，其實大可不必申請評核，我在講評時也常對單位說「客戶的肯定才是組織最大的榮耀」。
但如果要申請政府訓練補助或TTQS評核，請還是依照PDDRO的規範進行。
TTQS評核委員在想什麼
評核委員：戴楊健
四年已評核過約380家的企業機構和訓練機構。
98年起並通過TTQS講師認證，講授TTQS專業課程；
曾經擔任「協助企業人力資源提升計畫」(簡稱「個別型」及「聯合型」)輔導顧問
雖然不能保證所有評核委員的評核標準都能達到完全一樣，但是其間的誤差相信是非常少的；我的經驗是一份評核表下來，不同委員間的誤差通常都在1分內，最多也不超過2分(差太多)。
TTQS評核委員的評判標準，除了每一份評核表最下方對評核分數的定義外，究竟還會思考哪些面向？
僅以個人這幾年來從事TTQS評核工作的心得，為大家揭開TTQS評核委員評核時的考量重點：
1.時間掌握：按TTQS規定，單位簡報時間為30分鐘，一般都是自單位簡介開始，常見單位因成立時間久遠，所以從單位設立、組織沿革、產品/服務項目、分支單位據點….一一介紹，單位簡介完畢，時間可能已經過了15分鐘。其實評核委員主要是評鑑訓練相關制度與作為，單位簡介只要簡單說明即可，重點還是在TTQS評分表。我的建議是單位介紹以三張投影片三分鐘以內即可。其餘心力還是放在TTQS計分卡的PDDRO循環。
30分鐘的簡報，時間很短，評核委員在總共3小時的評核還要詢答、檢視資料、閉門會議、產出評核表及雙向交流，任何一個階段拖延都會影響下一階段進行。
我通常會視狀況提醒單位注意簡報時間，但不見得每位委員都會如此，只要超過時間，簡報者及評核委員都會感受到壓力，反而影響正常表現。我接觸到一些表現優秀的單位，都是在評核前多次演練簡報，時間及內容控制得恰到好處，結果也都皆大歡喜。
2.連結性：
TTQS的一大特點就是強調連結性，從單位願景、發展策略、訓練政策、核心訓練類別、訓練需求、年度計畫到執行、訓練移轉、訓練評核、訓練績效，都可以是環環相扣，交互影響。連結性的強弱，往往是評分高低的關鍵，如果每一項都做了但連結性不足，就不容易得高分。
例如，如果單位願景是成為高科技的技術領導品牌，策略卻是平價強攻市占
率，這二者間就有矛盾。又例如某些單位自稱以人為本、重視訓練，但在策略規
劃、SWOT 分析、年度經營目標等項目卻完全未提到人力資源，叫評核委員如何
相信這是以人為本的單位。
3.有做不等於做好：
有些受評單位自認評分表的項目都有做呀，為什麼成績
不盡理想？這其實是一種迷思，例如，我看過訓練結案報告只是滿意度調查統計，
連分析說明都沒有。
也有單位是三小時的訓練，卻做了4 頁的詳盡分析與檢討改
進意見。又如名為「課後行動計畫」，有些其實只能算是訓練心得，也有單位的
行動計畫，不僅列出目標、執行計畫、預定時程、成效評估方式，主管也用心審
閱加註意見。如果內容差異這麼大，卻要求評核委員只要看到有這個「名詞」就
認定有達到標準，可就不盡公允了。
4.少量施作不等於落實執行：
有些單位在簡報TTQS 時，搭配的舉例課程都
是同一個或同樣的二、三個課程，這往往會引發評核委員進一步探詢的興趣----
其他課程也都落實得這麼徹底嗎？按照規範，必須80%的課程都落實執行，才能
算是全面執行，如果只有簡報的少數課程有依據訓練品質手冊的規範落實，可能
就不被採信是完整執行。也有單位辯稱：「我們的規範就是外聘師資才做訓練規
劃及課後結案報告，內部師資不必」。如果是這樣，則又牽涉適當性與合理性的
問題了。
還有一種情形是訓練機構，前一年度只辦過一場訓練或甚至只有3 小時所謂
勞工教育，而僅有辦的這一場活動，都徹底落實訓練品質手冊的規範，也達到
TTQS 的標準。這種情形可能還是無法獲得高分，因為還無法證明單位有辦訓的
普遍能力。就好像一位代打上場的棒球選手，只上場一次就轟出全壘打，你能說
他打擊率是100%，而且是100%打出全壘打嗎？可能還是需要更多機會證明自己
的能力，才能獲得較好的評價。
5.改變不等於持續改善：
TTQS 評核的4 分與5 分的差距，主要就在於持續
改善，所謂持續的意義是三年以上。改善要依據前期的狀況進行調整，有些單位
自認為，我今年跟去年的做法有不同了呀，這就是改善！但從評核委員的角度來
看，我們還想知道：改變的原因是什麼？為什麼這樣改？有無經過核准生效？成
效如何？這種改變方式已經形成制度了嗎？重點是改變之後確實變得更好，而且
制訂定期檢視制度，以及執行層面需不需要改變，如果只是為改而改，就達不到
持續改善的的標準。
6.名實要相符：
前面第3點提過有些單位的「課後行動計畫」其實只能算是「課後心得報告」，類似這種名不符實的狀況所在多有，例如「職能體系」就是「特定人員資格鑑定表」、「課程結案報告」就是「滿意度統計」、「訓練體系」只是「課程分類」、「訓練計畫書」就是「課程公告」….。凡此類型，都難以獲得評核委員青睞，反而讓人認覺得對TTQS甚至訓練概念認識不清。承辦人員應該要知道每一項制度和表單的功用、內容應如何設計、適用何種情況、如何呈現效用。
7.依規辦事：
此種情形較常發生在訓練機構，當承辦產投計畫時，一切都遵照職訓局相關規定辦理；承辦失業者職訓時，一切按照縣市政府投標公告辦理；接辦產學合作時，又都符合業主要求。一個單位內因應不同訓練需求，產生出不同的規格流程，固然是彈性十足，但卻缺乏了自主能力。
訓練機構要獲得標案才能生存，遵守補助單位規範天經地義，但這是外在呈現的不同，訓練機構本身還是要有自己的一套基本制度，才能達到訓練水準一致化的要求。實地訪視過程中，也常發現所謂「公版」訓練品質手冊，有些甚至連單位名稱都沒改到。這種情形下，評核委員自會判斷該給何種等級分數。
8.其他行為跟訓練的關係：
主要發生在Outcome(成果)項目，如「訓練的組織擴散效果」，受評單位提出營業額成長、專利件數、客訴率等等數據，但無法說明這些結果與訓練間的關聯，或者二者間因果關係很勉強，例如前一年度有辦過三小時的專利權講座，所以當年專利數大幅成長；這種推論很難讓評核委員信服。
又如「特殊訓練績效」，舉出公司員工愛心捐款多少金額、總經理獲得十大傑出青年、公司是客戶的綠色夥伴…等等，這些成果都很好，但是這些行為本身跟訓練間的關係何在？畢竟TTQS是針對單位的訓練做評估，其他行為的發生如果跟訓練扯不上邊就別提了吧。
9.制度或文件的有效性：
單位內的制度必須有一定的制定流程，並經公告生效。有時候會遇到單位提出的願景、使命、價值觀看來頗好，但一問是誰在何時制定、有無公告周知，卻莫衷一是。也有發生過簡報的單位願景跟張貼在牆上的願景不一致的情形。
還有SWOT/TOWS，分析得鞭辟入裡，結果卻是人資單位自己擬的，公司其他單位並不知情。尤有甚者，提出的訓練品質手冊沒有制訂者、審核者、生效日期等，一問之下單位才坦承是幾天前臨時”變”出來的。
單位的制度或文件，如果沒有一定的生效程序，可以由承辦人員自行決定，很不容易穩定作業，更可能人息政亡。
單位內的訓練部門雖然立意良善，但若總
是自己關起門來做，也難以獲得單位內其他部門的認同與合作。
10.訓練辦得好未必符合TTQS要求：
在實地評核過程中遇到過某些單位自恃規模大，組織營運績效好，在訓練方面確實也投入不少心力，成效也相當良好，但評核結果卻與其自評有相當差距，這種差異往往是因為對TTQS認知不足。
TTQS有其一定的流程與檢核項目，如果不按照TTQS的規範簡報說明，拿出自以為是的訓練簡報，評核委員很難深入了解。好比國際體操比賽有一定的動作要求與評分標準，如果在台上打出一套功夫或雜耍路數，這教評審如何給分。
TTQS作為一套訓練評核指標，也許不見得每一個單位都受用，但卻是經過多年及許多單位驗證確實有效。如果不認同TTQS，其實大可不必申請評核，我在講評時也常對單位說「客戶的肯定才是組織最大的榮耀」。
但如果要申請政府訓練補助或TTQS評核，請還是依照PDDRO的規範進行。
發表文章
沒有留言:
張貼留言