評監(jiān)人員

1、評鑑人員,國立臺北科技大學(xué) 技職所曾淑惠,2001/3/24,臺北科大 技職所 曾淑惠,2,評鑑人員,評鑑人員的型態(tài)評鑑人員的專業(yè)素養(yǎng)評鑑人員的專業(yè)活動評鑑人員的專業(yè)能力評鑑人員的指引原則評鑑人員的選擇評鑑人員的認(rèn)證,2001/3/24,臺北科大 技職所 曾淑惠,3,評鑑人員的型態(tài),外部評鑑人員內(nèi)部評鑑人員內(nèi)部評鑑人員 + 外部諮商人員,2001/3/24,臺北科大 技職所 曾淑惠,4,評鑑人員的專業(yè)活動

2、,藉由幫助人們瞭解評鑑結(jié)果及其應(yīng)用，來幫助人們改進方案設(shè)計能滿足不同客戶目的的評鑑，包括要求績效責(zé)任的客戶撰寫評鑑計畫與客戶協(xié)商評鑑的設(shè)計與結(jié)果教授學(xué)生、行政人員、方案參予者有關(guān)評鑑的技能,實地執(zhí)行評鑑工作解釋資料蒐集的結(jié)果，通常要使用統(tǒng)計且／或質(zhì)的分析方法，並解釋結(jié)果準(zhǔn)備並向客戶、財務(wù)提供者、評鑑專業(yè)同儕等，發(fā)表評鑑報告Scriven (1999),2001/3/24,臺北科大 技職所 曾淑惠,5,評鑑人員的專業(yè)

3、能力,具有評鑑理論與方法論的知識可區(qū)別研究與評鑑的程序可以計畫、設(shè)計、並建構(gòu)一項評鑑工作有知識與能力去統(tǒng)計分析資料有知識與能力管理維護一個資料庫有能力撰寫並編輯簡要的說明報告有建構(gòu)評鑑的經(jīng)驗可以與方案或評鑑工作有關(guān)人員做清楚、有效的溝通有能力區(qū)分何種資訊適合單一的計畫、單一的需求瞭解並可回答形成性評鑑及總結(jié)性評鑑的問題Rossi及Freeman (1993),2001/3/24,臺北科大 技職所 曾淑惠,6,評鑑

4、人員的專業(yè)能力(二),方案計畫與評鑑所需的特定知識能發(fā)展所要評鑑特定問題的計畫能找到、閱讀並整合相關(guān)研究的文獻能界定評鑑的目標(biāo)與適當(dāng)格式的資料庫需求能對已存在的評鑑研究設(shè)計仔細(xì)評估能將理論模式與真實生活的需求相關(guān)連能將輸入變項、處理變項及輸出變項相關(guān)連在與評鑑團體及方案執(zhí)行人員一起工作時，能展示適切的人際關(guān)係技巧能區(qū)別橫斷面與縱斷面研究的優(yōu)點與缺點,2001/3/24,臺北科大 技職所 曾淑惠,7,評鑑人員的專業(yè)能力

5、(二),管理系統(tǒng)、功能，並做功能分析設(shè)計有效的測驗管理系統(tǒng)在電腦程式設(shè)計師或資料處理團體中描述評鑑的設(shè)計及分析的需求界定選擇或發(fā)展評鑑工具的參考標(biāo)準(zhǔn)應(yīng)用適當(dāng)?shù)馁Y料蒐集與分析程序為一個方案或計畫進行成本效益分析使用與方案或計畫的評鑑資訊來做決策管理一個評鑑單元的活動,2001/3/24,臺北科大 技職所 曾淑惠,8,評鑑人員的專業(yè)能力(二),設(shè)計一個可描述格式、責(zé)任、程序、接受者及時程的資料呈現(xiàn)系統(tǒng)在前一循環(huán)資料代表意

6、義的基礎(chǔ)上，重新設(shè)計或修正評鑑系統(tǒng)產(chǎn)生溝通用的報告Payne (1994),2001/3/24,臺北科大 技職所 曾淑惠,9,評鑑人員的專業(yè)能力(三),2001/3/24,臺北科大 技職所 曾淑惠,10,評鑑人員的指引原則,系統(tǒng)化的詢問在建構(gòu)評鑑時必須堅持最適當(dāng)?shù)募夹g(shù)標(biāo)準(zhǔn)，不論其工作在本質(zhì)上是屬於質(zhì)或量的，都要增加評鑑資訊的精確度與可信度在評鑑的各種問題上同時探求客戶的優(yōu)點與缺點，而且要用不同的方法回答這些問題,在

7、報告評鑑者的工作事項時，必須精確地說明所採用的方法或方法論，並充份、仔細(xì)地允許每個人瞭解、解釋及評論；清楚地界定評鑑及其結(jié)果的限制，以脈胳性的、適當(dāng)?shù)姆绞?，討論這些價值、假定、理論、方法、結(jié)果等議題，分析並解釋評鑑發(fā)現(xiàn)與評鑑影響的重要程度,2001/3/24,臺北科大 技職所 曾淑惠,11,評鑑人員的指引原則(續(xù)),能力有適切的教育、能力、技能及經(jīng)驗，以便於執(zhí)行評鑑所需的工作任務(wù)在其專業(yè)訓(xùn)練與能力的限制下從事實務(wù)工作，而且必須謝

8、絕超過這些限制的評鑑行為。當(dāng)謝絕委託或需求是不可能或不適當(dāng)?shù)?，評鑑人員必須釐清任何評鑑可能導(dǎo)致的所有限制，也必須十分努力地直接或經(jīng)由他人的幫助來獲得所需的能力,必須持續(xù)地尋求維護並改進本身的能力，以提供在評鑑中更高層次的成就。這個持續(xù)性的專業(yè)發(fā)展，可能包括正式的課程、工作坊、自我研究、自我評鑑、及向其他評鑑人員學(xué)習(xí)技能與專業(yè)等,2001/3/24,臺北科大 技職所 曾淑惠,12,評鑑人員的指引原則(續(xù)),完整／誠實必須誠實地與客戶

9、及相關(guān)關(guān)係人，協(xié)商有關(guān)費用、工作任務(wù)、方法論的限制、獲致結(jié)果的範(fàn)圍、結(jié)果資料的使用等議題，先提出這些議題的初步構(gòu)想以供討論及界定,必須記錄與原先協(xié)商的計畫不同的所有改變與改變的原因，如果這些改變將對評鑑的範(fàn)圍與可能的結(jié)果有重大的影嚮，評鑑人員必須立刻通知客戶及財務(wù)提供者，有關(guān)這些變化以及可能造成衝擊的訊息,2001/3/24,臺北科大 技職所 曾淑惠,13,評鑑人員的指引原則(續(xù)),必須適當(dāng)、明確地尋求有關(guān)其本身、客戶、與其他財務(wù)提

10、供者對評鑑行為與成果等相關(guān)議題的決策無論評鑑什麼，均必須揭示任何評鑑中相關(guān)的角色或關(guān)係在興趣上的衝突，這些衝突必須在評鑑結(jié)果的報告中提及,必須報告在合理的限制之下的實施程序、資料或發(fā)現(xiàn)等訊息，以避免或校正別人對評鑑人員工作實際上的誤解與誤用除了引人注目的理由外，評鑑人員必須揭露所有評鑑的財務(wù)支援，以及對評鑑所有要求的來源。,2001/3/24,臺北科大 技職所 曾淑惠,14,評鑑人員的指引原則(續(xù)),如果評鑑人員所決定的特定程序

11、或活動，可能產(chǎn)生易受誤解的評鑑資訊或結(jié)論，評鑑人員有責(zé)任與客戶溝通所關(guān)切之處及其原因如果與客戶的討論不能解決這些問題，評鑑人員必須合法的婉拒實施這個令人迷惑的評鑑，如果不能婉拒，評鑑人員必須向同僚或相關(guān)的關(guān)係人諮詢有關(guān)執(zhí)行上適當(dāng)?shù)耐緩?2001/3/24,臺北科大 技職所 曾淑惠,15,評鑑人員的指引原則(續(xù)),尊敬人們在所有用得到的地方，評鑑人員必須遵守現(xiàn)有的專業(yè)倫理與標(biāo)準(zhǔn)，重視評鑑中可能產(chǎn)生的危機、傷害與負(fù)擔(dān)，重視評鑑參予人

12、員的知情同意，重視對評鑑參予者有關(guān)信賴度範(fàn)圍與限制的通知,必須對評鑑中可能傷害客戶或財務(wù)提供者興趣的結(jié)果，做一些在評鑑中負(fù)面判斷或結(jié)論評鑑明確的陳述。在這種情況下必須尋求對可能受傷害者最大的優(yōu)勢，並降低不必要傷害發(fā)生機會，而這並不代表在評鑑發(fā)現(xiàn)的完整性上要作任何妥協(xié)，因此必須很小心地下判斷，可能的話這些類似的問題在評鑑的過程中，就以協(xié)商的方式加以解決,2001/3/24,臺北科大 技職所 曾淑惠,16,評鑑人員的指引原則(續(xù)),在己

13、知評鑑會給一些財務(wù)提供者的興趣帶來負(fù)面影響時，評鑑者必須妥善地管理評鑑，並以十分尊敬財務(wù)提供者尊嚴(yán)與價值的方法，來溝通結(jié)果必須注意促進評鑑中的社會平等，使對評鑑有貢獻的人都能得到有益的回報。,評鑑人員有責(zé)任去定義並尊重參予者間的差異，如宗教、種族、文化、性別、年齡等，並在評鑑的計畫、管理、分析及報告等方面，留心這些差異的潛在關(guān)連,2001/3/24,臺北科大 技職所 曾淑惠,17,評鑑人員的指引原則(續(xù)),對一般及公眾的福祉負(fù)責(zé)

14、在規(guī)劃及報告評鑑時，必須考慮所有受評對象及財務(wù)提供者的興趣與觀點，小心地考慮當(dāng)省略某一部份的價值觀或某一群體的看法時，所遇到的公平性的問題,不只要考慮評鑑的立即作業(yè)與結(jié)果，更要考慮評鑑小組的假定、含意與潛在的邊際效應(yīng)如果有相反的強制性理由，評鑑人員必須允許相關(guān)的評鑑關(guān)係人取得評鑑資訊，而且在資訊來源允許之下，將資訊主動傳播給評鑑關(guān)係人,2001/3/24,臺北科大 技職所 曾淑惠,18,評鑑人員的指引原則(續(xù)),必須在客戶需求與其

15、他需求間維持平衡，與提供資金的客戶及要求評鑑的客戶維持一個特定的關(guān)係有義務(wù)要考量對公共興趣與有益的福祉上，這些義務(wù)在由公共基金所支援的評鑑上更為重要,美國評鑑學(xué)會, 1998,2001/3/24,臺北科大 技職所 曾淑惠,19,評鑑人員的專業(yè)素養(yǎng),包含教育、研究法、評鑑、及一般(經(jīng)濟、政治、心理等)等四領(lǐng)域的知識與技能需要專業(yè)發(fā)展上各階段的歷練,那一個人具有評鑑人員所有應(yīng)具備的能力？如何解決現(xiàn)階段評鑑人員能力不足的問題?,

16、2001/3/24,臺北科大 技職所 曾淑惠,20,評鑑人員的選擇,資格條件學(xué)位相關(guān)工作經(jīng)驗具有特定的知識、技能與能力任務(wù)依需求而有不同,2001/3/24,臺北科大 技職所 曾淑惠,21,評鑑人員選擇的檢核問題,在評鑑方面具有什麼樣的經(jīng)驗？在與我們的方案，與我們類似的基金提供者或參予者類似的評鑑，具有什麼樣的經(jīng)驗？你對像我們這種方案、方案參予者、或基金提供者的評鑑，具有那些知識庫？對於我們的評鑑，你有何建議的評

17、鑑方法？還有那些方法你不準(zhǔn)備用於我們的評鑑，理由是什麼？,2001/3/24,臺北科大 技職所 曾淑惠,22,評鑑人員選擇的檢核問題,你對你所提供的服務(wù)是否要訂定契約？你能摘要列出契約的內(nèi)容供我們參考嗎？你在評鑑時的指導(dǎo)方針是什麼？你對一份好的或是不好的評鑑，是從那些觀點來考量？我們的預(yù)算不多，你是否考慮成為我們的一員？為什麼？你以前有沒有這樣做過？我們應(yīng)該知道有關(guān)你的潛在獲益與苦惱有那些？,2001/3/24,臺北科大

18、技職所 曾淑惠,23,評鑑人員選擇的檢核問題,如果我們與你訂定合約，實際上會是誰在執(zhí)行這項評鑑工作？我們能看你以前做過的例子嗎？你能從類似我們這樣的評鑑代理商，提出一些採用你的建議的佐證資料以供參考嗎？你的待遇如何？,2001/3/24,臺北科大 技職所 曾淑惠,24,評鑑人員的認(rèn)證,檢定(certification)涉及完成專業(yè)任務(wù)時個人的能力，而證照代表執(zhí)行任務(wù)的合法權(quán)利,資格認(rèn)定(credentials)、是一個人

19、必須完成一套專業(yè)課程，包含場地經(jīng)驗或?qū)嵙?xí)講課,2001/3/24,臺北科大 技職所 曾淑惠,25,評鑑人員的認(rèn)證(續(xù)),持有執(zhí)照(licensure)一種獲得去做某事的正式允許；由法律特別授權(quán)去執(zhí)行一些特定事務(wù),認(rèn)可(accreditation)是一個由可識別的專業(yè)團體，以預(yù)先設(shè)定的參考標(biāo)準(zhǔn)(criteria)或標(biāo)準(zhǔn)(standard)評鑑一個教學(xué)方案，然後在其後的某一段特定期間內(nèi)這個教學(xué)方案被認(rèn)可或不被認(rèn)可,2001/3/24

20、,臺北科大 技職所 曾淑惠,26,評鑑人員的認(rèn)證(續(xù)),困難原因社會上的訴訟案件增加，由於法律上的合法過程是民主的，經(jīng)由合法觀眾的多數(shù)判決就能將錯誤的變成正確的，而不會去理會專業(yè)上的深入考量缺乏對評鑑人員核心能力的共識,2001/3/24,臺北科大 技職所 曾淑惠,27,評鑑人員的認(rèn)證(續(xù)),檢定面臨的挑戰(zhàn)決定採用那一種基本的檢定途徑植基於正式的訓(xùn)練(formal training)植基於評鑑的經(jīng)驗(evaluatio

21、n experience)植基於成就(performance)植基於能力(competencies)在評鑑是什麼，以及評鑑人員應(yīng)具備的核心能力上達(dá)成共識建立專業(yè)的，在法律上可解釋的檢定程序與檢定分級工具獲得強制檢定程序的支持,2001/3/24,臺北科大 技職所 曾淑惠,28,資格認(rèn)定成功的例子,加拿大評鑑人員認(rèn)證系統(tǒng)採用專業(yè)發(fā)展(含確認(rèn)個人的知識與技能，並能堅持實務(wù)上的專業(yè)標(biāo)準(zhǔn)與倫理準(zhǔn)則)及法規(guī)(含個人能執(zhí)行專業(yè)實務(wù)的