培訓評估 策略設計

+

評估策略 在削減成本和精簡目前的環境下，培養專業人才的壓力越來越大，提供的培訓底線的貢獻積極的，可測量的證據下。 然而，評估效果和培訓效果是非常困難的。 這裡有一些想法的評價，從我們自己的經驗，你可能會發現的規劃是什麼，評估，以及如何去這樣做有用的收集。 評估的目的 它可以說，哪些機構應提供的唯一訓練是訓練有助於在一些具體的方法來兼顧性能提高和實現業務需求和目標。 它正努力在人們的投資者（IIP）組織的倡議都知道，評價一個要求反對，他們的訓練性能進行了測試作為識別過程的一部分： 對於學習者的評估和評價策略報告 評估是成功的關鍵因素任何課程。 可靠和準確的預評估工具的應用評估學習者的適當配入課程，同時具有要完成課程前必要的技能和個人興趣和能力這樣做。 教學模塊中持續和反复的評估，可以通知進度的學生，以及提供反饋，選擇個人學習策略和實現程序的學習目標。 同樣的，適當的後期教學評估，保證學習者已經證明了該程序的終端目標的知識，技能和能力。 對於EnterTech項目，學習者應該能表現出必要的知識，技能和能力是成功的入門級職位工作地點或在繼續教育計劃。 下面的活動進行了告知學習者評估教學設計決定： 研究和分析當前的測試，工具和手段來評估知識，技能，能力，專長，和興趣。 確定前提條件進入Entertech項目培訓計劃，並選擇或制定相應的預評估工具（S）。 將迭代最後測試在教學設計。 選擇或開發基於所需的入門級職位或繼續教育所需的知識，技能和能力適當的崗位評估工具。 第1節研究和分析來評估知識，技能，能力，專長，興趣和目前的測試，工具和手段。 學習評估可能發生之前，期間和指令之後。 指令前發生的預評估活動，並可以通知程序入口的決定。 預評估也有助於確定一個程序，提供多種學習水平之內的位置。 正在進行的評估程序過程中發生。 這種評估可以在特定的，不同的評估機會，如進度測試執行的。 或者評估可能會不斷地進行，嵌入到課程中來評估了解學生的發展的水平。 最後的評估，或後評估，發生在教學計劃的結束。 後評估，可以確定程序完成或認證。 評估的範圍可以從紙和鉛筆測試，以觀察學生的表現，以審查編寫的學習者的工作組合。 所有這些方法都是有效的用於不同目的的不同的程序。 大部分在能力測驗中傳統的評估中心。 成就測試旨在衡量一個學生的知識和技能，在一個特定的內容區域。 對於大型服務人口的計劃，標準化成績測試中佔主導地位，因為這些也有助於匯總數據，方案評價。 然而，許多關注圍繞採用標準化成績測試，尤其是在測量高層次思維技巧，還是在專業學習的人群。 另類評估方法，如通過投資組合業績評估，提供學生證明知識，技能和能力，實際工作中的例子，或真實評價。 該EnterTech項目將包括評估策略的組合：正宗的評估，投資組合評估，嵌入式評估和成績測試評估。 正宗評估 評估活動可以被認為是正宗的，當他們衡量學習具有價值超越了課堂，是有意義的學習者。 （Kerka）傳統的評估活動，如選擇題測試，可以測量存儲的知識和知識檢索，但是當應用到這樣重要的工作技能，批判性思維和個人的責任往往沒有達到。 真實評價試圖接近真實世界的性能將被預期。 內EnterTech課程，學生將通過他們與工作有關情況作了互動和選擇進行評估。 從選擇可能的解決方案，以解決在流水線上生產的問題，正確地完成了庫存盤點和記錄結果到電子表格中的運輸部門，學生的成績將通過實際工作技能的表現來衡量。 精心設計的正宗評估證明什麼學生知道，可以做一個數組; 他們展示的產品和學習的過程; 他們是累積，描繪學習者隨時間增長。 （Kerka）當對準的課程，真正的評估進行連接理念和行動轉化為現實的環境和提供自我監測和反思學生。 （同上） 檔案袋評價 最廣泛使用的技術在真實評價是學生的組合。 投資組合包括一流的工作，在工作技能清單等級進步樣本，雜誌記錄學生的反應，以指導和活動。 （伯特Saccomano）通過組合，學生可以創建自己的成就，技能和目標，持續記錄。 這些信息的學生加入到投資組合可以創建指令後的資源使用過。 從反映和加劇個人素質，發展職業教育的清單，從保持手頭上現有的簡歷，到包括樣品求職信，組合成為個人的工具有價值的生活和職業生涯的決定。 嵌入式評估 作為學生導航通過基於計算機的情況下，他們的技能，因為它們與指令交互評估。 這是被稱為嵌入評估。 而不是週期性地停下來，真偽，多選或其他傳統類型的評估工作，學生在不斷地評估為他們解決問題的解決，並選擇或輸入解決方案集成到計算機。 計算機提供存儲被程序內管理的評估結果的手段。 甚至，電腦可以計算出學生的學習進度和prescriptively分支學生到日益複雜的技能水平或修復未經證實的技能。 基於計算機的性能測試結果將被儲存在一個報告中，學生可以打印他們的個人投資組合。 標準化成就測驗 採用標準化成績測試是有問題的有針對性的學習人群EnterTech，如以前在有針對性的學習特點報告本報告中詳細描述及更高版本。 然而，這樣的成績測試仍然是得克薩斯州學校和服務供應商標準的評估工具。 例如，人類服務的得克薩斯部門通過成人基礎教育（TABE），而德克薩斯州的公立學校的任務是測試學生的技能與得克薩斯州學業成就系統（TAAS）的測試評估客戶的技巧。 此外，EnterTech指令的一個預期結果是，學生能夠通過工作重點評估考試的技能水平來確定適合異形的課程的入門級職位。 而標準化成績測試將不被用作EnterTech教學計劃內的迭代測試方法，它們可以用於對預先必要技能和後教學成果的措施是有用的。 由於許多指學習者到EnterTech程序的組織已經在使用的標準化考試，它是有益的 - 在節約成本和時間方面 - 關聯這些措施EnterTech項標準，並使用預先收集到的結果來評估學生的適當配入 該程序。 同樣，如果學生因此選擇程序結束後把工作帶鑰匙的評估，這些評估的結果可以用來驗證這兩個技能的學習程度和程序的有效性。 本報告的以下各節更充分地闡明可能的學習者評估策略的EnterTech項目。 正在進行的評估活動必須選擇或開發的串聯與教學材料和學習活動。 該報告概述了不同類型的評估，並鏈接到競爭力的地區。 附錄中包含的描述很多，獨立評估工具已經由得克薩斯學校和公共服務機構使用; 這些都可以在獲得預評估和後評估結果幫助。 第2節確定的前提條件進入Entertech項目培訓計劃，並選擇或制定相應的預評估工具（S）。 預評估EnterTech應包括： 必備技能的措施，以及 職業興趣/能力的措施，並結合職業諮詢指導，提供潛在候選人的強項進行實質性的畫面。 這一過程將有不少考生誰在歷史不良反應以傳統的測試來實現。 EnterTech將被提供在不同的設置，其中可能的是候選人可能經過的測試為預篩分的現有電池。 因此，EnterTech預評估過程必須在徹底性和需要避免負擔過重的潛在候選人與測試之間微妙的平衡。 預評估的用於EnterTech的主要目的是提供關於個體的資格進入節目信息。 次要，但也很重要，目的預評估提供數據，以幫助衡量計劃的有效性。 有幾個因素影響適當的預評估活動的選擇EnterTech。 EnterTech目標學習者測試不佳的傳統樂器（目標學習者特徵報告） 需要一個靈活的啟動窗口，以避免轉身離開遲到了預評估（柯倫約旦）到達分鐘，有興趣的學生。 廣泛的先決條件測試轉離感興趣的學習者（萊特爾沃爾夫） 前提技能評估工具 考慮可能適用於EnterTech預評估使用多種儀器進行了審查。 這份名單並不詳盡，但代表了儀器最常用的測試規定的前提技能EnterTech。 換句話說必備技能EnterTech是： 8年級的閱讀水平 六年級數學 （EnterTech規劃會議，1998年9月9日） 回顧預評估手段有： ABLE（成人基本學習考試）和 選擇（定位器測試ABLE） ASVAB（軍種職業能力傾向電池）和 CAT-ASVAB（計算機自適應考試，ASVAB） CASAS（綜合成人學生評價體系） TABE（成人基礎教育測試），TABE定位測試， TABE，與工作有關的基本技能 TAAS（德克薩斯州學業成就系統） TALS（應用識字技能測試） 工作鍵 WRAT-3（寬範圍成就測驗，第三版） 在這些工具的更全面的信息包含在附錄本報告。 另一個方面可能適用於預評估將個人的職業興趣和性向。 職業諮詢應附帶預評估測試EnterTech。 這可以包括與輔導員現場互動以及職業興趣/性向儀器。 所有儀器的審核測試相應的必備技能：8年級的閱讀水平，六年級的數學能力。 在本次審查的前期評估工具考慮的標準如下表所示。 相應的受眾有針對性的 - 年輕成年人成人，不同的種族背景，主要是女性，在傳統的學術環境高票落選，其中包括標準化測試情況 的測試取長度有限-Preference應給予率在更短的時間的基本信息的測試。 測試持續了一個多小時，很可能不太有效地到達目標的學習者。 這是因為還必須安排額外的程序入境手續（職業能力/利益的措施，職業諮詢訪談）尤為重要。 靈活的測試管理 - 預評估應該可以在個性化，步入式基礎上，鼓勵參與。 集團管理應該還是可以幫EnterTech方案供應商能夠實現測試管理員。 的信度效度-Publishers外部審查做出關於他們的儀器的可靠性和有效性許多索賠。 在作出選擇，節目策劃者需要有某種形式的這些說法的外部審查。 這是比較困難的最近開發的儀器。 該Buros研究所出版了備受推崇的心理測量年鑑系列，具有各種測試學術評論。 心理測量年鑑系列，然而，滯後的最新發展的後面。 例如，1998年版（13心理測量年鑑）從1994年的4 - 5年這種差距防止新引進的儀器從一個層面競爭領域的新文書報告。 其他注意事項 - 另外的因素影響的預評估工具的有效性和適當性。 有些儀器嚴重制約了管理的儀器條件。 有些儀器匯報成績對自己的規模，而不是提供用於確定相等職等的方法。 選擇使用任何手段也應進行篩選，文化偏見，作為目標學習者群體代表偉大的文化和種族多樣性。 前提要求推薦 預評估活動EnterTech需要測量的閱讀和數學的必備技能，以確定考生將能夠從該計劃中受益。 這些技能可以與已經由得克薩斯學校和服務機構採用標準化測試成績來衡量。 本報告八大標準的評估工具進行了審查。 矩陣（表1）顯示了有關在幾個關鍵條件的每個評估信息。 表1.必備技能評估工具 選擇一個評估設計 什麼是研究設計？ 的研究設計僅僅是進行研究的計劃。 這是一個藍圖，你將如何開展你的項目評估。 選擇適當的設計，並通過工作和完成一個深思熟慮的邏輯計劃為實現一個成功的和翔實的計劃評價奠定堅實的基礎。 任何事情不太善意的和結構性或組織可能會導致您的評估過程中的各種不可預見的障礙建立您的評價 - [R esearch設計與數據採集方法 當您繼續通過評估指南的工作，請切記不要研究設計，數據收集方法混淆。 沒有具體的研究設計必須伴隨著一個特定的數據採集方法。 這是兩個截然不同的和獨立的概念。 你會選擇設計已被確定後，數據採集方法。 選擇設計 在你決定最適當的評估設計，你是清楚的主要評價問題是非常重要的。 一旦你已經確定了最重要的評估問題，有幾種設計，也許能夠充分回答你的評估問題。 您可以通過考慮以下內容中選擇一個具體的設計： 它的設計將提供給我我想要的信息？ 如何可行的是每個選項？ 如何有效和可靠的做我發現需要？ 有沒有涉及到選擇具體的設計任何倫理問題？ 多少錢每個選項的成本？ 研究設計類型 下面介紹四種類型的研究設計，提供根據您的具體需求和研究的問題合適的選擇。 預實驗設計 實驗設計 準實驗設計 事後設計 你可以在頁面詳細了解每種類型的設計的底部，點擊標籤，但下面是一些定義，然後再繼續前進，可能會有幫助。 因變量（DV） - 一個因變量是在一個學習興趣的主要變量。 研究人員試圖確定因變量如何變化，自變量的影響。 獨立變量（Ⅳ） - 在實驗中，自變量是變量被操縱或改變。 在非實驗研究中，自變量是可能影響感興趣的變量（因變量）觀察到的變量。 治療/干預 - 在一個實驗中，治療或干預是被操縱的主要獨立變量。 治療或干預的東西，在實驗組只參與者給出。 對照或對照組的參與者不接受治療或干預。 治療或實驗組 - 一個小組的研究對象是誰已經暴露干預的針對性治療。 對照組 - 一組研究參與者誰沒有被暴露於特定的治療。 該術語通常用於實驗設計隨機分配。 對照組 - 一組研究參與者誰也有類似的屬性和特徵作為治療或實驗組。 這個術語通常用於在隨機分配還沒有被使用準實驗設計。 預測試 - 測試前的特定治療或干預管理。 這提供了可以比至介入或治療之後拍攝以後的試驗的基線量度。 後測 - 測試特定的治療或干預後的管理。 後測可以幫助確定研究參與者都回答了治療或干預。 隨機化（隨機分配） - 隨機將研究對象在治療或控制/對照組的過程。 預實驗設計是最簡單的設計的類型，因為它們不包括適當的對照組。 最常見的預實驗設計是前測/後測設計。 一個前後干預設計包括收集僅在計劃參與者的信息。 該信息收集至少兩次：一次是參加者接受治療（基線資料）後，立即之前參與者接受治療。 前測/後測設計可以有效的評價： 改變參與者的知識（如有關大學或財政援助） 變化的參與者對大學的態度 改變參與者的成績和考試成績 這種類型的設計是最嚴格的建立計劃活動和結果之間的因果關係。 但是，採用這種設計的結果可能已足以表明你的程序發揮作用取決於如何嚴格的證明必須是，時間接近該方案的執行情況和結果的進展情況，並系統地消除其他替代的解釋之間 。 預實驗設計特點 不是真正的實驗設計 設計不控制的許多外部因素 受到許多威脅的有效性 探索性的目的通常進行 通常方便和經濟上可行 三種類型的預實驗設計是： 單次案例研究 一個一組，前測/後測研究 靜態組比較研究 下圖提供了有關這些設計更具體的洞察力。 預實驗設計 如果您需要更多的大量證據，前測/後測設計，不推薦。 最好的證據可以通過一個實驗設計，在項目評估和研究的“金標準”來實現。 一個好的實驗設計可以顯示在你的程序和重點學生成績的參與之間的因果關係。 的關鍵這種設計是，所有有資格的項目參與者隨機分配至治療組或對照組。 當隨機分配的情況下，假定在這兩個對照組和治療組的參加者具有類似的屬性和特徵。 一個真正的實驗設計的目的是控制偏壓。 在一個真實的實驗中，在因變量的差異可以是直接歸因於改變獨立變量，而不是其他變量。 實驗設計的特點 研究控制操縱干預或治療 參與者被隨機分配到組 干預或治療前發生觀察因變量的 較高的內部效度 變量之間的因果關係，可以發現 有限的外部效度（普遍性），由於控制的實驗環境 倫理問題 下面的圖片提供了幾個實驗設計的典範。 需要注意的重要區別是“R”為隨機分配。 如果您正在執行的程序中隨機分配的參與者治療組和對照組是不可能的，準實驗設計，可能是你最好的選擇。 甲準實驗設計非常類似的實驗設計，除了缺少隨機分配。 根據治療和對照組的等價性，從這些設計產生的證據可以說是相當強大的。 為了進行準實驗設計，你需要找到合適的對照組（即一組個人或家庭是相似的參與程序，可以監視和跟踪作為對照組的）。 比較組的特性 對比組的成員可以在所有接受其他類型的服務或根本沒有服務。 比較組應該類似於上會影響你的成果的主要因素，治療組。 不假設兩個基團是完全相似。 您可能需要收集數據，試圖控制電位差作為統計分析的一部分。 啟用實驗時隨機分配是不可能的 避免了通過隨機分配的倫理問題