本網站使用 Cookies。如 Cookies 橫幅未有彈出,請參考 Cookie政策 自行檢視、啟用或停用。

以邏輯模型設計評估

當你建立邏輯模型後,項目的不同元素便能清晰呈現。因此,你可以明確訂立全面的評估指標,助你有系統地進行項目評估。


清晰的邏輯模型能助你的項目評估事半功倍:皆因邏輯模型展示了不同階段用作評估的部件,讓你有系統地考慮收集甚麼數據(包括思考誰的數據)、何時收集、如何收集、向誰收集等。如果邏輯模型並沒有展示特定的評估指標,評估時就不應將其包括在內。

通常建基於務實主義 (pragmatic approach) 的項目未必會事前設立邏輯模型,但即使你的項目或服務並非建基於邏輯模型,你都可以按上述步驟建立一個,有助你未來為項目作更多規劃及評估。

邏輯模型帶有數個評估範疇:實行 (Implementation)、效能 (Effectiveness)、效率 (Efficiency) 及因果歸因 (Causal Attribution)。由於首三個範疇與前線工作者更相關,下文將放眼這些範疇作闡述。為演示如何從邏輯模型的元素得出評估指標,我們將沿用上頁的例子。

邏輯模型設計評估:以性教育工作坊為例

實行 (Implementation)

元素例子評估指標
輸入員工時間、金錢、物資、夥伴空間輸入 (Inputs) 的評估通常以描述為主。雖然有時看似很直接且無用,但保留準確的輸入紀錄確實至關重要。

除了可以滿足提供資金組織的要求外,這些紀錄同時能提供線索,協助安排未來的人手及資源分配。
活動派發傳單、進行性教育工作坊、策劃推廣活動活動 (Activities) 的評估可以了解活動是否按計劃進行。除了記錄指定時段的活動數量外(例如一個季度),這些活動還可以用其他方法評估。

例如,安排主管去進行性教育工作坊的觀課,確保和維持工作坊的質素。
產出 已接收傳單的人、性教育工作坊活動流程、已策劃的推廣活動類似活動,產出 (Outputs) 能以量性 (quantitative) 評估 - 已接受服務的人數、已訂立活動流程的數量。

以派發傳單為例子,如果希望提升項目成效,我們能夠以傳單在不同地區接觸到不同階層人士為目標。因此,評估時我們可以收集受眾的人口統計資料 (demographic),評估傳單的覆蓋率。雖然上述收集的資料有利進行深入研究,我們需要考慮怎樣可行地得到這些資料、有甚麼資料可以收集得到。

效率 (Efficiency)

上述實行元素的數據收集後,我們可以檢視一下不同元素間的效率如何。

效能 (Effectiveness)

元素例子評估指標
短期成果性知識增長、對項目推廣議題的意識提高短期成果 (Short-term outcomes) 一般針對可以即時改變的事物,如指定主題的知識和意識。最常見用來記錄這些轉變的工具就是問卷。按項目的實行情況,問卷能以前測後測形式進行,或只進行後測。

非常重要的一點是在評估期間如何問問題。例如,你不會問「你的性知識有增長嗎?」,反而會以問題測試參加者一些活動中提及的知識。

另外,值得一提的是因果歸因 (Causal Attribution) 在短期成果的評估中最容易達成,因為多數在活動推行後即時收集數據。
中期成果 對安全套觀感變好、性行為時更願意使用安全套、更多人表示性行為時持續使用安全套收集態度和行為改變等中期成果 (Intermediate outcomes) 的數據時,問卷都是常用的工具。

收集數據時需要考慮以下幾點:
1. 你預計甚麼時候會有態度和行為上的改變? – 這會是理想收集中期成果數據的時機
2. 如何尋找參與你活動的人來提供資料?
3. 如何利用問題字眼和問卷設計來避免自評偏差 (self-report bias)?
4. 如何確保參加者能夠準確記得和提供有關行為指標的資訊? – 例如問題會否限制時間範圍?或提供日記形式工具來確保參加者能夠準確記錄資訊?

其他質性 (qualitative) 評估工具都有助了解參加者的態度,例如焦點小組 (focus group) 和社媒聆聽 (social listening) 等。
長期成果接受服務的人性病感染率下降需要評估的成果越長期,代表需時或以年計,收集數據就越困難。

因為這些長期成果 (Long-term outcomes) 是知識、態度和行為共同帶來的改變,所以對個人的影響亦較廣泛。

除了問卷調查,參加者的個人檔案或能就這些改變告知一二,但使用前仍需取得他們同意。
長遠效益高風險性行為減少若然長遠效益 (Impacts) 指標如長期成果般涉及大眾層面,長遠效益評估或需要學術界別的協助。

跳至本文章其他章節︰