監(jiān)控與評(píng)價(jià)me系統(tǒng)的介紹

1、監(jiān)控與評(píng)價(jià)（M&E)系統(tǒng)的介紹,姜世聞中國(guó)疾控中心結(jié)核病預(yù)防控制中心2005年 12月19日 哈爾濱,主要內(nèi)容,M&E的定義M&E的作用M&E的框架M&E指標(biāo)的選擇M&E指標(biāo)的利用,討論概念或定義的關(guān)系,監(jiān)控評(píng)價(jià)督導(dǎo)監(jiān)測(cè),M&E的定義,監(jiān)控與評(píng)價(jià)是 綜合利用社會(huì)科學(xué)和流行病學(xué)研究方法來(lái)評(píng)價(jià)規(guī)劃或規(guī)劃的某一部分的實(shí)施情況及效果，改善并高質(zhì)

2、量的實(shí)施規(guī)劃。 直觀地講其目的是 評(píng)價(jià)規(guī)劃實(shí)施的投入、進(jìn)程、結(jié)果和效果，發(fā)現(xiàn)存在的問(wèn)題，總結(jié)經(jīng)驗(yàn)和教訓(xùn)、提出改進(jìn)規(guī)劃的建議，確保規(guī)劃的質(zhì)量。,,監(jiān)控（Monitoring）是利用投入(input)、過(guò)程(process)或活動(dòng)( activity)、產(chǎn)出(output)的資料，常規(guī)進(jìn)行追蹤規(guī)劃的進(jìn)展。評(píng)價(jià)（Evaluation） 過(guò)程評(píng)價(jià)：衡量規(guī)劃的質(zhì)量和完整性。結(jié)果（outcome）和效果（impact

3、）的評(píng)價(jià)：衡量規(guī)劃對(duì)目標(biāo)人群的結(jié)果和效果。,,督導(dǎo)(Supervision, field visiting)督導(dǎo)是指上級(jí)《規(guī)劃》管理部門(mén)對(duì)下級(jí)《規(guī)劃》實(shí)施單位結(jié)核病控制工作的督察和指導(dǎo)。 督導(dǎo)活動(dòng)是《規(guī)劃》管理的重要內(nèi)容。是現(xiàn)場(chǎng)調(diào)查研究、現(xiàn)場(chǎng)評(píng)價(jià)、現(xiàn)場(chǎng)指導(dǎo)、現(xiàn)場(chǎng)培訓(xùn)和反饋的過(guò)程。監(jiān)測(cè)（Surveillance）常規(guī)或?qū)ｎ}調(diào)查搜集流行病學(xué)資料追蹤疾病的流行趨勢(shì)，為評(píng)價(jià)服務(wù)的。,M&E的作用,M&E與質(zhì)量保證

4、,質(zhì)量保證（Quality Assurance,QA）,質(zhì)量是一種標(biāo)準(zhǔn)，反映結(jié)核病規(guī)劃效益和效用，使供方和需方都得到滿意。質(zhì)量保證：為保證質(zhì)量而建立一系列指標(biāo)，并及時(shí)評(píng)價(jià)，提出改進(jìn)問(wèn)題的對(duì)策，來(lái)改善規(guī)劃的效益與效用。,,2.質(zhì)量標(biāo)準(zhǔn),3.監(jiān)測(cè)標(biāo)準(zhǔn),4.監(jiān)測(cè)評(píng)價(jià),5.重點(diǎn)問(wèn)題,6.確定問(wèn)題,7.問(wèn)題的責(zé)任方,8.分析原因,9.提出決定,10.實(shí)施決定,1.計(jì)劃,質(zhì)量保證循環(huán)圖,,,,,,,,,,,監(jiān)控和評(píng)價(jià)計(jì)劃的重要成分,清晰的規(guī)

5、劃目的及目標(biāo) （可以基于10年和5結(jié)核病控制規(guī)劃和實(shí)施計(jì)劃）為達(dá)到每個(gè)規(guī)劃目的明確的實(shí)施策略（如遏制結(jié)核病策略（Stop TB Strategy 包括DOTS策略)、TB/HIV策略、MDR-TB策略等）一個(gè)描述了投入、過(guò)程、產(chǎn)出、結(jié)果及效果之間關(guān)系的監(jiān)控和評(píng)價(jià)框架 選擇定義清楚的指標(biāo)及如何定義的、如何收集及如何分析的信息簡(jiǎn)述參與監(jiān)控和評(píng)價(jià)的伙伴（如不同的項(xiàng)目或組織）的協(xié)調(diào)，包含他們的要求及貢獻(xiàn)分享和利用監(jiān)控和評(píng)價(jià)結(jié)果的措施,

6、M&E是規(guī)劃或項(xiàng)目管理的主要內(nèi)容,領(lǐng)導(dǎo)、機(jī)構(gòu)、項(xiàng)目進(jìn)程管理財(cái)務(wù)管理設(shè)備采購(gòu)與管理M&E,M&E的重要性的概括,在日常的衛(wèi)生規(guī)劃管理M&E是非常重要為規(guī)劃管理者確定策略、設(shè)計(jì)計(jì)劃、組織實(shí)施，以及確定人力和財(cái)力資源提供信息。追蹤是否達(dá)到了目標(biāo)，如果沒(méi)有就要在中期進(jìn)行修訂或調(diào)整。,質(zhì)量框架 系統(tǒng)模型,過(guò)程Process,投入Input,產(chǎn)出Output,,,如果按照計(jì)劃進(jìn)行投入，可以

7、開(kāi)展活動(dòng),如果按照計(jì)劃開(kāi)展活動(dòng)，可以獲得產(chǎn)出,如果按照計(jì)劃獲得產(chǎn)出，可以獲得結(jié)果和效果,,,結(jié)果和效果Outcomeimpact,,監(jiān)控和評(píng)價(jià)框架,活動(dòng)（過(guò)程）需要什么投入從活動(dòng)期望什么產(chǎn)出由投入、過(guò)程及產(chǎn)出產(chǎn)生的什么短期和長(zhǎng)期結(jié)果 預(yù)期規(guī)劃所產(chǎn)生的作用,保證質(zhì)量的痰標(biāo)本顯微鏡檢查,提供有效的治療管理,提供免費(fèi)的標(biāo)準(zhǔn)化治療,不間斷提供有質(zhì)量保證的藥物,結(jié)核病健康教育,M&E指標(biāo)內(nèi)容,,選擇指標(biāo),基于規(guī)劃目的和目標(biāo)

8、考慮指標(biāo)的實(shí)用性 （能夠?qū)嶋H衡量你感興趣的變化或進(jìn)展）考慮數(shù)據(jù)收集的可行性（費(fèi)用和實(shí)際性）考慮可比性 （不同時(shí)間和跨地域是可比的）考慮在哪個(gè)級(jí)別使用 （國(guó)家和省或下級(jí)）,選擇指標(biāo)(indicator)的標(biāo)準(zhǔn),四、資料收集的方法,完善的監(jiān)測(cè)評(píng)價(jià)體系，缺少不了完整的資料，而好的資料又來(lái)源于優(yōu)秀的收集方法。即力求于方便、易行，便能獲得有效資料的方法。在結(jié)核病規(guī)劃監(jiān)測(cè)體系當(dāng)中，主要存在三種方法：,（一）利用規(guī)劃報(bào)表,我國(guó)現(xiàn)行的結(jié)

9、核病防治規(guī)劃報(bào)表包括月報(bào)、季報(bào)和年報(bào)。月報(bào)表涉及內(nèi)容主要有病人發(fā)現(xiàn)、登記報(bào)告，以及病人轉(zhuǎn)診追蹤情況。作為常規(guī)報(bào)表，月報(bào)表為結(jié)核病規(guī)劃提供了最基本的連續(xù)型資料，能及時(shí)反應(yīng)各級(jí)的病人發(fā)現(xiàn)工作；季報(bào)表要求各級(jí)（省、地市和縣級(jí)）在每季度初上報(bào)上季度的工作情況，該表涉及內(nèi)容廣泛，包括病人發(fā)現(xiàn)、治療管理、治療轉(zhuǎn)歸、藥品供應(yīng)、培訓(xùn)工作等各個(gè)方面。利用季報(bào)表是目前獲得資料，開(kāi)展結(jié)核病監(jiān)測(cè)工作的重要方法之一。,（二）現(xiàn)場(chǎng)督導(dǎo),報(bào)表中得不到的信息，

10、常常利用現(xiàn)場(chǎng)督導(dǎo)的方法獲取。例如：病例記錄的質(zhì)量、實(shí)驗(yàn)室的操作、涂陰病人的診斷質(zhì)量、DOT的質(zhì)量、醫(yī)院的漏報(bào)等?；鶎訉?duì)有關(guān)工作的建議。,（三）通過(guò)現(xiàn)場(chǎng)和專題調(diào)研,在開(kāi)展監(jiān)測(cè)評(píng)價(jià)工作當(dāng)中，往往需要一些專題資料，如設(shè)備使用狀況、工作人員配置情況，項(xiàng)目經(jīng)費(fèi)支出情況等資料。對(duì)于這些資料的收集，可采用現(xiàn)場(chǎng)調(diào)查和專題調(diào)研的方法。具體通過(guò)現(xiàn)場(chǎng)觀察、詢問(wèn)或下發(fā)文件的形式獲得第一手資料。結(jié)核病控制效果的評(píng)價(jià)常使用患病率、知曉率等專題調(diào)查。

11、通常來(lái)說(shuō)，使用該方法應(yīng)先針對(duì)所需資料設(shè)計(jì)好調(diào)查問(wèn)卷或調(diào)查表格，以方便資料獲得。,（四）回顧現(xiàn)有資料,我們?cè)趯?duì)資料進(jìn)行分析，通常要使用既往資料作比較。對(duì)于這些資料，收集方法主要通過(guò)文獻(xiàn)檢索、期刊查詢等。隨著電子網(wǎng)絡(luò)的日益普及，這些資料均可通過(guò)網(wǎng)絡(luò)快速而準(zhǔn)確地獲得，同時(shí)，一些基本資料（如年度人口數(shù)、人群年齡分布等）也可通過(guò)網(wǎng)絡(luò)信息輕易得到或更新。值得一提的是，我國(guó)結(jié)核病規(guī)劃已于2004年啟動(dòng)了疾病監(jiān)測(cè)信息報(bào)告系統(tǒng)（即大疫情網(wǎng)絡(luò)直報(bào)系統(tǒng)）

12、和結(jié)核病專報(bào)系統(tǒng)，隨著該兩個(gè)系統(tǒng)的完善，我們結(jié)核病規(guī)劃所需的大部分資料可通過(guò)其直接獲得。,指標(biāo)的特點(diǎn),有清晰的定義正確的計(jì)算公式對(duì)結(jié)果有明確的解釋，優(yōu)點(diǎn)與不足收集的方法或資料來(lái)源收集的頻度,新涂陽(yáng)病人任務(wù)完成率,定義：指一定地區(qū)，一定時(shí)間（一年），在一定人群中發(fā)現(xiàn)和登記的新涂陽(yáng)肺結(jié)核病人數(shù)占年度計(jì)劃發(fā)現(xiàn)新涂陽(yáng)人數(shù)的百分比。公式：發(fā)現(xiàn)和登記的新涂陽(yáng)肺結(jié)核病人數(shù)/年度計(jì)劃發(fā)現(xiàn)新涂陽(yáng)人數(shù)×100評(píng)價(jià)：此指標(biāo)反

13、映該地區(qū)新涂陽(yáng)肺結(jié)核病人發(fā)現(xiàn)的情況，可以對(duì)病人發(fā)現(xiàn)任務(wù)進(jìn)行量化評(píng)價(jià)。涂陽(yáng)肺結(jié)核病人發(fā)病率的估算是關(guān)鍵，即估算的新涂陽(yáng)肺結(jié)核病人發(fā)病率比實(shí)際偏低，發(fā)現(xiàn)率會(huì)偏高，反之則偏低。資料來(lái)源：月報(bào)表、季報(bào)表和網(wǎng)絡(luò)專報(bào)資料收集頻度：月度、季度適用級(jí)別：國(guó)家、省、地（市）、縣（區(qū)）,帳物相符率,定義：指結(jié)防機(jī)構(gòu)庫(kù)存的免費(fèi)抗結(jié)核藥品實(shí)際數(shù)與庫(kù)存記錄相符程度的平均百分?jǐn)?shù)。公式：庫(kù)存的免費(fèi)抗結(jié)核藥品實(shí)際數(shù)/庫(kù)存記錄*100一種藥物帳物相符

14、的計(jì)算方法：根據(jù)藥品出入庫(kù)登記本中的記錄獲得當(dāng)前庫(kù)存的該藥品數(shù)量，對(duì)庫(kù)存的抗結(jié)核藥品進(jìn)行現(xiàn)場(chǎng)清點(diǎn)，記錄該種庫(kù)存藥品的數(shù)量（過(guò)期藥品不計(jì)入），若庫(kù)存記錄與現(xiàn)場(chǎng)清點(diǎn)記錄一致的視為帳物相符。評(píng)價(jià)：該指標(biāo)用來(lái)評(píng)價(jià)結(jié)防機(jī)構(gòu)藥品帳、物管理的質(zhì)量，例如錯(cuò)誤的庫(kù)存存儲(chǔ)記錄、損耗或偷盜。該指標(biāo)的目標(biāo)值為100％，如果指標(biāo)值偏低，則提示藥品登記管理系統(tǒng)需要改善。資料來(lái)源：現(xiàn)場(chǎng)（藥品出入庫(kù)登記本和庫(kù)存）收集頻度：不定適用級(jí)別：省、地（市）、縣

15、（區(qū)）,結(jié)核病特定知識(shí)知曉率,定義：了解結(jié)核病特定知識(shí)的人數(shù)占被調(diào)查人數(shù)的百分比。公式：結(jié)核病特定知識(shí)的人數(shù)/被調(diào)查人數(shù)×100評(píng)價(jià)：反映被調(diào)查者對(duì)結(jié)核病防治知識(shí)的了解程度以及健康促進(jìn)的效果。說(shuō)明：建議結(jié)核病特定知識(shí)調(diào)查內(nèi)容由中央組織有關(guān)專家討論決定，建議內(nèi)容為資源庫(kù)中的5個(gè)核心內(nèi)容。要獲得科學(xué)、客觀的結(jié)果，調(diào)查應(yīng)采取統(tǒng)一的調(diào)查方案、方法和標(biāo)準(zhǔn)。缺點(diǎn)：被調(diào)查的目標(biāo)人群文化程度的差異影響調(diào)查結(jié)果，實(shí)施難度大。

16、資料來(lái)源：專題調(diào)查收集頻度：每5年一次，在無(wú)基線數(shù)據(jù)的情況下增加一次基線調(diào)查。適用級(jí)別：國(guó)家、省級(jí)和大的地市,M&E的利用,分析使用 為決策者或規(guī)劃管理者制定政策、策略和計(jì)劃提供依據(jù)傳播 利用各種途徑，如：報(bào)紙、通報(bào)、小冊(cè)子、圖表等可視、可聽(tīng)、可看等方式傳播。,M&E活動(dòng)的關(guān)系,監(jiān)控（Monitoring）,信息收集Quality report,現(xiàn)場(chǎng)督導(dǎo)Supervision,專題調(diào)研