动物疫病防控实践中，为了进行科学、有效决策，需要了解疫病的发生水平、分布状况，评价防控措施实施效果，尽早发现新发病、外来病或证明无疫；需要系统、重复或不间断地收集、整理和分析与动物疫病有关的信息，并及时传递给需要的人或单位，以便其决策并采取相应的行动，这就是动物疫病监测。根据动物疫病监测的定义，实践中很多活动产生的数据与动物疫病有关，如养殖场户疫病报告、产地检疫、屠宰检疫、实验室检测、疫苗免疫等。一种活动就是一种监测数据的来源，所有的活动构成了监测系统。动物疫病监测系统（以下简称监测系统）评价，是用一系列指标对监测活动的功能、相关性、过程、效率、有效性和影响因素等进行评价，为监测系统的设计、改进、优化提供决策支持。在公共卫生领域，为了高效利用有限的资源，许多国家应用相对标准化的评估方法，对公共卫生监测系统进行评价，以此提升监测水平，节约资源，优化系统，从而提高疫病预防和控制能力。在动物疫病领域，部分国家也开展了针对特定疫病的监测系统评价。但这些评价多数是针对单个或少数特定属性进行的。本文在充分理解监测系统评价属性、步骤与内容的基础上，综合分析各评价指标，以期为监测系统评价标准的建立和完善、实际评价工作的开展提供参考。
1、评价监测系统的常用指标
1.1 覆盖率（Coverage）
是指监测系统或监测活动覆盖的群体在目标群中所占的比例。如，屠宰检疫作为羊病的一种监测活动，其所覆盖的动物主要为成年动物，屠宰检疫动物数量在当地该动物饲养量中所占比例，即为屠宰检疫这一监测活动的覆盖率。覆盖率越大，监测系统的代表性越好，偏倚越小，但成本可能会相应提高。
1.2时效性（Timeline）
反映的是从获得信息到采取行动的速度。这关系到通过该系统是否能及时预防疫病的传播和扩散。不同目的监测系统的时效性要求不一样。比如，早期发现疫病，需要立即采取行动，对时效性的要求较为严格；而常规报告，则允许根据要求有一定的延迟。评价监测系统的时效性，需要系统分析不同步骤之间的速度，可用第一例病例发现日期到诊断日期、诊断日期和通报日期等间隔天数的中位数和四分位间距来表示，然后对间隔时间进行分组，分别计算整个监测阶段各组所占的百分比 。可通过对数据采集、实验室检测等相关人员进行持续性审查或电子报告系统等途径提高时效性，但应考虑成本、数据完整性等因素。
1.3代表性与偏倚（Representativeness and bias）
代表性是指由监测系统获得的数据反映目标群特征的程度；而偏倚是指监测系统所产生的结果偏离真实值的程度。估计疫病流行率或分布时，具有代表性的监测系统能准确描述感染或疫病水平以及在目标群中的空间和群间分布。如果基于非代表性抽样，则会产生偏倚，此时可使用“捕获 - 再捕获” 方法估计流行率。如果是发现疫病或证明无疫，则可以选择基于风险的监测来提高效率。
1.4敏感性与特异性（Sensitivity and specificity）
二者是确定监测系统准确性的指标。监测系统敏感性包含两层含义：一是监测系统发现的病例在实际存在病种中所占的比例；二是某病在群体中存在时，通过监测系统发现该病的可能性。在发现疫病或证明无疫时，敏感性是评价监测系统质量的关键指标。敏感性与调查动物的数量、检测试验的特性和预设流行率等因素有关，可以通过主动监测、追踪可疑病例等途径来提高。特异性是指实际无病的群体被监测系统正确判为无病的可能性。系统准确性依赖于监测对象的特性、诊断试验的选择、阳性结果的判断标准等。
1.5预测值（Predictive value）
反映监测结果真实性的指标包括阳性预测值（Positive predictive value，PPV）与阴性预测值（Negative predictive value，NPV）。阳性预测值是指监测系统根据病例定义，在群体中发现“病例”时群体中疫病确实存在的可能性。阴性预测值是指监测系统根据病例定义，没有发现“病例”时群体中确实无疫的可能性。预测值与抽样数量、检测方法准确性、流行率有关。
1.6简单性（Simplicity）
是指监测系统的结构设计简单和容易操作，包括数据易于收集、存储、分析，系统维护费时少，病例定义简单等。简单的监测系统往往灵活，容易被接受。
1.7灵活性（Flexibility）
是指信息要求或操作条件改变时，花费少量时间、人力或费用即可适应这种改变的能力。灵活的系统能够很容易地适应病例定义、技术、资金资源等的变化，使用标准数据格式的监测系统很容易与其他系统整合，这也是灵活性高的体现。监测系统运行过程中，如果没有病例定义、数据要求、新技术等因素的改变，很难评价监测系统的灵活性。
1.8稳定性（Stability）
包括可靠性、可获得性和可持续性。可靠性，也称可重复性，是指在相同条件下，某监测系统重复监测同一动物个体或群体获得相同结果的能力，主要依赖于病例定义的可靠性。病例定义越复杂，可靠性就越低。近年来，常用 Kappa 来分析评价监测系统的可重复性。可获得性是指监测系统可根据需要随时运行的能力。这需要人员、交通工具、实验室设备、数据管理设备、交流系统等多方面资源保障。可持续性是指系统可长期运行的能力，其受资金支持的可持续、公众认知和参与意愿等因素影响。
1.9可接受性（Acceptance）
是指个人和组织参与、使用监测系统的意愿，是系统内部操作人员与外部使用系者的自发积极性，是相对主观的指标，会影响监测系统的敏感性和时效性。评价可接受性可采用参与式调查方法进行，通过报告表格的完成情况、参与率、报告率、访谈完成率、问题拒答率、数据报送时限等指标进行定量评价。
1.10数据质量（Data quality）
是指监测系统所收集数据的完整性和有效性，即数据的可信度，是最重要的评价指标。数据质量的高低可影响到监测系统的可接受性和代表性。质量较高的系统更容易被接受，代表性更好。数据质量受诊断试验特性、表格清晰度、数据填报人员培训、数据管理及系统时效性等因素影响。
1.11成本 - 效益（Cost-benefit）
成本是指监测系统建立和运行时所涉及的各个方面，包括时间、技术人员、资金、标准和指南、设施设备等。效益是指监测系统所产生的直接或间接收益，不仅仅局限于钱，也包括监测系统运行所避免的损失，如资源的优化使用、动物生产和公共卫生的提升、疫病认知的提升或贸易量的增加等。
效果（Effectiveness）是效益的一部分。成本 - 效果在监测系统中反映的是每年每监测到一个病例的平均成本和每个监测单元每年的运行成本，可通过成本 - 效果决定树模型、马尔可夫模型，比较某病在监测与未监测条件下的成本和结果（产量与存活率提高、发病率降低、疫病负担减小等）是否存在差异及其大小。
1.12交流（Communication）
是指监测系统的数据提供者、分析者和使用者之间的信息交换。评价这一指标主要关注信息交换的方法和容易程度，包括所提供的信息、时效性、输出类型及传递信息的措施等。有效的交流渠道和策略可以提高参与者对动物疫病的认识、参与意愿和系统的时效性。研究表明，口头交流（直接交谈、收听广播或参与会议）比书面交流更为有效。
1.13数据管理
是指数据录入、存储、分析和共享等多个方面。评价监测所产生的数据是否得到有效管理，通常包括数据库结构是否合理、数据储存是否予以有效说明和易于理解、数据质量和安全是否有标准等方面的内容。成熟的数据管理系统包括数据管理指南和数据管理组件。数据管理指南中要详细说明数据来源、格式、收集方法、数据分析和解释、人员培训等内容，且数据管理系统可根据监测目的、疫病类型等进行调整。
2、评价步骤与内容
监测系统评价步骤一般包括界定评价的范围、描述所评价监测系统的特征、确定监测系统评价的研究设计、实施评估、报告与交流。具体步骤与内容如下。
2.1界定评价目的和范围
界定监测系统评价目的和范围，首先要在描述开展评估原因和所要解决问题的基础上，确定评估目的。一般情况下，评价目的包括评价监测目的是否实现，监测系统的成本与效果、可操作性、效率、可信度等。
2.2描述所评价监测系统的特征
2.2.1界定和描述监测系统的目标和组成。需要界定的目标是指具体的目标，如发现新发病、外来疫病或确定疫病发生水平、分布状况等。描述监测系统组成是从不同数据源或根据不同的行为来说明监测系统的结构。如果仅评价监测系统的一个组成，还要说明监测系统的其他组成及相互间的关系。
2.2.2描述监测系统对应动物群体的卫生状况。
每种监测系统或组成都有其特定的监测对象。在掌握该种动物群体基本价值链的基础上，描述监测系统或监测活动所覆盖群体的特征，包括区域分布、规模化程度、调运等，以及这些特征近期变化情况，以此判断或定量计算监测系统某些属性。
2.2.3描述监测系统的结构和存在的问题。从数据收集、管理和分析结果发布 3 个方面进行。描述数据收集需要具体说明谁提供数据、谁收集数据、在何地收集数据、如何收集和记录数据、数据种类、是否有数据收集标准、数据收集人员是否接受相关培训、病例定义是什么等内容。描述数据管理需要说明数据如何记录、储存，如何管理，是否有质量保证程序、数据处理标准和数据验证程序等。分析结果发布包括数据分析与结果发布。数据分析要说明分析方法，是否有相应指标及其计算过程；信息传递要说明人员相互间交换信息的方法、频率及采取的行动等。通过对监测系统结构的描述，找出监测中存在的问题及其成因。
2.2.4 确定与监测系统有关的所有人员。确定监测系统运行付费方，数据提供、分析与结果使用人员，根据结果采取行动时的受益、付费和遭受损失的人员等。这些人员是评价某些属性所需数据的来源。
2.3 确定监测系统评价的研究设计
2.3.1 确定评价指标。根据评价目的，选择评价监测系统属性的指标，如敏感性、特异性、代表性、数据类型与完整性等。
2.3.2 确定评价内容和所需数据。根据所确定的评价指标，确定所收集的数据与获取方式。
2.3.3 说明经济学评估类型。由于动物疫病控制主要关注经济问题，所以评价时此部分不可缺少，即根据所收集的数据，选择定性、半定量或定量等具体方法进行成本效益或效果分析。
2.3.4 确定数据收集、分析方法和所用的工具。
2.4 实施评估
按照评价的研究设计，收集、分析所需要的数据，评估所选择的属性。
2.5 报告与交流
确定受众，选择相应的交流媒介，说明所评估监测系统的优缺点、结果的不确定性并提出建议。
3、评价方法
鉴于监测系统评价的复杂性，目前还没有统一、全面的监测系统评价方法。当前针对监测系统的评价，均是根据特定目的，选择相应的指标进行评价。针对不同指标，既有定性的、又有定量的评价方法。动物卫生领域评价监测系统的方法中，定量方法远远超过定性方法。最常用的定量方法是测量所报告真实病例的比例，相互比较评估不同监测系统之间的相对敏感性（监测系统发现的病例在群体中的比例），也有应用高级统计学方法计算监测系统的敏感性与阴性预测值、估计群体中病例所占比例等，如在随机情景树模型、捕获 - 再捕获技术等方法。定性方法一般依据专家观点或主观赋分进行评估，主要用于人类公共卫生监测系统评价。实际工作中，监测系统评价通常会同时采用多种方法，如用定量方法评价监测系统数据的完整性的同时，用定性的方法评价系统的可接受性和实用性。成熟的监测评价系统应将定性评估和定量评价结合起来，不断整合新信息，并根据监测目的和疫病类型的变化适时调整。
4、小结
监测系统的评价涉及监测的全过程和系统的各方面。详细了解疫病监测系统的组成和运行，明确评价步骤和内容，是疫病监测系统评价的基础。目前还没有全面的监测系统评价方法，但针对不同的监测目的，选择相应的关键指标进行详细评价是常用的做法。现有评价方法和评价工具主要针对系统属性或组分，即使可以对整个监测系统进行评价，也只在有限范围内得到应用。评价的最终目标是对监测系统不断优化，使之更好发挥作用。因此，评价工作也应该是不断重复的过程，为了保证统一性，应建立一套评价监测系统的标准。
