3-气象灾害预警信号质量检验办法(试行)

1、附件气象灾害预警信号质量检验方法试行为进一步推进灾害性天气预报预警业务开展，加强气象灾害预警信号业务管理，促进气象灾害预警信号质量的提高，依据?气象灾害预警信号发布与传播方法?中国气象局令第16号和?气象灾害预警信号发布业务规定?气发2021476号等文件，制定本检验方法。本方法适用于各级气象台发布气象灾害预警信号的质量检验。一、检验区域预警责任区内的所有预报站点和区域。二、检验对象根据?气象灾害预警信号发布与传播方法?中国气象局令第16号的规定，气象灾害预警信号共有十四类。依据各类气象灾害预警信号的发布标准，综合考虑气象灾害的高影响性、预警信号质量检验所需实况数据的易获取性和检验指标的科学性

2、，暂对省、地、县三级气象台发布的暴雨、暴雪、大风、雷电、冰雹、大雾、霾等七类气象灾害预警信号进行质量检验。三、检验内容对暴雨、暴雪、大风、大雾、霾预警信号进行分级检验和不分级检验。本方法中的大风预警信号主要指对我国陆上大风所发的预警信号。对雷电、冰雹预警信号进行不分级检验。检验内容包括预警信号的准确性和时效性。预警信号的准确性是指实际发生的灾害性天气严重程度与发布预警信号的对应情况。预警信号的时效性是指预警信号发布时间相对灾害性天气发生时间的提前量。四、检验方法一分级检验预警信号的分级检验是对发布的预警信号不同级别与灾害性天气过程强度是否准确对应进行评定。对不同级别预警信号的准确性和时间提前量

3、分别检验。1.预警信号的准确性检验指标:TS评分、空报率、漏报率和命中率。计算公式如下:TS评分：空报率：漏报率：命中率: 式中，NAk为预报正确次数，NBk为空报次数，NCk为漏报次数。K为预警信号级别，一般为1-4级，分别代表蓝色、黄色、橙色、红色预警信号。2.预警信号的时效性检验指标：预警信号时间提前量。预警信号时间提前量由所有发布的预警信号和漏报的灾害性天气的提前时间统计得出。具体计算方法如下：预警信号提前时间: 式中，A为预警信号的发布时间，B为与预警信号对应的灾害性天气实况出现时间。当预警信号正确时，按预警信号提前时间的公式计算。当实况发生后发布的与实况相符的预警信号，提前时间记为

4、0。当预警信号不正确时含空报和漏报，提前时间记为0。针对预警信号提前时间的评定统计三个指标，分别为：1准确预警的时间提前量T1，指所有正确预警提前时间的平均值。 2预警的时间提前量T2，指对所有实况发生的灾害性天气预警提前时间的平均值。 3有效预警的时间提前量T3，指预警信号提前时间总和与应发预警信号次数及预警空报次数之和的比值。 式中，为第K级预警信号的提前时间总和；K为预警信号的级别。二所有级别的检验所有级别的检验是对某类预警信号各级别的准确率和时间提前量的综合评定。所有级别的检验结果由该类预警信号所有级别的预警正确情况和提前时间进行统计计算得到。检验指标:TS评分、空报率、漏报率和命中率

5、，各指标的计算方法与分级检验相同。其中，NA、NB、NC分别是某一类预警信号的分级检验中所有级别预警信号的正确、空报、漏报次数的总和。在对某类预警信号所有级别进行检验时，当发布预警信号级别小于灾害性天气强度，记对应灾害性天气强度的预警级别漏报，不记发布预警信号级别空报；当发布预警信号级别大于灾害性天气强度，记发布预警信号级别空报，不记对应灾害性天气强度的预警级别漏报。检验指标：统计某类所有级别预警信号的提前时间，并统计准确预警的时间提前量T1、预警的时间提前量T2)和有效预警的时间提前量T3。统计计算方法如下： 式中，C为各级别预警信号的提前时间。K为预警信号的级别。三不分级检验预警信号的不分

6、级检验是对灾害性天气过程是否发布了相应类别预警信号以及预警发布的时间提前量进行评定，不评定预警信号的级别与灾害性天气过程强度是否准确对应。检验指标:TS评分、空报率、漏报率和命中率。各指标的计算公式如下：TS评分： 空报率：漏报率：命中率: 式中，NA、NB、NC分别是某类预警信号不分级检验的正确、空报、漏报次数。在不分级检验中，当实况灾害性天气强度到达该类预警信号任一级别标准，且发布了该类灾害性天气的任一级别预警信号，即评定预警正确，不考虑灾害性天气实况强度与预警信号级别的严格对应；当出现灾害性天气，但未发布该类灾害性天气任何级别的预警信号时，评定该类灾害性天气漏报；当发布预警信号，但未出现

7、灾害性天气时，评定为该类预警信号空报。根据统计的报对、空报、漏报次数，计算不分级检验的TS评分、空报率、漏报率和命中率。检验指标：预警信号时间提前量。预警信号时间提前量计算方法如下：预警信号提前时间：式中，A为预警信号的发布时间，B为与预警信号对应的灾害性天气实况出现时间。在预警信号不分级检验中,预警信号的发布时间指对某次灾害性天气过程首次发布预警信号的时间,不统计在灾害性天气过程发生期间不断变更预警信号的时间。灾害性天气实况出现时间指实况首次到达预警信号最低级别发布标准的时间。对预警信号提前时间的评定统计三个指标，分别为准确预警的时间提前量T1、预警的时间提前量T2)和有效预警的时间提前量T

8、3。计算方法如下： 五、检验规那么一根本规那么1.当发布预警信号或实况到达了预警信号发布标准时均要进行检验。2.预警信号检验以县区为检验单元。当县级气象台发布本县预警信号或省级、地市级发布的预警信号中包含了某县区，且该县区实况到达了预警正确的标准，即评定对该县区的预警正确，不对该县区内每个观测站进行预警正确性统计。针对县级气象台发布的预警信号，通过对一定时间段内如假设干天或月、季、年对该县预警正确、空报、漏报的次数及每次预警提前时间，统计得出该县预警信号的各检验指标。针对地市级和省级发布的预警信号，通过对一定时间段内每次预警信号中预报的所有受灾害性天气影响县区分别计算预警正确、空报、漏报的县区

9、数，统计得出该次预警信号的各检验指标。例如：某地市级气象台发布的暴雨橙色预警信号中预报有三个县将出现到达橙色预警标准的暴雨，实况为其中两个县到达橙色预警信号标准，另有在三个县之外的一个县降水实况也到达暴雨橙色预警信号标准，那么记为该次暴雨预警报对个数NA为2，预警空报个数NB为1，漏报个数NC为1，分别计算TS评分、漏报率、空报率和命中率。3.当同时出现几类灾害性天气或已经发布几类灾害性天气预警信号时，要对每一类预警信号分别进行检验。当同时出现几类灾害性天气，如只发布了其中一类预警信号，并在预警信号中预报了其他几类灾害性天气，记为同时发布了多类预警信号，分别进行检验。屡次升级或降级预警信号，在

10、预警信号的分级检验时，应记为发布了屡次预警信号，分别检验每个预警信号的准确性和时效性。但对一次灾害性天气过程屡次确认前一级别预警继续有效时，不计为屡次发布预警信号，只对该级别预警信号首次发布的正确性和提前时间进行检验。例如：对一次暴雨过程发布黄色预警信号后，考虑降水将加强，将原黄色预警升级，发布橙色预警信号，那么在预警信号分级检验中，应分别对黄色预警信号和橙色预警信号分别检验准确性和时间提前量。如对一次暴雨过程发布黄色预警信号，考虑降水过程将持续，在前一次发布黄色预警信号的有效预警时段将结束时，继续发布黄色预警信号，那么仅对首次发布的黄色预警信号进行检验，不对再次确认的黄色预警信号进行检验。5

11、.各省确定本省分别用于各类预警信号检验的指标站表。指标站应包含本省所有的具有相应观测工程的国家级自动站以及质量可靠并具有代表性的区域自动站、山洪雨量站和专业气象观测站。每个县区检验指标站中区域自动站和山洪雨量站数量不应低于该县区具有相应观测工程的所有区域自动站和山洪雨量站的50%。高山站含国家级自动站和区域自动站可不作为大风预警信号的检验指标站。各省应将确定的检验指标站表报预报司备案。二预警信号正确性的评定1.不同预警信号正确性的评定标准如下：1暴雨雪预警信号当发布暴雨雪蓝色或黄色、橙色、红色预警信号，且该县有1个以上的检验指标站实况到达发布级别的暴雨雪预警信号标准，记为该级别暴雨雪预警信号正

12、确。当发布暴雨雪蓝色或黄色、橙色、红色预警信号，且该县所有检验指标站均未出现到达发布级别预警信号标准的实况降雨雪，记为该级别暴雨雪预警信号空报。当某县有20%以上四舍五入，少于1站按1站计，下同的检验指标站实况到达暴雨雪蓝色预警信号标准，且未发布蓝色预警信号，记为暴雨雪蓝色预警信号漏报。当某县有15%以上的检验指标站实况到达暴雨雪黄色预警信号标准，且未发布黄色预警信号，记为暴雨雪黄色预警信号漏报。当某县有10%以上的检验指标站实况到达暴雨雪橙色预警信号标准，且未发布橙色预警信号，记为暴雨雪橙色预警信号漏报。当某县有1个以上的检验指标站实况到达暴雨雪红色预警信号标准，且未发布红色预警信号，记为暴

13、雨雪红色预警信号漏报。2大风预警信号当发布大风蓝色或黄色、橙色、红色预警信号，且该县有1个以上的检验指标站实况到达发布级别的大风预警信号标准，记为该级别大风预警信号正确。当发布大风蓝色或黄色、橙色、红色预警信号，且该县所有检验指标站实况均未到达发布级别的大风预警信号标准，记为该级别大风预警信号空报。当某县有20%以上的检验指标站实况到达大风蓝色预警信号标准，且未发布蓝色预警信号，记为大风蓝色预警信号漏报。当某县有10%以上的检验指标站实况到达大风黄色预警信号标准，且未发布黄色预警信号，记为大风黄色预警信号漏报。当某县有1个以上的检验指标站实况到达大风橙色预警信号标准，且未发布橙色预警信号，记为

14、大风橙色预警信号漏报。当某县有1个以上的检验指标站实况到达大风红色预警信号标准，且未发布红色预警信号，记为大风红色预警信号漏报。3大雾霾)预警信号当发布大雾霾黄色或橙色、红色预警信号，且该县有1个以上的检验指标站实况到达发布级别的大雾霾预警信号标准，记为该级别大雾霾预警信号正确。当发布大雾霾黄色或橙色、红色预警信号，且该县所有检验指标站实况均未到达发布级别的大雾霾预警信号标准，记为该级别大雾霾预警信号空报。当某县有15%以上的检验指标站实况到达大雾霾黄色预警信号标准，且未发布黄色预警信号，记为大雾霾黄色预警信号漏报。当某县有10%以上的检验指标站实况到达大雾霾橙色预警信号标准，且未发布橙色预警

15、信号，记为大雾霾橙色预警信号漏报。当某县有1个以上的检验指标站实况到达大雾霾红色预警信号标准，且未发布红色预警信号，记为大雾霾红色预警信号漏报。4雷电预警信号当发布雷电黄色或橙色、红色预警信号，且该县出现云地闪或人工观测到雷电或经其他实况采信渠道证实出现了雷电过程，记为雷电预警信号正确。当发布雷电黄色或橙色、红色预警信号，且该县未出现云地闪或人工观测到雷电或经其他实况采信渠道也未证实出现了雷电过程，记为雷电预警信号空报。当某县出现5次以上的云地闪或人工观测到雷电或经其他实况采信渠道证实出现了雷电过程，且未发布雷电预警信号，记为雷电预警信号漏报。5冰雹预警信号当发布冰雹橙色或红色预警信号，且该县

16、观测到或经其他实况采信渠道证实出现了冰雹过程，记为冰雹预警信号正确。当发布冰雹橙色或红色预警信号，且该县未出现冰雹天气过程，记为冰雹预警信号空报。当某县出现冰雹天气过程，且未发布预警信号，记为冰雹预警信号漏报。2在预警信号的不分级检验中，当发布某类气象灾害的任一级别预警信号，且该县有1个以上指标站实况到达该类气象灾害任一级别预警信号标准，记为该类预警信号正确；当发布某类气象灾害任一级别预警信号，且该县所有检验指标站均未出现到达该类气象灾害任一级别预警信号标准的实况，记为该类预警信号空报；当未发布某类气象灾害预警信号，但该县实况到达了以上第1条确定的该类预警信号任一级别的漏报标准，记为该类预警信

17、号漏报。3在发布预警信号后，在预警信号有效时段内出现相应的灾害性天气，记为预警信号正确；实况出现在有效时段之外，记为预警信号空报、灾害性天气漏报。根据气象灾害预警信号发布与传播方法的规定，不同预警信号的有效时段如下：表 预警信号的有效时段单位：小时预警信号类别预警时段蓝色黄色橙色红色暴雨12633暴雪121266大风241266大雾1262霾242424雷电622冰雹62预警信号的有效时段一般是以预警发布时间为初始时间往后顺延规定的小时数。但假设在预警信号内容中注明了预警有效时段，那么以注明的时段为准。例如：在08时发布的暴雨黄色预警信号中表述为“今天午后14时到20时出现雨量达50mm的暴雨

18、天气，那么该预警信号的有效时段为14时-20时。4预警信号有效时段内出现相应的灾害性天气是指在预警信号有效时段内实况到达了预警信号标准。对暴雨、暴雪等过程性事件，从降水发生后开始每10分钟一次统计过去12小时、6小时和3小时累积降水量，如有一个时段的降水量到达了暴雨雪预警信号标准，且到达预警信号标准的时间在预警时段内，那么在不分级检验中记为预警信号正确，如降水量实况到达了预警信号发布级别标准，记为分级检验预警信号正确。例如：07时开始降水，09时发布暴雨橙色预警信号，11时过去3小时08时-11时累积降水到达50mm，那么橙色预警信号正确，预警的提前时间为120分钟。5.在暴雨、暴雪、大风、大

19、雾、霾预警信号分级检验中，当实况出现的灾害性天气强度和发布预警信号级别不一致时，选择较大量级作为检验的级别，检验时只评定该级别。例如：发布暴雨蓝色预警信号，但实况降水强度到达了暴雨橙色预警信号标准，那么记为暴雨橙色预警信号漏报，不记暴雨蓝色预警信号空报。如发布暴雨橙色预警信号，实况降水只到达了暴雨黄色预警信号标准，那么记橙色预警信号空报，不记黄色预警信号漏报。6在暴雨、暴雪、大风、大雾、霾预警信号分级检验中，当某固定时刻的实况同时到达某类预警信号多个级别的标准，那么根据不同级别预警信号的漏报标准，认定为出现了多个级别中最高级别的实况进行检验。例如：某县实况有1个以上检验指标站只到达了蓝色预警标

20、准，此时发布暴雨蓝色预警记为正确；如该县实况有1个以上指标站到达蓝色预警标准，且有1个以上指标站到达黄色预警标准，但到达黄色预警标准的站数未到达全部指标站的15%以上，此时发布暴雨蓝色预警或暴雨黄色预警均记为蓝色预警或黄色预警正确；如该县实况有1个以上指标站到达蓝色预警标准，并有1个以上指标站到达黄色预警标准，且到达黄色预警标准的站数到达全部指标站的15%以上，此时发布暴雨黄色预警记为正确，发布暴雨蓝色预警记为黄色预警漏报，不记蓝色预警空报，以此类推。7.在暴雨雪预警信号分级检验中，针对一次暴雨雪过程的变化屡次发布或更新预警信号时，如最后发布的预警相对前一次预警为降级的预警，降级的预警发布后，

21、实况未到达该级预警标准，不对该级预警进行检验；如降级的预警发布后，实况到达该级预警标准，记该级预警正确；如实况减弱后仍到达了某级别预警标准，且该实况已超出前一次预警的有效时效且未发布更新的预警，那么记为实况到达的预警级别为漏报。8.实况已出现考虑过程将持续时发布的预警信号，如预警信号在实况出现后30分钟内发布，记为预警信号正确，否那么，记为实况所对应的预警信号漏报。三预警信号时效性的评定1.在计算预警信号时间提前量时,预警信号发布时间A为各级气象台站预警信号发布单上的发布时间，精确到分钟。2.灾害性天气实况出现时间B为某县区域内到达预警信号标准的所有检验指标站实况时间的平均值，精确到分钟。如某

22、县区域内有3个指标站实况降水量到达暴雨蓝色预警标准，其到达标准的时间分别为10:30、10:35和10:40时，那么暴雨蓝色预警的实况出现时间记为10:35时。3.县级发布预警信号对应的实况出现时间按上述第2条计算。省级和地市级发布的预警信号，其对应的实况出现时间取该类灾害性天气影响的所有县中最早到达该预警信号标准的县的实况时间。受灾害性天气影响的每个县实况出现时间按照上述第2条计算。四检验结果的统计月、季、年检验结果的统计应依据逐日预警信号正确次数、空报次数、漏报次数和预警信号发布的时间提前量，计算各检验指标。季度和年度检验不能采用多个月份检验结果的算术平均来进行统计计算。六、实况采信根据不同天气现象和气象要素的观探测手段，气象台站的观探测数据、外部门民政、农业、水利、交通、卫生、电力、建设、国土等的情报数据、乡镇气象信息员报告、媒体的新闻报道等均可作为实况依据。灾害性天气实况采信依据以