对本报告研究工作的启示
对2019年度公开发布的典型报告进行梳理,可以发现各研究团队在开展研究工作中的一些共性之处以及最新的研究动向,这对本报告未来的研究工作具有一定的借鉴价值。
1.关注实践的发展
对于一项评估工作而言,指标的稳定性是数据结论可比性的保障,在理想状态下,指标体系应当连续且稳定,从而使不同年份的数据之间具有绝对的可比性。但是,就政府相关的评价体系而言,中国特色社会主义进入了新时代,技术、经济和社会不断发展进步,一方面对政府的服务与治理不断提出新的要求,另一方面政府自身也在不断应用新理念、新技术和新方法开展持续改革。以网络和大数据技术对政府的影响为例,党的十九届三中全会作出了深化党和国家机构改革的决定,提出要充分利用信息化技术手段,提高政府机构的履职能力。国务院要求推进政务服务“一网通办”和企业群众办事“只进一扇门”“最多跑一次”,加快推进“互联网+政务服务”、政务信息系统整合共享、审批服务便民化和建设一体化在线政务服务平台等工作。广东省于2018年10月印发了《广东省人民政府关于印发广东省“数字政府”建设总体规划(2018—2020年)》,提出构建“数字政府”技术支撑体系,打造一体化高效运行的“整体政府”。其一方面打破了各部门内部业务壁垒,以全局、整体的思路整合资源、优化流程,提高跨部门协同能力;另一方面以一体化、便捷化、智能化的管理和服务,进一步提升了企业和群众获得感。在这种情况下,有关政府公共服务提供、电子服务能力等的相关评价指标就需要进行调整或增加。
从2019年度选择的几部报告来看,在保持指标体系稳定可比和指标体系与时俱进之间,学者们普遍认为“反映现实发展”是各类评价的首要价值。因此,这些报告的共同特点在于每一年度开展评价工作之前,首先对指标体系进行修正,以充分反映政府相关工作的发展变化。在评价结果可比性方面的处理方法上,尽可能保持一级指标的相对稳定,结合现实发展对二、三级指标进行微调。
2.不断完善研究方法体系
研究方法体系是在操作层面保证评价科学性、严谨性和有效性的重要环节,也是各个研究团队均不断探索完善的重点领域。总体来看,各个研究团队在以下方面均作了相似的思考,但评价的内容和目的不同,所做的选择不同。其一,主观与客观指标的选择。客观指标的优点在于精确、易于获得,并且可以用绝对量指标反映发展阶段特征,用相对量指标反映增长的动态特点,但缺点是无法直接推断“获得感”;而主观指标则能够对“获得感”“满意度”等进行测量,与客观指标形成互补关系,但缺点在于数据的获取难度大。因此,不同的报告在指标选择上采用的方法也不同,《2018中国民生发展报告》全部采用客观指标,而《中国城市基本公共服务力评价(2018)》则将评价一分为二,一部分通过问卷调查获取数据,另一部分通过大数据分析获取数据。其二,指标权重的设置方法。在评价指标体系建立之后,需要对各项指标的权重进行分析设定,目前单纯从方法角度而言,权重设置的方法非常多,可以选择以主观判断为主的方法,也可以选择以统计分析为主的方法。最简单的方法是均等权重法,但该方法对现实情况的反映能力较差。专家判断法是2019年度分析的几部报告中选择最多的,研究团队通过分析判断法或者德尔菲法为各项指标赋权,但这种方法总体仍然较为主观,并且专家的构成、数量等对赋权的有效性具有较大影响。本报告的研究团队在多轮讨论的基础上,采用了主客观相结合的综合赋权法。其三,指标的分析方法。在数据分析的过程中,如何对指标进行综合分析是评价类研究的难点。总体的方案选择有两种:一种是优先考虑纵向时间序列的可比性,例如GDP相关的绝对值指标,可以用于时间序列的比较,但这种方法很难对不同类型、不同取值的指标进行综合分析;另一种是优先考虑横向间的可比性,即在每年度的评估时点上,通过各项指标的标准化处理,对该时点的评估主体的表现进行比较分析,这种方法的缺点在于标准化后的数据在跨年度的比较分析时,各年度的数据从严格意义上讲不具有可比性。2019年度选择的几部研究报告大部分采用了后一种方法,即通过不同类型指标的标准化(通常以百分制的方式)来反映2019年度的总体情况,并进行横向比较。
3.运用大数据等先进技术
评价工作的与时俱进还突出体现在新技术的应用上。《中国城市基本公共服务力评价(2018)》采用了大数据技术开展评价工作,这种方法对本研究团队具有较大启发。可用于评价政府能力的数据来源主要有三种。一是各类政府网站和移动服务平台。国务院办公厅于2017年5月3日发布了《国务院办公厅关于印发政务信息系统整合共享实施方案》,该方案围绕政府治理和公共服务的紧迫需要,为推动最大程度利企便民,提出了加快推进政务信息系统整合共享、促进政府信息系统互联互通的重点任务和实施路径。建设政务共享信息化平台可以实现“网络通”“数据通”“应用通”三大目标,在未来政府网站和移动平台进一步规范、信息公开工作进一步标准化的基础上,有关公共服务、政策规章等的信息将不断丰富完善。二是智慧城市数据库。随着智慧城市建设工作不断推进,城市大数据中心也将逐步建设完善。以天津中新生态城为例,目前天津中新生态城建立了统一的通讯基础网络、公共数据中心、视频监控平台等,努力打破智慧城市建设中难以消除的数据壁垒与信息孤岛,实现城市信息的共建共享与综合应用。在此基础上,生态城将现有数据再次进行优化整合,建立智慧城市运营中心,该中心正式投入使用后,可同时运行42个管理系统,汇集11大类业务,辐射数亿条数据,涉及市政、市容、交通、安全、能源、环境等领域,如果能通过授权、协议等方式采集部分评估指标信息,将使评估的准确性进一步提升。三是各类网络信息,包括微信、微博等。《中国城市基本公共服务力评价(2018)》课题组的做法是将在网络新闻跟帖、微信公众号精选评论、新浪和腾讯微博等公开渠道发布的评论文本作为分析对象,识别出公共服务相关话题的有效评论,并运用大数据技术展开分析。
4.对最佳实践进行深度剖析
学者们对政府进行评价,不仅是反映现实情况,更是希望对未来政府能力的提升提出对策建议。从2019年度分析的几部报告来看,《政府电子服务能力指数报告(2018)》的一大亮点在于开展了关于“最佳实践”的分析。最佳实践(best practice),是一个管理学概念,认为存在某种技术、方法、过程、活动或机制可以使生产或管理实践的结果达到最优,减少出错的可能性。在管理实践中,最佳实践的价值在于,一方面为实践的发展提供了努力的方向,另一方面可以帮助管理者通过与最佳实践进行对标,找出当前发展中存在的问题并进行改进。《政府电子服务能力指数报告(2018)》分别从省市政府和国务院部委两个层面,对电子服务、政务网站、政务微博、政务微信和政务App的最佳实践进行了分析和讨论,并对其实践中的特色进行介绍,为其他评价对象的能力提升提供了学习的素材。最佳实践这一分析方法在具体操作过程中还可以进行细分,即梳理总结各一级指标的最佳实践,各二级指标的最佳实践甚至各三级指标的最佳实践,并且分析的指标层级越下沉,越能反映出差异化的特征,为各地方政府提供学习发展的思路与启示。例如南昌市的微信服务能力在全国参与测评的365个省市级行政单位中排名第一,其微信公众号每日平均发布5条图文消息,推送大多为企业、公众密切关注的热点咨询和便民服务信息,南昌市政府门户网站每日推送都有较大的阅读量和点赞量,推送内容均为第一手资料或其他官方资料,时效性亦较强。对最佳实践进行分析的方法是对评价结果进行更为深入的分析和研究,即先从评价指标中分析并找出“最佳实践”,再通过分析发现其做法中的“亮点”,使评价结果向实际应用方向更进一步。
5.进一步开展解释性研究
评价总体上是描述性研究,是对现状的分析描述,而现状产生的原因、存在的问题等需要进行进一步分析,方可对实践产生更加直接的影响。公共管理学科的相关研究十分重视“问题意识”,即通过对当前存在的各种问题进行分析,提出各种对策建议,以期不断改进现有工作方法、工作内容和工作效果。《中国地方政府效率研究报告(2018)》和《2018中国民生发展报告》均涉及解释性研究的相关内容。例如,《2018中国民生发展报告》分析了机构改革、社会治理创新、技术升级等对民生发展的影响,并提出了一系列有针对性的对策建议。课题组在与其他课题组沟通的过程中发现,如何对各种评估过程中积累的数据进行更为深入的分析是各团队思考的共同问题。课题组可以在每年开展评价并出版报告的基础上,针对报告数据所反映出来的突出问题、特殊问题、特色实践等展开进一步分析研究,分析其产生的原因,对经验进行总结,对问题提出对策建议,使报告的内容更加丰富,并为实践工作提供更大参考价值。