引 言
随着政府改革的不断深入,政府绩效评估作为有效的管理工具,在公共行政中受到了广泛的关注。在电子政务绩效考核方面,中央在《2006-2020年国家信息化发展战略》中明确提出要形成统一规范的电子政务绩效评估制度。
政府网站是国家电子政务体系的重要组成部分。它作为政府部门与公众、企业的沟通渠道,可以利用互联网络信息传播的渗透性,打破时间、空间对政务活动的束缚,推动政务信息公开和社会监督在更大范围、更深层次上展开。政府网站建设不仅有利于转变政府的工作作风,创新服务方式,提高政务效能,方便人民群众。同时有利于保障公众的知情权、参与权、表达权、监督权,有利于维护公平正义、促进社会和谐。正因为如此,政府网站绩效评估仍属于政府公共管理和公共服务绩效评估范畴内。
一般来说,绩效主要分内部绩效和外部绩效,外部绩效又分为经济绩效、社会绩效和政治绩效三方面。由于我国政府网站建设起步较迟,绩效评估还处于尝试阶段,从政府网站绩效评估调查的可操作性出发,本文的研究侧重于政府网站的社会绩效和政治绩效方面,旨在探讨如何建立科学的政府网站绩效评估调查方法,来引导政府网站不断提升为民服务的水平。
一、政府网站绩效评估的主体
政府网站绩效评估主体可以被简单定义为直接或间接地参与政府网站绩效评估过程的个人、团体或组织。在政府网站绩效评估实践中,不同的政府网站绩效评估主体得出的政府网站绩效评估结论也会有很大的差别,为了避免绩效评估主体本身给政府网站绩效评估活动带来的负面影响,政府网站绩效评估活动就要在采取科学的考核指标体系、考核方法以及考核方案的基础上,明确政府网站绩效评估主体的组成,即明确由“谁”来进行政府网站绩效评估的实施,以保证政府网站绩效评估的科学、客观和公正。
近年来,越来越多的政府部门开始逐渐认识、接受并实施政府网站绩效评估,但由于受理论准备不足、政府网站的独特性等诸多因素的困扰和制约,目前各地政府所实践的政府网站绩效评估,在评估主体方面存在着一些不足之处,主要体现在以下三个方面:
1.绩效评估主体的单一化。现阶段政府网站绩效评估以官方为主,评估主体在多数地区比较单一,多是上级行政机关对下级的绩效进行评估,缺乏社会组织和社会公众的参与,这就使得大多数政府网站绩效评估实践过程中,只是根据总体安排或以部门为单位,或以系统为一体,由上级机关对其下级机关的绩效做出评估和评价,致使在政府网站绩效评估过程中,只重视自身评价,忽视作为政府行为相对人的社会组织和社会公众的评价,导致进行意愿表达以及利益诉求的绩效评估主体单一化,使得绩效评估结论难以客观。
从理论上来说,在政府网站绩效评估过程中,作为政府行为相对人的社会组织和公众,他们能够亲身感受到政府网站给自己经济、社会生活带来的影响,对政府网站绩效最有发言权。而现实政府网站绩效评估主体中社会组织和公众代表的缺位,导致绩效评估过程中相关利益群体和个人话语权的缺失,使得政府网站绩效评估结论所涵盖的观点不够全面。此外,政府绩效评估主体构成中,专业评估组织的缺乏,也使得政府绩效评估结论受评估主体自身专门知识、参与评估能力,以及素质和理论水平局限性的影响。
2.政府网站绩效评估主体缺乏独立性。当前我国政府网站绩效评估主体构成参差不齐,能够起到多大作用,在相当程度上全凭领导的素质和重视程度。由于缺乏建立在科学基础上的专门独立的绩效评估组织,并且目前大多数政府网站绩效评估带有“政绩”成分,绩效评估主体和被评估对象有着千丝万缕的联系,有着一定的利害关系,这就使得政府网站绩效评估主体在政府网站绩效评估过程中带有很强的本位、主观色彩,难以保持态度的科学性和客观性。
从作为政府行为相对人的社会组织和社会公众的角度看,政府部门自己评估自己的网站绩效,由于受自身利益驱动的影响,在评估结论中对事实真相的反映以及绩效的评判等方面难免会出现不尽客观之处。另外,由于受传统文化的影响,政府部门工作人员习惯性地尊重权威,不愿或者不敢反驳上级,会在政府绩效评估中根据上级政府部门的偏好提供不完全真实的信息。
3.政府网站绩效评估参与主体缺乏代表性和广泛性。近来的政府网站绩效评估实践中,我们也会看到有些地方政府在网站绩效评估中非常重视社会组织和公众的代表参与。但是,由于有些参与政府网站绩效评估过程的社会组织和公众代表产生方式不尽合理,评估参与主体是由上级组织指定,而非通过科学的方法产生,或者与政府网站工作有利害关系等,缺乏相应的制度保障,导致评估参与主体的代表性和广泛性有欠缺。
要想提高政府网站绩效评估结论的科学性和正确性,在绩效评估主体的构成方面,就要做到政府网站绩效评估主体的多元化、独立性,参与主体的广泛性和代表性:
1.实现评估主体的多元化。政府网站绩效评估是通过制度保障的、规范化的工作行为,同时也是专业性很强、技术含量很高的研究活动。针对目前评估主体单一化的现状,政府网站绩效评估实践可以在目前以政府为主要绩效评估主体的基础上,实行由政府、专业评估组织(包括涉及政府网站建设的专家小组)、社会公众(特别是“受到影响的相关利益群体代表”,例如,网民等)等多方共同进行政府网站绩效评估,实现评估主体“多元化”。
2.保证评估主体的独立性。为了保障绩效评估主体独立工作,免受被评估的政府部门干扰,保证评估结果真实可信,在政府网站绩效评估活动中,必须保持绩效评估主体的独立性。首先是强调评估结果只对客观事实负责,不把评估结果作为考核奖惩的依据,更重要的是把评估结果作为改进工作的根据。其次,还要重视专业评估组织的独立性。除了为专业评估组织提供评估所需的全面信息和财政支持外,更重要的是让他们能随时了解政府网站面临的主要问题,以便他们及时、有效地做出评估。值得注意的是专业评估组织在与政府机构因工作需要保持密切联系的同时,还要确保自身的超脱地位,实现评估工作的客观性、独立性。
3.评估参与主体的广泛性和代表性。在政府网站绩效评估过程中,真正重视社会组织和公众代表的参与,政府网站绩效评估主体应该涵盖所有绩效评估相关人利益的代表,不论是持正面的评价还是负面的看法的社会公众都应包括在内。对社会公众方面,参与评估人员应该用科学的统计抽样原理产生,以保证评估结果的代表性。
二、政府网站绩效评估调查的内容
政府网站绩效评估调查的内容是回答“评估什么?”问题。从行政管理上来看,政府网站是以现代信息化技术支撑下的新型政府管理和服务,它的定位仍属于公共管理和公共服务范畴。所以,政府网站绩效评估调查的内容可以分为二部分,一是政府网站满足人民群众需求方面的内容(该方面在政府网站绩效评估调查的指标设计中详细阐述);二是人民群众对政府网站的认知度和满意度。
政府网站认知度和满意度的内涵如下:
1.政府网站的认知度,是指政府网站被用户认识知晓的程度。政府网站的认知度越高,说明对政府网站知道的人越多,使用的人越多,对政府网站内容和功能熟悉的人也越多,意味着政府网站有一个比较好的用户基础。
认知度的要素包括两个维度:广度和深度。广度是指有多少人知道政府网站。深度则体现为若干了解的程度,如听说过没用过、偶尔用过不了解、对部分功能非常了解、对网站大部分功能非常了解等等。
2.政府网站满意度是指用户对网站实际感知与期望值比较的程度。每个用户对所访问的政府网站都会对有一定的期望,当感知超过期望,用户就会对政府网站表示满意,反之则产生不满。
3.认知度和满意度与政府网站发展水平的关系。如下图所示:
根据认知度和满意度的水平,政府网站可分为4种不同状态:
I:低认知度和低满意度。政府网站建设和发展的初级阶段,内容少,功能弱。用户数量少,用户普遍感觉不满意。
II:高认知度和低满意度。通过各种渠道,在用户端开展了大量普及和宣传工作,使网站得到公众的了解和使用。但政府网站的内容少功能弱,或没有按照用户需求进行设计,因此用户满意度较低。
III:低认知度和高满意度。在网站建设方面投入了大量工作,为用户提供了丰富的内容和强大的功能,用户满意度高。但过于注重网站内容的建设与开发,忽略宣传和普及,用户量比较少,认知度比较低。
IV:高认知度和高满意度。这是政府网站发展的理想的状态。网站真正成为政府重要的公共管理和服务的渠道,公众和企业通过政府网站能享受电子政务带来的便利。政府网站建设和用户需求的增长协调并可持续发展。
4.向高认知度、高满意度政府网站发展的三种不同的途径:
(1)路径A:低认知度和低满意度=>高认知度和高满意度
在网站建设和用户宣传普及方面都要开展大量工作。借鉴领先政府网站的经验,结合本地用户的特点,进行政府网站的建设和宣传,使政府网站协调可持续发展。
(2)路径B:低认知度和高满意度=>高认知度和高满意度
网站建设已达到一定的水平,需要向用户进行普及宣传,使更多用户能接受网站所提供的信息和服务。当用户数量快速增长时,要尽可能考虑满足各种不同用户群体的需求。
(3)路径C:高认知度和低满意度=>高认知度和高满意度
政府网站已经有比较好群众基础,但政府网站的信息和服务没有到达满足用户的期望。因此要坚持以人为本的原则,利用比较好的群众基础,充分了解用户的各种需求,按照用户的关心程度,逐步完善网站的内容和功能。
三、政府网站绩效评估调查的指标设计
要实现政府网站绩效评估,必须要设计科学、合理的评价调查指标。
(一)指标设计的基本原则。
1.引导性。通过调查指标和调查结果能够对政府网站发展起到积极、正确的引导作用。
2.客观性。调查指标以客观性指标为主,主观性指标为辅,通过政府网站分析便能够客观反应政府网站的重要属性。
3.可比性。指标的设定必须结合当前政府网站普遍发展水平,指标要求不宜过高;必须能够明显区别各网站之间的水平差异,使得不同网站能够进行相互比较。
指标的设定要求与政府网站发展水平的关系方面,可以参照下面三个阶段的划分:
(1)技术导向阶段。该阶段重点解决网站有无的问题,网站的建设以基础建设和平台建设为主,网站的内容以概括信息和基本宣传为主,网站的管理以开展公务员信息技术技能培训为主,从而,评价指标以网站覆盖率和技术先进性为主。
(2)内容导向阶段。该阶段重点解决内容多少的问题,网站的建设以明确架构和扩充服务数量为主,网站的内容以信息公开、在线办事和公众互动并重,网站的管理以加强制度建设为主,从而,评价指标以信息全面性和规范性、服务数量为主。
(3)服务导向阶段。该阶段重点解决质量好坏的问题,网站的建设以加强用户端宣传,提高用户认知度和满意度为主,网站的内容以针对用户需求,以个性化、人性化、专业化的服务为主,网站的管理以用户评议及行政绩效考核为主,从而,评价指标以用户认知度和满意度为主。
4.可操作性。尽量做到指标简单易懂,打分客观,数据容易统计,计算方便快捷。
5.可拓展性。随着时间的推移和政府网站的发展,调查指标体系必须进行适时调整。
(二)指标详细设计。
指标体系设计应分层设计,从2007年度浙江政府网站绩效评估调查实践来看,整个指标体系可分四级。具体见下表:
一级指标 | 二级指标 | 三级指标 | 四级指标 | 说 明 |
网站内容 | 信息公开 | 规范性 | 信息公开规定 | 信息公开制度制定情况 |
信息公开目录 | 信息公开目录梳理与编排情况,是否按照信息公开目录公开相应信息 | |||
依申请公开 | 网站是否可依申请公开政务信息;依申请公开的情况 | |||
接受社会监督的信息 | 概况信息 | 领导信息;机构职能;地区情况介绍 | ||
计划规划 | 本级政府的工作计划、专项规划、区域规划及相关政策 | |||
法规公文 | 行政法规、规章、规范性文件及重要文件解读 | |||
工作动态 | 通知公告,政府会议,日常办公信息,新闻动态,重大建设项目的批准和实施情况 | |||
人事信息 | 本级政府人事任免,干部选拔,公务员考录,教育培训 | |||
资金信息 | 财政预算、决算报告,行政事业性收费的项目、依据、标准,政府集中采购项目的目录、标准及实施情况,专项工作的资金分配及工作进展,重点项目、招商引资情况 | |||
应急管理 | 突发公共事件的应急预案、预警信息及应对情况 | |||
专题专栏 | 围绕政务工作,选择贴近民生的热点、重点工作进行综合信息发布的情况 | |||
整合下属机构的信息 | 概况信息 | 委办局及所辖地市的概况信息 | ||
计划总结 | 委办局及所辖地市政府的工作计划、发展规划 | |||
工作动态 | 委办局及所辖地市政府的日常工作的动态信息,业务工作的专题专栏 | |||
统计信息 | 国民经济、社会发展和政务工作的统计信息 | |||
法规公文 | 各委办局及所辖地市政府发文 | |||
面向社会服务的信息 | 面向个人 | 婚育、户籍、教育、医疗、社会保障、就业、交通、公用事业、住房、出入境等面向个人的应用主题下办事指南信息 | ||
面向企业 | 企业设立、纳税、年检、质量检查、安全防护、商务活动、对外交流、资质认证等面向企业应用主题下办事指南信息 | |||
在线办事 | 人性化程度 | 针对用户对象提供服务 | 是否细分用户类型提供人性化服务 | |
以用户使用场景进行导航 | 是否采用模拟应用场景的导航方式提供服务 | |||
围绕流程整合资源 | 是否围绕办事流程梳理和整合服务资源 | |||
服务框架 | 应用主题设计 | 围绕用户对象生命周期应用主题的设计服务框架情况,是否按照服务深度整合服务资源 | ||
快速通道设计 | 快速访问通道的设计情况 | |||
服务丰富度 | 表格下载 | 表格下载服务的数量,资料下载服务的数量;表格的有效性 | ||
在线咨询 | 考察用户办事过程中遇到问题能否通过网站进行咨询;答复比例,答复是否及时 | |||
在线查询 | 考察办理事项的过程状态、办理结果的查询功能 | |||
在线申报 | 能够实现在线申报的服务数量;是否可全程办理 | |||
社会宣传普及 | 加强便民服务 | “百项实事网上办”专题栏目的建设与应用情况 | ||
公众参与 | 信箱类栏目 | 渠道功能 | 渠道能够实现的功能,易用性,好用性 | |
答复情况 | 处理信件的数量,答复的质量 | |||
访谈类栏目 | 渠道功能 | 渠道能够实现的功能,易用性,好用性 | ||
访谈次数 | 2007年开展的在线访谈次数,预告工作的情况 | |||
内容质量 | 在线访谈的内容,交互的情况 | |||
调查类栏目 | 渠道功能 | 渠道能够实现的功能,易用性,好用性 | ||
内容策划 | 调查主题的选择是否围绕政务工作 | |||
结果统计 | 调查结果的统计分析,结果的公开 | |||
留言论坛类栏目 | 渠道功能 | 渠道能够实现的功能,易用性,好用性 | ||
内容策划 | 版块设置是否体现政府工作 | |||
答复与汇编 | 答复情况及定期汇编 | |||
网站设计 | 页面展示 | 个性设计 | - | 突出职能、行业的特色,个性化、创新性的设计页面和栏目 |
首页布局 | - | 首页栏目、内容、布局的合理性 | ||
层级设置 | - | 内容层级的复杂度,能否少于或等于三次点击即可访问内容 | ||
页面效果 | - | 页面是否美观、大方、简洁、庄重 | ||
外文版 | - | 网站外文版的建设情况 | ||
辅助功能 | 搜索功能 | - | 搜索引擎的功能 | |
使用帮助 | - | 重要服务和栏目是否能够提供使用说明 | ||
评比统计 | - | 访问量、使用情况的统计与评比 | ||
导航链接 | - | 链接,上下级单位网站导航 | ||
定制功能 | - | 是否支持定制功能或发送定制邮件 | ||
网站维护 | 联系方式 | - | 是否提供网站维护单位及联系方式 | |
用户满意度 | 网上调查情况 | - | - | 根据用户网上投票或提出意见的情况进行评分 |
采访调查情况 | - | - | 根据与用户直接交流沟通的调查情况进行评分 | |
日常监测 | 信息公开 | 政府公报 | - | 政府公报是否能及时更新 |
法规文件 | - | 部门文件是否能及时更新,更新的数量,政策文件解读的情况 | ||
人事任免 | - | 人事任免信息是否及时更新 | ||
重大项目 | - | 重大项目信息是否及时更新,更新的情况 | ||
热点专题 | - | 围绕重点、热点政务工作策划专题栏目的情况,以及专题栏目的更新情况 | ||
在线服务 | 查询信息可用性 | - | 教育、医疗、公积金、交通、社会救助、公用事业等信息查询服务的可用性 | |
表格下载可用性 | - | 各应用主题下表格下载服务的可用性 | ||
无效链接数量 | - | 在线服务无效和错误链接的数量 | ||
公众参与 | 信箱栏目 | - | 信件受理的数量和答复质量 | |
访谈栏目 | - | 访谈次数与访谈质量 | ||
调查栏目 | - | 调查次数与调查结果的统计分析 |
四、政府网站绩效评估调查的实施
政府网站绩效评估调查的实施要根据不同的评估主体和评估指标而采用不同的评估方法:
1.专家测评。由政府网站研究人员、网站建设专业人员、政府行政绩效专家组成的测评团队根据预先设计的评估方案对被评估网站的各项指标进行打分。这种评估方法目前采用较多,充分考虑了政府网站的专业特点和目前政府网站的发展水平。为保证评估的科学性和公平性,需要做到以下几点:
(1)评估的指标应该对被评估单位公开,并且指标设计上应尽量与被评估单位的意见取得一致;
(2)各个指标的权重应该是预先设置的,而不是事后设置;
(3)有客观指标可以使用的尽量使用客观指标,从而避免专家的人为因素。例如,在网站的使用情况,可以采用网站的被访问次数。该数值可以从网站的计算机系统日志中直接取得。
2.在线测评。政府网站绩效评估调查中的在线测评工作的评估主体是“网民”,测评方式是“网上调查”。
(1)指标及问卷设计。共分六部分:
第一部分为政府网站的访问和认知状况。包括访问者近一年内多长时间会访问该政府网站,访问该网站的主要目的是什么。
第二部分为政府网站信息公开功能的使用状况。包括访问者对政府网站发布的信息经常访问的内容有哪些、政府网站信息更新时效性如何、政府网站的信息内容质量、政府网站提供的政务信息的满意程度如何。
第三部分为政府网站网上办事功能的使用状况。包括访问者在政府网站上办理过哪些个人事务、在政府网站上办理过哪些公司事务、使用过哪些网上办事功能、对政府网站的网上办事是否满意、网站的网上办事功能在哪些地方还需改进。
第四部分为对政府网站公众参与功能的使用状况。包括访问者通过政府网站参与过哪些与政府进行互动的活动、访问者对政府网站作为“公众参与的有效渠道”能否有效地解决社会公众的问题等方面的评价、对政府网站的公众参与栏目是否满意、政府网站的公众参与功能在哪些地方还需改进。
第五部分为政府网站页面的设计。包括访问者对政府网站的页面设计满意程度、政府网站页面功能哪些方面还需加强。
第六部分为网民献计献策。指出网站还有哪些地方需要改进。
(2)技术保证。网上调查最大的不足是对被调查者属性难于鉴定,这需要在技术手段上加以完善。现有主要技术措施主要是三方面:⑴是对访问者的IP地址进行限制,防止单个访问者多次接受调查的情况。⑵对问卷附加验证码,要求访问者对问卷所填的内容进行确认。⑶实施一定的奖励措施,鼓励访问者实现实名填写,并给予一定的物质奖励。
3.公众评价。公众评价调查的目的主要是政府网站的认知度和满意度。评估主体是“人民群众”,测评方式是多样的,可以是入户面访、电话调查、邮寄问卷调查、主要场地拦截访问等。目前一般采用CATI(计算机辅助电话调查系统)调查方式。
(1)指标及问卷设计。在政府网站认知度方面,主要测评受访者平时访问政府门户网站情况,包括访问的频率和访问的目的,对于平时不访问当地的政府门户网站的受访者,主要了解平时不访问当地政府门户网站的原因。
在政府网站使用满意度方面,主要测评的内容如下:
在信息公开方面,主要测评受访者对本地政府网站信息更新时效性的评价;对本地政府网站信息内容质量的评价;对政府网站提供的政务信息的满意程度。
在网上办事方面,主要测评受访者对政府网站的网上办事的情况和使用的满意程度。
在公众参与方面,主要测评受访者通过政府网站给领导发过电子邮件反映问题的情况和对问题的答复的满意程度;通过政府网站进行过在线咨询、投诉情况和使用的满意程度;参与政府网站的网上调查活动的情况和网上调查活动的评价;在政府网站的留言板上发表过建议和意见情况和留言板所起的作用的评价等。
在网站设计方面,主要测评受访者对该政府网站的页面设计满意程度和人性化设计的情况。
(2)涉及调查的抽样问题。在公众评价方面,涉及的主要调查技术问题是抽样问题。由于互联网的普及问题,部分居民(特别是农村居民)没有上互联网的条件和经历,这需要在具体的调查实践中加以必要的技术处理。
首先,要对评估主体作出评估,以便降低调查成本和提高调查的可操作性,即谁在使用互联网。这在目前各地互联网运营商可以得到单位和家庭上网的情况。
其次,对开展调查的评估主体作出明确的定义。既在给定行政区划内平时上互联网,且能独立表达自己意见的个人。
再次,采用一定的抽样技术。目前一般采用“概率抽样”技术中的“分层抽样”。将样本总体按照所在地归属被分割成子总体,然后用一种随机方法(SRS),从每一层中选择个体。
需要指出,对政府网站绩效评估,不同的评估方法所得到的结果最终应成为一个有机的整体。为了得到科学、准确的评估结果,需要确定同种评估方法中指标的权重和不同评估方法结果所占的比重。为了尽量避免人为的干扰,可以采用“专家小组法”或“德尔菲法”来确定调查指标的权重和不同评估方法结果所占的比重。
五、结论
政府网站是电子政务的一个重要窗口,是政府服务公众的重要平台。对政府网站绩效进行评估,符合公共行政的效率原则,反映了我国建设效能政府的要求,有助于推动政府网站的持续改进。对改善和提高政府网站的服务质量、引导电子政务建设朝着更加健康有序的方向发展,具有非常积极的意义。
尽管政府网站绩效评估工作在我国刚起步,但受到了各级政府的高度重视。温家宝总理多次强调要“深刻认识加强政府自身建设、推进政府管理创新的重要性和紧迫性”,并要求 “建立问责制度,开展绩效评估”。2006年12月29日,国务院办公厅颁发了《国务院办公厅关于加强政府网站建设和管理工作的意见》,对政府网站建设提出了全面要求,指出要对政府网站“加强绩效评估,探索建立有关部门、社会机构和公众共同参与的政府网站绩效评估机制,科学确定评估内容和指标体系,充分发挥绩效评估的导向和激励作用”。
本文对政府网站绩效评估研究工作是初步的,随着国内外一些咨询机构或大学对政府网站绩效评估工作的介入,在调查内容定位、指标设计、调查实施方面必将上一个新台阶,对政府网站建设引导和推动作用将进一步体现。
社情民意调查中心 陈良汉