基于大众关注度的电子政务网站绩效评估模型定制方法研究

摘 要

摘 要:针对当前我国政府网站绩效评估方法存在的漏洞,关注评估模型的时效性和合理性,提出了一种基于大众关注度的电子政务绩效评估方法。首先,分析现有测评方法和评估模型,结合权

摘 要:针对当前我国政府网站绩效评估方法存在的漏洞,关注评估模型的时效性和合理性,提出了一种基于大众关注度的电子政务绩效评估方法。首先,分析现有测评方法和评估模型,结合权重累加方法,提出基于大众关注度的评估模型;其次,基于所建立的评估模型,研究如何利用大众关注度对原有模型进行改进;最后在理论研究的基础上,对我国区县电子政务网站进行示例评估,并进行实证类比分析。实验表明,基于大众关注度改进后的模型,能够有效提高电子政务网站绩效评估的完备性,有助于我国电子政务进行有效的质量改进。

关键词:电子政务  大众关注度  绩效评估  模型改进

1、引言

20世纪中后期以来,伴随着知识经济和信息社会的萌芽和发展,全球电子政务建设逐步兴起,至今已成为政府改革用以提高效率、提高效能之必选方案。从公共管理的视角,不可衡量,则无法管理”[1]的理念决定了电子政务绩效管理的必然性。从西方国家的实践来看,在政府的责任和绩效日趋公开的情况下,电子政务项目由于财政的约束硬化和公民知情权的声张,失败的成本核算不仅是项目的终止,还包括公民的信任与支持的流失[7]。因此,西方国家成功的电子政务建设都十分重视绩效评估,一方面作为项目全程管理的手段,另一方面作为公民支持的依据。

目前我国电子政务建设正逐渐由技术导向阶段转向内容导向阶段,面对庞杂的已建或在建政务信息系统和海量的政府信息资源,如何更好地整合业务系统,促进部门间业务协同和信息共享,如何更好地开发与利用信息资源,提高信息资源的利用水平非常关键,同时,研究和探索一套切实可行的电子政务绩效评估体系模型也十分重要。探索电子政务绩效评估体系模型不仅需要对影响电子政务绩效水平的因素有所掌握,还要通过评价反馈来完善国家电子政务标准体系,并为今后的电子政务建设发展指明方向。

电子政务是一个复杂的系统工程,影响其形成的因素很多,对电子政务进行准确、全面评价评估比较困难。目前,全球众多的研究学者和相关研究机构都对电子政务绩效评估进行了长期而又系统的研究。作者参加了我国2009年度中国各级政府电子政务绩效评估”项目,参与了部分重要省市咨询投诉、公开规范性、基础信息的评估工作。从实践角度,认为目前我国电子政务绩效评估体系有以下几点不足之处:

1)评估方法比较宽泛,对于电子政务网站没有明确具体的绩效指标定义;

2)评估指标有多处定义不合理,并且存在测试内容重复现象;

3)对于指标的权重定义无说明,权重的确定只是感性的“拍板”,而并非有算法以及民众意愿的支撑。

针对以上几点问题,本文提出以大众关注度为依据,重新裁减各级指标及其确定各级指标权重,对评估模型进行讨论和改进,进一步提高电子政务评估效果的完备性,并且以实例效果展示来验证改进效果。

2、电子政务网站绩效评估指标确定

当前主要电子政务网站绩效评估指标缺乏明确的来源说明。本文从层次演化关系,提出了一种从需求层向职能层、应用层、测评层逐层演化的方式,确定主要绩效指标体系,如下图l.所示:

 

现有的评估指标主要分为四个一级指标,括号内为该一级指标下细分的二级指标。详细内容如下表1[3]所示:

 

依据以上框架,每个二级指标细分为相应的三级指标,根据评分要点和标准,对相应的电子政务网站进行评分,最终以各项所得分为依据,根据每项指标的权重折合分数,一级一级的加总,最终获得整体的评分成绩。假设某一级指标权重为a,其下二级指标权重为bi(i为其下二级指标序列号),三级指标权重为cij(j为三级指标序列号,每一项三级指标的得分分别为mij,则该一级指标加权得分为:

P=a[∑bi(∑mij·cij)]        (1)

最后的得分总和为:N=∑Pn       (2)

3、基于大众关注度的指标权重确定

31大众关注度的说明

基于大众关注度[6]的指标权重确定是指对社会各界人士进行全面调查,对于电子政务网站关注人群进行重点询问,以得出不同人群对于电子政务网站评估关注度,以人群比例计算,以求得指标权重。截至目前,许多电子政务绩效指标权重仅以其下三级指标的评分要点的个数比来确定的[5],缺乏明确的评估模型定制方法,整个评估体系便会产生适用性不足的状况,诸如:

1)社会各阶层关注的重点问题,例如医疗保险、就业、城乡建设等问题在评估过程中无法得到重视;

2)社会各阶层很少注意的项目,例如监督管理、在线受理、专题栏目等,虽然也十分重要,但其权重应该与其他重点指标有差距,才能体现评估的公正性;

3)政府的网站建设很少关注民众需求,对于互动环节、咨询上访等重点问题没有重视起来,而仅仅只是平均权重,并不符合需求;

4)政府工作人员与普通居民关注的问题不一致,应该从算法和比例上体现出来,在此基础上综合考虑,才能使评估体系得以服众。

32方法准备

本文发放调查问卷300份,利用互联网进行网络调查,调查对象涵括包含职业、年龄阶段,数据真实全面,其中共回收有效问卷277份。

由调查回收问卷的基本信息汇总结果分析得出,发放的问卷涵盖了年龄阶段、行业、电子政务熟悉程度分布如下图21与图22、图23所示:

 

 

由以上图示可以看出,被访者的年龄分布、职业分布、电子政务熟悉程度分布均符合网上调查的实际情况,有利于调查进行深入研究。由于被访者对电子政务了解情况不同,假设其对电子政务网站的熟悉程度为n,其对各一级和二级指标的关注程度分别为mimj,则该位被访者对一级指标的关注程度为n·mi,对二级指标的关注程度为n·mj。由此,整理出277份有效问卷的各项数据如下表2所示

 

4、类比评估

41新权重确定

基于以上回收问卷的数据统计,得出各指标项的“大众关注度”权重:

 

检验权重的拟合优度:

 

由上图得到二级权重的拟合函数:

y-0.0071x+0.8928     (1)

拟合优度:RL2=0.0684    (2)

可以看出该组数据拟合优度远小于1,说明拟合的并不好,数据之间的差异非常大;进而表明了,二级指标权重仅用平均的数值并不合理,应该更多的采用大众关注度的方式来进行评估。

42实证类比检验

利用新权重,我们针对部分随即抽样区县进行重新评估。根据第一部分所提出的评分公式:P=a[∑bi(∑mij·cij)]N∑Pn,在各地各项三级指标得分一致的前提下,计算出原有体系和新权重体系下的得分,将得到的结果与原来的结果进行类比分析,如下表4所示:

 

 

 

得到原评估结果的拟合函数:

y-0.6x+72.533    (5)

拟合度:RL2=0.0738  (6)

 

得到新评估结果的拟合函数:

y-0.625x+73.333        (7)

拟合优度:R’ L20.0361      (8)

可以得到:R’ L2<RL2       (9)

上述结果表明了,在随机抽样条件下,相同的三级指标得分,基于大众关注度的评估结果具有比原评估结果更大的差异性,更明显的得分差距。

5、评估案例

以上海虹口区为例,展示评测过程。

1)信息公开主动公开(概况信息、法规文件、规划计划、统计信息、财政预决算、行政收费、招标采购、重点领域、应急管理、城乡建设、监督检查、社会公益、土地征用房屋拆迁、捐赠救助、人事及招考信息、公共企事业单位信息、三农信息、社区信息、专题建设l9个测评指标在走进虹口、信息公开专栏均应有说明,如下图所示。未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

2)信息公开依申请公开(有无栏目、公开要素、在线受理3个测评指标均应有说明,其中公开要素包括依申请公开程序、办理时限、收费标准、表格下载四个要素,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

3)信息公开公开规范性(信息公开目录、框架合理性、持续更新性、信息公开规定、信息公开指南、信息公开年报、监督保障机制7个指标均应有说明,其中保障监督机制包括信息公开考核制度、社会评议制度、责任追究制度三个制度的说明和公开,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

4)网上办事人性化程度(场景导航、资源整合度场景导航服务数量3个测评指标均应有所说明,其中场景导航应涉及教育、医保、房屋服务、医疗服务、婚姻5个要素,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

5)网上办事服务框架(按用户分类、按生命周期分类、按特殊人群分类、按三农分类4个测评指标均应有所说明,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

6)网上办事百件实事网上办(有无栏目、实用性2个测评指标均应有所说明,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分,虹口市无该栏目,故扣去相应得分)

 

7)网上办事服务时效(政府网站实际提供的办事指南、表格下载、网上咨询、网上申请、结果反馈等服务事项的数量。)

8)网上办事服务规范性(服务指南、表格下载、在线查询、在线申报4个测评指标均应有所说明,其中服务指南包括格式规范性、内容完整性2个要素和说明,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分,图略)

9)公众参与  咨询投诉(渠道功能、答复数量、答复质量3个测评指标,其中渠道功能包括有无渠道、使用帮助指南、在线受理功能、问题列表4个要素,答复质量包括答复及时性、答复内容质量2个要素,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

10)公众参与  实时交流(渠道功能、互动数量、内容质量3个测评指标,其中渠道功能包括有无渠道、实时参与、预告功能、材料整理4个要素,内容质量包括访谈主题、答复情况2个要素,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

11)公众参与  民意征集(渠道功能、征集数量、内容质量3个测评指标,其中渠道功能包括有无渠道、在线提交、结果统计3个要素,如下图所示,未有栏目或栏目建设不达标的,依据评分细则扣去相应得分)

 

12)网站性能设计(网站响应、页面展示、辅助功能、网站维护4个测评指标,主要以基本网站达标要求为准,以合格与否进行测评,无法响应或页面展示出错则直接为0分,辅助功能与网站维护主要以美观简洁和安全快速为主,基本应给全分,图略)

通过以上的测评过程展示可以了解到,政府网站的全面评估是一项浩大的工程,其所包含的内容也富有层次感;基于大众关注度为主的电子政务绩效评估,由于更加关注民意和大众需求,而一切测评工作的指标都是由其测评对象的职能确定的(详见本文第二章),所以其评估结果更能反映出政府网站职能的实现程度;通过本文前一阶段的调查研究和模型建设,对基于大众关注的权重进行了量化,故以实践基础为开展点的绩效评估工作能够顺利且有效的开展。

6、结束语

我国政府门户网站建设经历了信息发布阶段,正处在“简单交互”或“电子服务供给”阶段,并开始向着“服务整合”[4]的目标迈进。电子政府门户网站建设是一个复杂的系统工程,要用合理的方法对网站信息进行组织,融入信息构建的一些思想进行详细的需求分析和理论探讨。在建设的过程中,要注重遵循相关标准,设立专门的部门进行统筹,用科学的方法分类组织信息,注重信息资源的整合和服务的集成,充分发挥门户网站一站式服务的功能。

如果说绩效评价是评价政府,而政府最终要为公民服务,因此是间接社会效益评价;那么大众关注度评价就是直接社会效益评价。它不是从过这方面的探索。从行政生态学指数角度看,大众关注度评价的难点在于:第一,大众关注度评价不是绝对的;对大众关注度评价本身,也需要进行评价。也就是说,大众关注度评价首先需要经过环境评价的再评价 [3][8]。需要与环境评价中的行政环境进行关联,才能得出判断。第二,同是“增加群众满意度”,在“大政府”、小政府政府再造”和“全面响应”等不同条件下,含义是截然不同的,需要做出区分。

基于大众关注度的电子政务绩效评估能够更有效的对电子政务网站进行差异化评价,然而却也有其不足和欠缺之处,故而在今后的研究中应注重细节区分和评价细化,争取规范化和模型化,以达到更有效更客观的电子政务评价。

 

参考文献:

[1]张向宏,张连夺.电子政务绩效评估体系模型的构建与应用[J].情报杂志.20095

[2]孙强,孟秀转.服务型政府电子政务绩效评估案例分析[J].科技时代.200810

[3]王长胜.我国电子政务发展报告[J].电子政务蓝皮书.20045

[4]孙国锋.关于电子政务绩效评估的三三两两”[J].硅谷动力.20043

[5]石会昌,万道濮,王彦慧.电子政务绩效评估指标体系设计[J].电子政务.2008l0

[6]彭细正,侯文芳.服务型政府视角的电子政务综合绩效评估体系探讨.Cbsi中国.200810

 

本文作者:刘学刚

作者单位:中海油气开发利用公司