(三)高校绩效审计评估体系设计思路
在设计高校绩效审计评估体系时,应以高校教学水平评估体系为基础,从经济性、效率性和效果性三个方面对现有评估指标进行整理,形成具有高校绩效审计评估特色的评价体系,使评估指标既能体现高校的运营特色,又符合高校绩效审计的特点。
1.经济性指标
经济性主要关注的是资源投入和使用过程中成本节约的水平和程度以及资源使用的合理性。经济性审计的目的是审查与评价组织经营活动中资源的取得、使用及管理是否节约及合理,以协助管理层改善管理,节约资源,提升组织价值。高校经济性审计关注的重点是投入和整个过程的成本,即在所处的政治和社会条件下,高等教育资源的购置、维持和应用是否经济、合理。我国高校经济性审计评价指标的主要内容包括教育资金的取得和使用是否节约,人力资源的配置是否恰当,房屋、设备、图书等物力资源的取得、使用和管理是否合理,是否遵循有关法律、法规,高校行政管理部门的管理控制系统是否健全,高校管理层提供的有关经济的信息是否真实、可靠。
2.效率性指标
效率性是指投入资源与产出成果之间的对比关系。效率性审计是管理审计的重要组成部分,其主要目的是通过审查和评价组织经营活动的投入与产出关系,优化业务流程,提高经营活动效率。高校开展效率性审计的目的是衡量学校资源的利用效率,考察其投入与产出的对比关系;通过对其资源配置、管理和使用的综合分析,对学校内部各单位的资源利用情况进行评价与监督。高校效率性审计关注的是在一定条件下,为取得同样的教育成果,高等教育资源占用和消耗得越少,效率就越高。
3.效果性指标
效果性是指组织从事经营活动时实际取得成果与预期取得成果之间的对比关系。效果性主要关注的是既定目标的实现程度及经营活动产生的影响。效果性审计的主要目的是审查与评价组织经营活动既定目标的实现程度,以协助组织管理层改善经营策略,提高经营活动的效果。效果性指标以“结果的改善”为基础,主要是对现状的改善及改变的幅度进行比较,得出高校在提供服务和提高办学水平的过程中,教师、学生和社会相关部门的满意度是否提高,对高校自身发展是否具有明显效果。简单地说,高校的成果是“学生”,高校培养出的学生质量越好,说明效果越好。高校的效果性指标不仅包括高校所拥有的教学基础设施和环境、学生的类别和数量、办学条件、学生的毕业率和就业率,还包括科研成果的数量和获奖率、科研投入和产出、获得国家、省、部级重点学科的数量、社会满意度和在全国高校中的知名度等。评价时,要总结造成这些结果的影响因素,尤其要重视负面影响,只有这样,才能查出管理漏洞,更准确地帮助高校管理部门制订改进措施。
三、基于教学水平评估视角的高校绩效审计评价体系的构建
(一)构建高校绩效审计评价指标体系
根据高校教学水平评估体系和高校业务活动的特点及现有文献关于绩效审计评价指标的论述,将绩效审计评价指标划分为经济性指标、效果性指标、效益性指标三类,并以此为出发点,应用层次分析法(AHP),将整个评价指标体系分解成一个有序递阶层次的多指标结构,即整个体系具有多项指标,大指标之下有小指标,且可以具有多层次的类似结构。将整个指标体系分为目标层、准则层、要素层和指标层四个层次。评价审计对象的履职绩效是整个指标体系的总目标(总指标),对其履行职责的综合描述和整体反映为准则层(一级指标),按照其实现职责目标的具体活动设定由多个子系统组成的要素层(二级指标),要素层下设更细化、更直观的具体指标层(三级指标),用以反映审计对象针对履职目标所做的现实努力,从而形成一个多层次的评价指标体系。指标选择主要涉及财务、教学科研活动、行政管理、后勤保障等方面。为了更完整地反映高校绩效审计的特征,高校绩效审计评价需要多层次、多角度地展开,系统分析、评价指标体系的构成框架,结合已有的研究成果与目前的审计实务,构建评价指标的要素层和指标层,初步建立高校绩效审计评价指标体系。相对于其他层次的指标,指标层的具体指标选取难度更大,需要更为科学、谨慎。应根据审计对象和审计工作目标,设计能够合理描述或量化其履职目标实现程度的具体评价指标(可以是定量指标或定性指标),形成初步的评价指标集。可以运用专家问卷调查法,让专家给所选指标的重要性和可行性打分,最终确定具体的评价指标。指标构成情况如图1所示。
(二)运用多层次灰色模糊评判法界定指标取值
高校绩效审计评价指标体系的多样性特征,决定了其建立是一个综合复杂的过程,特别是指标体系中许多定性指标难以统一量化,而评价结果却要求能够全面反映高校绩效的真实水平,如果评价只采用优、良、中、差四个等级度量指标因素,将会产生较大的结果误差。采用灰色模糊综合评判法,集合模糊层次分析法、灰色评价法和模糊综合评判的定量、定性分析等,可以总体考虑专家评判信息的不完全性(灰性),利用灰色评估理论得到灰色统计量,构建模糊隶属度矩阵,然后采用模糊算法计算评价对象的等级。
1.确定绩效审计评价因素集合和评语集合
高校绩效审计评价因素集合A={X,Y,Z},其中X,Y,Z分别为三个因素子集,并将子集中的每个因素Xij,Yij,Zij,(i=1,2,3)(j=1,2,3)优劣程度划分为好、较好、一般、较差四个等级,即形成评语集。假设评语集四个等级中各等级的分值标准分别为4分、3分、2分、1分;当指标等级介于两相邻等级之间时,相应的评分为3.5分、2.5分、1.5分。
2.界定绩效审计评价指标权重
评价指标的权重直接决定着评价结果的优劣,是高校绩效审计评价的关键所在。为了使评价指标的权重更为科学、合理,本文采用层次分析法来确定指标的权重(见表2)。假设专家组有5位专家,其各自的自我评价值为Gt(t=1,2,3,4,5),且Gt=at,bt,ct,dt,et(t=1,2,3,4,5),其中at,bt,ct,dt,et分别代表第t位专家的知名度、职称、学历、判断依据和对问题的熟悉程度。
专家可信度向量则为w=(w1,w2,w3,w4,w5)。