||
图谋按:为了配合所在高校数字资源绩效审计工作,笔者对高校图书馆数字资源绩效评估方法进行了更具针对性的学习思考。受到诸多制约,绩效评估的工作实在是不好做。举个具体的例子,要求填报外文数据库2023-2025年所在机构的论文产出情况。一家全球知名学术全文数据库,并不支持作者所属机构这一检索字段。假如以带双引号的英文机构名称进行检索,实际上是漏检的。借助Incites数据库检索WOS论文数(含ESCI)得出的结果,相对更靠谱,但也不见得是“检全”了、“检准”了。倘若是该出版商的资源并未购买完全(只是购买了部分学科包),所得的数据很可能是错误的。倘若源头的定量事实数据不准确,后续的统计分析很可能是失真的。倘若深究,机构的论文产出,还要进一步区分N种情形。比如是否为第一单位第一作者、是否是ESI论文……不同的评估目的采取的评估方法不同。本文借助Gemini编写,供相关评估实践参考。
高校图书馆数字资源绩效评估是优化馆藏经费配置、提升资源支撑能力、保障学科建设需求的核心管理工作。其评估方法围绕 “投入 — 产出 — 价值” 的核心逻辑,形成定量测算、定性研判与综合模型相结合的方法体系,兼顾数据客观性与实际服务价值。随着信息技术的飞速发展,数字资源(如电子期刊、电子图书、学位论文数据库等)已成为高校图书馆文献资源建设的核心部分,占用经费比例逐年攀升。由于数字资源采购成本高昂,建立科学、客观、可操作的绩效评估体系,对于优化馆藏结构、提高资金使用效益、精准服务高校教学与科研具有重要意义。
以下是高校图书馆数字资源绩效评估的核心指标、主要方法及实施步骤:
一、 核心评估指标体系的构建
评估数字资源不能仅凭主观印象,必须建立多维度、立体化的指标体系,通常包含以下五个维度:
①使用量指标(活跃度)
核心数据: 访问量(页面浏览量)、检索次数、全文下载量、独立IP访客数、在线停留时间。
意义: 这是最直观的绩效反映,直接体现了数据库在师生中的普及度与需求刚性。
②成本效益指标(经济性)
核心数据: 篇均下载成本(计算方式:数据库年采购费 / 年全文下载量)、数据库整体涨幅比率、同类资源价格对比。
意义: 衡量资金投入的产出比。对于篇均成本畸高的数据库,需重点预警并重新评估其续订价值。
③内容质量与契合度指标(学术性)
核心数据: 核心期刊收录率、内容更新频率、回溯年份、学科覆盖面。
意义: 评估资源是否与本校的“双一流”建设、优势学科和新增专业高度契合。资源再好,若与本校专业脱节,其绩效依然低下。
④平台系统性能(技术性)
核心数据: 服务器响应速度、并发用户数限制、系统稳定性(宕机率)、移动端适配能力、跨库检索协议支持(如OAI-PMH)情况。
意义: 平台的用户体验直接影响资源的利用率。
⑤用户服务与满意度(服务性)
核心数据: 界面友好性、数据库商提供的培训次数与质量、售后故障响应时间、师生主观评价。
二、 主要绩效评估方法
在实际操作中,通常需要将定量分析与定性分析相结合,引入科学的评价模型:
1. 基于国际标准的定量分析法
遵循 COUNTER(网络电子资源在线使用统计标准)等国际通行标准,向数据库商索取标准化的统计报告(如JR1、BR2等),或通过图书馆内部的代理服务器(如EZproxy)日志进行本地数据抓取,使用Excel、SPSS等工具进行数据清洗和对比分析。
2. 层次分析法(AHP)
面对众多评估指标,各项指标的重要性不尽相同。层次分析法通过构建判断矩阵,为不同维度的指标赋予科学的权重。例如,可将“使用量指标”权重设为40%,“成本效益”设为30%,“内容质量”设为20%,“服务与性能”设为10%。最后加权计算出每个数据库的综合得分。
3. 模糊综合评价法
针对“界面友好程度”、“用户主观满意度”等难以精确量化的指标,引入模糊数学理论,通过设计多级评价评语(如:非常满意、较满意、一般、不满意),将读者的定性反馈转化为定量的综合评分,从而降低主观偏差。
4. 定性调研与专家评估
通过向全校师生发放问卷、举办读者座谈会,收集对特定数字资源的使用反馈。同时,邀请各学科带头人和图情专家组成评审小组,对高昂投入或存在争议的资源进行专业的人工评估,弥补纯数据统计带来的盲区(例如某些冷门但不可或缺的顶级专指数据库)。
三、 绩效评估的实施步骤
明确周期与对象: 评估通常以“自然年”或“采购合同周期”为单位。分为新订数据库的“试用评估”和已购数据库的“续订评估”。
多渠道数据采集: 结合数据库后台、网关日志、读者问卷等渠道获取全方位数据,并剔除因“恶意下载”或“爬虫抓取”导致的异常畸高数据,确保数据的真实性。
横纵向对比分析: 纵向对比: 比较同一数据库近三年的使用量和成本变化趋势。
横向对比: 将同类型、同学科的数据库进行对比(如几个不同的外文全文期刊库),找出性价比最优者。
生成报告与辅助决策: 形成详细的《数字资源绩效评估报告》。根据综合得分,将资源划分为不同等级,直接指导下一年度的采购决策:
高分库: 优先保证经费,争取长期合同。
中等库: 维持现状,但需加大推广和培训力度。
低分库: 约谈供应商压价,若属于内容陈旧、篇均成本过高且有替代品的资源,则坚决予以停订。
四、总结
数字资源绩效评估并非单纯的效益排序,而是以评促建,通过科学的评估方法优化资源结构,让有限的经费最大限度支撑学校的人才培养与科研创新。高校图书馆数字资源绩效评估是一个持续性、动态化的系统工程。在未来,图书馆应积极拥抱大数据与人工智能技术,构建可视化的“数字资源实时数据大屏”与自动化监测平台。这不仅能将评估工作从繁杂的“年底突击算账”转变为“实时动态监测”,更能为高校的文献资源保障体系提供最坚实、客观的数据支撑。
Archiver|手机版|科学网 ( 京ICP备07017567号-12 )
GMT+8, 2026-6-27 05:02
Powered by ScienceNet.cn
Copyright © 2007- 中国科学报社