共青团“青年之家”实体平台的评估指标体系研究——基于德尔菲法和层次分析法的应用.pdf

中国青年社会科学 2021 年第 2 期 共青团与青年工作 第 40 卷（ 总第 213 期） 共青团与青年志愿服务 李秀峰［北京师范大学政府管理学院教授 ］：“依靠青年、服务青年、凝聚青年 ”是 各级共青团做好青年工作的根本遵循 。为了更好地联系和服务青年，共青团组织一直在进行各 主持人 种积极探索和有益尝试。“青年之家”就是共青团主动适应新时代团员青年分布聚集特点和青 年工作组织形态多样化的需求，推进团的建设创新的一种平台型、枢纽型的组织形态，目前已经 在全社会范围内产生了一定的影响 。同样，中国青年志愿者事业作为党领导共青团在新的历史 条件下创新工作领域、服务社会需求的一大创举，各级共青团组织始终把青年志愿服务作为共 青团实践育人的重要载体，把开展青年志愿服务作为服务广大青少年实现社会参与的重要渠 道。结合疫情防控常态化的要求，认真探索新冠肺炎疫情防控下的共青团志愿服务的创新发展 方向，既是对共青团抗疫工作的经验总结 ，也是共青团参与社会建设和社会治理有效途径的探 索。本期文章《共青团“青年之家”实体平台的评估指标体系研究 》，在开展多轮调查和访谈的 基础上，基于德尔菲法和层次分析法的应用，开发出了一套科学、完整和可行的“青年之家 ”实 体平台运行评估指标体系。借助该指标体系，各级共青团组织不仅可以做好青年之家的针对性 评估，还可以推动项目的高效高质发展 。文章《新冠肺炎疫情防控背景下共青团志愿服务工作 的探索与创新》，通过对新冠肺炎疫情防控中共青团志愿服务工作进行系统梳理 ，从构建青年 志愿服务工作网络、提升志愿服务专业化水平、拓展新的志愿服务途径等方面为共青团志愿服 务工作未来的创新指明了方向。 共青团“青年之家”实体平台的评估指标体系研究 ——— 基于德尔菲法和层次分析法的应用 ■ 李秀峰 祝 军 （ 北京师范大学 政府管理学院，北京 100875； 北京外国语大学 国际教育学院，北京 100089） 【摘要】“青年之家”是共青团直接领导或主导的， 依托各类实体空间和云 平台，线上线下联系服务团员青年的公益性、专业化工作平台。 构建一套科学 合理的评估指标体系是开展“青年之家 ”实体平台运行评估的关键 ，本研究按 收稿日期： 2020 － 11 － 20 作者简介： 李秀峰，北京师范大学政府管理学院教授，博士生导师，主要研究政府创新、制度理论、领导力开发； 祝 军（ 通讯作者） ，北京外国语大学国际教育学院讲师，硕士生导师，主要研究人力资源管理与开发、高等教育 管理。 基金项目： 本文系共青团中央“青少年发展研究”重点课题项目（ 课题编号： 19ZD017） 的阶段性研究成果。 · 28· 照“建立评估模型 —筛选评估指标 —赋予指标权重 ”的步骤 ，首先 ，基于已有 文献构建“青 年 之 家 ”实 体 平 台 的 评 估 模 型 ，并 初 步 拟 定 各 项 评 估 指 标 ； 其 次 ，运用修正版的德尔菲法对评估指标进行两轮筛选 ，形成正式的评估指标 ； 最后 ，运用层次分析法 ，确定每一个评估指标的相对权 重 ，形 成 一 套 完 整 的 “青年之家 ”实体平台运行评估指标体系 。 从研究结果来看 ，该指标体系不 仅可以作为各级共青团组织监测和评估“青年之家 ”运行情况的有效工具 ， 同时有助于“青年之家 ”工作平台进一步明确功能定位 、健全工作队伍 、优化 项目内容 、完善运行制度 ，通过评估和建设的良性互动推动“青年之家 ”的高 效高质发展 ，充分发挥其在帮助共青团引领凝聚青年 、组织动员青年 、联系服 务青年方面的重要作用 。 【关键词】 共青团 青年之家 评估指标 德尔菲法 层次分析法 DOI:10.16034/j.cnki.10-1318/c.2021.02.022 一、问题提出 “青年之家”是共青团直接领导或主导的公益性、专业化工作平台。 为了进一步做好青年 服务工作，共青团中央在 2019 年提出了“用 3 年左右的时间推动全国‘青年之家 ’组织功能更 ［1］ 加凸显、建设布局更加合理、服务功能更加完善、对团员青年覆盖更加有效 ”的建设目标 。 在 各级团组织的大力推动下，全国各地 “青年之家 ”的建设工作推进迅速。 截至 2019 年底，全国 已建成具有一定规模的“青年之家”实体平台 3. 07 万家，入驻“青年之家 ”云平台 1. 41 万家，平 台管理员 4. 5 万人，其中团干部 2. 9 万人、社工 1. 6 万人。各级团组织 2019 年全年依托云平台 共开展活动 11. 26 万场，报名参与活动的青年达 212 万人次，在社会范围内产生了一定的影响， ［2］ 初步成效明显 。 然而，在“青年之家”快速建设和发展的同时，“青年之家”工作平台特别是实体平台在实际 运营中也逐渐暴露出一些不容忽视的问题 ，主要表现为： 一是在功能定位方面，行政本位严重、 ［3］［4］ ； 二是活动运营方面，经费和场地紧 独立性较差、功能发挥不足、运作方式不适合新形势 缺、服务活动创新性不足、与青年群体需求不完全匹配、对青年群体的吸引力有限、各方认可度 ［5］［6］ 不高 ； 三是在人员队伍方面，激励机制不健全、专业人员缺乏、职业发展前景不明朗［7］［8］。 上述问题的存在，在一定程度上会对“青年之家 ”建设目标的顺利实现产生影响。因此，如何进 一步引导“青年之家”实体平台良好有序的发展，使其成为服务青年发展的重要阵地，已成为当 前共青团工作中的一个重要问题 。 从公共服务的绩效评估视角来看 ，科学合理的评估是衡量服务供给效率、公共服务公平性 和质量高低的必要手段。有鉴于此，如何构建一套科学合理的运行评估体系，通过“以评促建、 以评助建、评建结合”的方式推动“青年之家”综合服务平台评估和建设的良性互动 ，实现“青年 之家”的高效高质发展，是各级团组织和广大青年工作者都需要认真思考的课题 。 二、理论模型和研究方法 本研究旨在开发一套能够诊断“青年之家 ”实体平台运行状况，有助于持续改善平台建设 的评估指标体系，具体步骤包括： 一是在梳理相关文献的基础上，确定评估模型，并基于专业人 员的访谈结果，设计出评估指标体系草案。 二是根据“青年之家 ”的实地考察和运用德尔菲法 的调查结果，对评估指标进行筛选并构建具有可操作性的评估指标体系 。三是运用层次分析法 · 29· 确定评估指标的权重，最终形成完整的“青年之家”运行评估指标体系。 （ 一） 理论模型 在公共服务的绩效评估领域，由于评估目的、对象、条件和活动类型的差异，研究者提出了 不同的评估模型，其中有代表性的包括目标导向评估模型、CIPP 评估模型、消费者导向评估模 2005） 提出的 CIPP 评估模型因具有既能 型，等等，其中，由美国学者斯塔弗尔比姆 （ Stufflebeam， ［9］ 评判结果，又能改进过程的优势，目前被广泛应用在社会公益项目的评估中 。CIPP 模型将评 估过程分成背景（ Context） 、输入（ Input） 、过程 （ Process） 和成果 （ Product） 评估，内容涉及项目的 实施方案、服务对象、项目成果和价值等方面，能为特定项目提供一套系统的观察模式和改进标 准。本研究通过借鉴 CIPP 评估理论模型，将从背景、投入、过程和产出四个方面来建立“青年之 家”的评估模型，其中，背景评估包含“功能定位 ”和“政策保障 ”等内容； 投入评估包含“活动场 地”“工作队伍”“经费投入”等内容； 过程评估包含“活动计划”“项目内容”“运行制度”“云平 台建设”等内容； 产出评估包含“常规活动”“特色活动”“效果评价”等内容（ 见图 1） 。 图 1 “青年之家”实体平台评估模型（ 拟） （ 二） 研究对象和方法 本文的研究对象是“青年之家 ”实体平台。 在具体研究中，选取了北京、上海、江苏、河南、 新疆、云南等地的“青年之家”实体平台作为研究对象。平台的选择主要考虑以下几个因素： 一 是区域选择上，包括了我国的京津沪，兼有东部、中部和西部地区； 二是类型选择上，包括了示范 性（ 如北京呼家楼街道青创社区青年汇 ） 和非示范性综合服务平台 （ 如北京八里庄街道华贸社 区青年汇） ； 三是运行时间选择上，不仅包括已运行多年的平台，还包括了新建平台。 在本文中，接受访谈和问卷调查的人员主要有各级团委干部 （ 与青年之家建设相关者 ） 、负 责青年之家平台运行的管理者、一线实务工作者 （ 社区工作者、青年之家专兼职工作人员 ） 、青 年工作领域专家和社区青年等。 在实证调查部分，本研究采用的资料收集和分析方法主要是访谈法、德尔菲法和层次分析 法。首先，访谈法是指在文献研究的基础上 ，根据了解到的情况拟定访谈提纲 ，通过访谈的方法 进一步了解“青年之家”机构整体的运行与管理情况。访谈对象是参与“青年之家 ”管理和活动 的团干部、专职社工、志愿者、社区青年等。访谈内容主要围绕对指标体系草案的评价和建议， 当前“青年之家”运行面临的问题及其成因展开。 其次，本文所用的德尔菲法是指修正版的德 · 30· 尔菲法，与传统做法不同，修正版的德尔菲法放弃了第一轮的开放式问卷调查 ，而改以文献梳 理、研究规划或专家座谈的方式来发展出结构性问卷 ，这一修正不仅简化了德尔菲法的程序 ，也 ［10］ 使专家的意见更具针对性 。本研究运用修正版的德尔菲法，先通过文献分析整理出最初的 运行评估指标，然后运用匿名问卷来收集专家的判断 ，并利用统计分析来整合他们的意见 ，进而 获得“青年之家”运行评估指标的共识。 在德尔菲法调查阶段，本研究将采用自编问卷作为研 究工具，一共开展两轮调查问卷，并使用 SPSS 软件进行均值分析、信度分析和效度分析，以确定 各项指标的适用性和可行性。最后，本研究运用层次分析法来确定各个指标在评估体系中的权 重。层次分析法是一种解决多目标的复杂问题的定性和定量结合的权重决策分析方法 ，它把复 杂无序的问题分解为多个组成元素 ，并根据隶属关系构造出简明有效的层次结构，再通过两两 比较的方式获得每个层次中每个元素之间的相对重要性 ，最后通过层级串联，计算出最低层次 ［11］ 中每一个元素的相对重要性排序 。 在评估指标的权重确定阶段，本研究仍将采用自编问卷 作为研究工具，对于回收的调查问卷，研究使用 YAAHP 软件来进行统计分析，通过两两对比法 进行指标权重分析。 三、“青年之家”实体平台评估指标的拟定和筛选 （ 一） 评估指标的初步拟定 根据本文所构建的“青年之家”实体平台评估模型，结合共青团中央提出的引领凝聚、组织 动员和联系服务青年等基本职责，通过对相关文献的整理和归纳分析，研究初步拟定出“青年 之家”实体平台的运行评估指标体系，共包含 4 个维度和 12 个一级指标、30 个二级指标。 其 中，评估指标体系中的 4 个维度包括： 背景维度，指评估对象存在正当性，包括“青年之家 ”建设 的目标和定位。投入维度，指“青年之家 ”要达到建设目标所需具备的人力、预算、场地等资源 保障。过程维度，指用于评估将投入资源转化为产出的活动 ，主要包括项目设计等影响“青年 之家”运行绩效的因素。产出维度，指用于评估完成任务和提供服务的数量和品质效果 ，主要 包括“青年之家”运行的成果产出和各方评价。 在确定了相关评估维度的基础上，研究结合对相关文献的整理和归纳分析，依据“青年之 家”的 4 个评估维度，设计出了一级指标和二级指标，其中，一级指标包括功能定位、政策投入、 活动场地、工作队伍、经费投入、活动计划、项目内容、运行制度、云平台建设、常规活动、特色活 动、效果评价等 12 个项目。为了方便开展测量，针对一级指标又细化形成了 30 个二级指标，最 终形成“青年之家”实体平台运行评估指标体系（ 草案） 向专家进行意见咨询（ 见表 1） 。 为了确保评估指标的合理性，在对指标进行筛选之前，研究精选了 15 位参与过“青年之 家”建设管理和研究工作的实务专家进行问卷调查和深度访谈 ，其内容主要包括评估指标的切 实性（ 指标内容是否科学客观，是否符合共青团组织对青年之家的要求和定位 ） 、评估指标的涵 盖性（ 指标内容是否有所遗漏） 、评估指标的现实可操作性 （ 指标评价内容在实践中的可行性 ） 等。根据专家反馈的意见，研究在以下方面对评估指标体系进行了修订 ： 一是在背景评估维度， 删除了“政策保障”一级指标，确定以“目标定位”作为主要评价指标，从而使背景评估的目标更 加聚焦和集中。二是在投入评估维度，结合实际情况，不仅降低了对专职工作人员的身份规定 （ 以专兼职形式代替） ，而且降低了对平台经费投入情况的考核设计 ，从而保证了评价指标更加 贴近实际。三是在过程评估维度，将一级指标调整为“项目设计”“项目内容”“管理规范 ”和 “云平台建设”四个指标，保证了各个指标之间更加具有独立性，表述也更加清晰规范，同时删 除了对工作人员培训情况的考核 ，也更加符合实际。 四是在产出评估维度，不仅强调对活动数 · 31· 量的考核，也增加了对活动开展质量的考核 ，考核内容显得更加全面且具有操作性 。 表 1 “青年之家”实体平台运行评估指标体系（ 草案） 评估维度 背景维度 一级指标 1. 功能定位 2. 政策保障 二级指标 （ 1） 建设目标符合共青团工作本位 （ 2） 发展规划符合所在地区域特点 （ 3） 与所在地党团组织、街道、居委会等共同制定了配套衔接工作办法 （ 4） 选址在青年聚集、有较强需求的区域 3. 活动场地 （ 5） 场地规模能满足青年日常活动需求 （ 6） 场地功能区划分清晰、布局合理 投入维度 4. 工作队伍 5. 经费投入 6. 活动计划 （ 7） 具有稳定的工作队伍（ 流失率低） （ 8） 具有专业工作人员（ 有专职社工，具有社工职业资格证书） （ 9） 有稳定的活动资金来源 （ 10） 年度运行计划具有可操作性 （ 11） 活动设计进行了针对性需求调查 （ 12） 区域内青年自主设计和组织的项目数量 7. 项目内容 （ 13） 符合区域青年需求的特色品牌项目数量 （ 14） 青年活动项目的宣传动员力度 （ 15） 与属地团组织、其他机构团支部的联动互动情况 过程维度 （ 16） 具有完整规范的岗位职责 8. 运行制度 （ 17） 完备的活动运行管理制度 （ 18） 有效的工作人员激励（ 或培训） 制度 （ 19） 建有满意度调查等日常考评及意见反馈制度 9. 云平台建设 （ 20） 云平台在活动发布、报名、展示、评价等方面的使用情况 （ 21） 云平台的覆盖情况（ 用户活跃度） （ 22） 团建任务（ 联系青年） 的完成情况 10. 常规活动 （ 23） 上级组织布置的活动开展情况 （ 24） 青年活动次数及参加人次 （ 25） 自主组织活动形式的多样性 产出维度 11. 特色活动 （ 26） 青年社团的培育及参与活动情况 . （ 27） 所获荣誉（ 类型与层级） （ 28） 参加青年的满意度调查结果 12. 效果评价 （ 29） 公共媒体（ 报纸、杂志、电视、广播、网络等） 的报道情况 （ 30） 其他服务事项（ 取得较好社会反响） （ 二） 评估指标的筛选 在评估指标的筛选环节研究按照德尔菲法的要求做了两轮问卷调查 。 第一轮调查内容为 指标的适当性，第二轮调查内容是指标的适当性和可行性 ，在此基础上，研究将根据德尔菲法调 查结果确定“青年之家”运行评估的指标体系。 1. 评估指标的首轮筛选 在首轮指标筛选环节，根据初步拟定的评估指标，研究设计出《“青年之家 ”运行评估指标 专家咨询意见（ 首轮） 》来收集专家对每一个评估指标的态度 ，以此作为指标评判依据。 在问卷设计方面，研究使用李克特五分量表来衡量专家的态度，问卷分别用 1 分、2 分、3 · 32· 4 分和 5 分来表示“非常不适合”“比较适合”“一般”“比较不适合”“非常适合 ”等五种态 分、 度。由于这是第一轮的指标筛选，基于保守原则，研究将各项指标的平均分 （ 处在“一般 ”和“比 较合适”之间） 视为专家对指标入选达成共识的临界分值，即平均得分超过 3. 5 分的指标将得 以保留，而其余的指标将被淘汰。 15 位负责“青 在调查对象方面，研究分别选取 15 位从事相关研究的高校和科研机构学者 、 年之家”项目管理的团委干部和 15 位参与当地“青年之家 ”项目工作的实务工作人员进行问卷 调查。这些专家或者具有深厚的理论功底 ，或者积累了丰富的实践经验，都是对“青年之家 ”项 目具有深刻认识和理解的专业人士 。按照这一研究设计，研究通过在线问卷调查的形式，以点 对点的方式发出了 45 份调查问卷。为了提高问卷的回收率和填写质量，在问卷发出后的第三 天又用电话和邮件的形式联系了各位专家 ，督促他们完成问卷填写。 经过一周的时间，研究共 回收问卷 44 份，有效回收率达到 97. 77% 。就参与调查专家的基本情况而言，在 44 位专家中， 从性别来看，男性 27 人，占比 61. 36% ，女性 17 人，占比 38. 64% 。 从学历情况来看，专科及以 下 4 人，占比 9. 09% ； 大学本科 15 人，占比 34. 09% ； 硕士研究生 20 人，占比 45. 45% ； 博士研究 生 5 人，占比 11. 36% 。 从职称情况来看，初级职称 9 人，占比 20. 45% ； 中级职称 7 人，占比 15. 91% ； 高级职称 3 人，占比 6. 82% ； 无职称 25 人，占比 56. 82% 。 从职级情况来看，科级以下 10 人，占 比 22. 73% ； 副 科 13 人，占 比 29. 55% ； 正 科 6 人，占 比 13. 64% ； 副 处 3 人，占 比 6. 82% ； 正处及以上 1 人，占比 2. 27% ； 无职级 11 人，占比 25. 00% 。 从地域分布情况来看，东 部省份（ 山东、广东、浙江） 3 人，占比 6. 82% ； 京津沪地区 29 人，占比 65. 90% ； 中部地区 （ 江苏、 安徽、河南） 5 人，占比 11. 36% ； 西部地区（ 新疆、云南） 7 人，占比 15. 91% 。 为了确保问卷结果的可靠性，研究利用 SPSS 20. 0 软件针对二级指标进行了标准差分析和 26 个二级指标的标准差均小于 1，说明专家的意见基本趋于一致 （ 见表 信度检验。结果显示， 2） 。 表2 首轮调查问卷各指标得分均值和标准差分析 （ N = 44） 二级指标 （ 1） 建设目标符合共青团工作本 位情况 （ 2） 功能定位符合所在区域特点 情况 （ 3） 发展规划符合青年群体特征 情况 （ 4） 选址的科学合理性（ 是否在青 年聚集、有较强需求的区域） 均值 标准差 4. 7500 0. 68624 二级指标 （ 14） 符合区域青年需求的特色品 牌项目情况（ 数量） 4. 5455 0. 79107 （ 15） 岗位职责的完整规范性情况 4. 6818 0. 51817 4. 6136 0. 57933 （ 16） 项目运行管理制度的完备性 情况 （ 17） 活动考评及意见反馈制度建 设情况 （ 5） 场 地 建 设 情 况 （ 是 否 统 一 标 （ 18） 云平台使用情况（ 在活动发 识、布 局 合 理、满 足 青 年 活 动 需 4. 6136 0. 61817 布、报名、展示、评价等方 面 的 使 求） （ 6） 队伍的稳定性情况（ 骨干流失 率低） 均值 标准差 4. 5455 0. 62708 4. 6364 0. 53226 4. 6591 0. 56828 4. 6136 0. 57933 4. 4545 0. 62708 用情况，用户活跃度等） 4. 5455 0. 79107 （ 19） 上级组织布置活动开展情况 · 33· 4. 5227 0. 62835 续表 二级指标 均值 （ 7） 专业工作人员参与情况（ 专职 社工、志愿者和团干部等） 标准差 4. 5000 0. 73136 （ 20） 团建任务完成情况 （ 8） 活动资金保障情况（ 工作人员 经费、常规项目经费、服务活动经 4. 5682 0. 78940 费等） （ 9） 年度运行计划的可操作性 4. 6818 0. 60127 （ 10） 项目设计的针对性需求调查 情况 （ 11） 项目宣传动员情况 （ 12） 属地团组织依托青年之家开 展服务项目情况（ 数量） （ 13） 区域内青年自主设计和组织 项目情况（ 数量） 二级指标 （ 21） 联系青年情况（ 青年活动次 数及参加人次） （ 22） 青年社团的培育及参与活动 情况 均值 标准差 4. 5227 0. 66433 4. 5682 0. 69542 4. 4318 0. 66114 4. 6591 0. 56828 （ 23） 参加青年的满意度调查 4. 6364 0. 53226 4. 5909 0. 58342 （ 24） 平台所获荣誉（ 类型与层级） 4. 3182 0. 73998 4. 5909 0. 62201 4. 5227 0. 69846 （ 25） 公共媒体报道情况（ 报纸、杂 志、电视、广播、网络等） （ 26） 其他服务事项（ 取得较好社 会反响） 4. 4091 0. 69276 4. 5000 0. 66473 研究运用 SPSS 20. 0 软件对本次问卷所有二级指标的克隆巴赫系数 （ Cronbachs alpha） 进 行了检验，结果显示，问卷总体的克隆巴赫系数为 0. 967，背景、投入、过程和产出四个维度的克 0. 922、 0. 942 和 0. 915。说明问卷只有较好的可信度（ 见表 3） 。 隆巴赫系数分别为 0. 734、 在对信度进行检验的基础上，研究还对问卷结果进行了两项效度检验。 一方面，由于问卷 设计是以专业学术文献为基础，并且通过了专家的意见咨询，因而可以认为具有一定的内容效 度（ content validity） 。另一方面，研究运用 SPSS 20. 0 进行 KMO 和 Bartlett 的球形度检验，得到 KMO 值为 0. 726，Bartlett 的球形度检验的近似卡方值是 1 362. 499，显著性是 0. 000，累计解释 变异量达到 78. 331% ，可见指标体系具有一定的构建效度 （ construct validity） 。 表3 首轮调查问卷的信度分析 项目 Cronbachs alpha 基于标准化项目的 Cronbachs alpha 样本数量 总问卷 0. 967 0. 969 26 背景维度 0. 734 0. 714 3 投入维度 0. 922 0. 927 5 过程维度 0. 942 0. 943 10 产出维度 0. 915 0. 918 8 综上所述，在“青年之家”实体平台评估指标体系首轮调查中，所有的指标均通过了检验， 可以作为评估指标继续使用。对于个别得分略低的指标，经过与专家沟通商量，对相关指标的 表述方式进行了调整和修改。 · 34· 2. 评估指标的第二轮筛选 11 个一级 经过首轮的专家筛选，“青年之家”实体平台运行评估指标体系还包括 4 个维度、 指标和 26 个二级指标，研究以此设计出《“青年之家 ”运行评估指标体系专家咨询问卷 （ 第二 轮） 》。本轮筛选的目的在于让专家对指标的态度趋于集中 ，以获得最终的评估指标，因此，问 卷内容设计仍然采用李克特五分量表 ，但是专家达成共识的判别分数却提升到 4 分，即只有平 均得分在 4 分以上的指标才能进入“青年之家”运行评估指标体系。 本轮调查对象仍然限定为首轮选定的 45 位专家，通过问卷形式点对点发放 45 份，成功回 44 位专家构成的基本情况与首轮调查相同 。 对回收 收有效问卷 44 份，有效回收率为 97. 77% ， 26 个评估指标的平均得分均超过 4. 00，从分维度的指标得分来看，背景维 问卷进行统计分析， 度的各指标得分均值都大于 4. 60，投入维度的各指标得分均值都大于 4. 30，过程维度的各指标 26 个评估指标得分的标 得分均值都大于 4. 40，产出维度的各指标得分均值都大于 4. 30。同时， 准差都小于 1，这也意味着专家对这 26 个评估指标达成了相对一致的意见 。 在本轮调查中，研究仍然使用 SPSS 20. 0 软件对本轮问卷的信度进行了检验，结果显示，总 体的克隆巴赫系数为 0. 984，四个维度的克隆巴赫系数也都超过 0. 900，而且较首轮调查，所有 维度的信度指标均有提升。再次说明问卷具有较好的可信度 （ 见表 4） 。 表4 第二轮调查问卷信度分析 项目 Cronbachs alpha 基于标准化项目的 Cronbachs alpha 样本数量 总问卷 0. 984 0. 984 26 背景维度 0. 924 0. 927 3 投入维度 0. 937 0. 939 5 过程维度 0. 972 0. 973 10 产出维度 0. 946 0. 949 8 在效度方面，研究仍然运用 SPSS 20. 0 软件对问卷进行 KMO 和 Bartlett 的球形检验，得到 KMO 值是 0. 722，Bartlett 球形度检验的近似卡方值是 1716. 150，显著性是 0. 000，累计解释变异 量达到 80. 469% ，通过构建效度的检验。 3. 评估指标的确定 为了保证评估指标具有可操作性，在第二轮“青年之家 ”实体平台运行评估指标体系调查 中，在对二级指标的适当性进行评判的同时 ，研究也邀请专家对二级指标的资料收集便利性进 行了评价。在问卷设计方面，本部分量表使用李克特五分量表来衡量专家对于指标收集便利性 2 分、 3 分、 4 分和 5 分来表示“非常不方便”“比较不方便”“一般”“比 的评价，问卷分别用 1 分、 较方便”“非常方便”等五种评价。通过对回收的问卷进行分析，专家对各指标的便利性评价得 分都超过了 4. 00 分，并且从 26 个二级指标的得分情况来看，得分最高值为 4. 66 分，得分最低 值为 4. 30 分，其中绝大多数指标的得分都在 4. 40 分以上，说明指标收集工作在实际中具有较 好的可操作性，可以用于实际评估。 在对“青年之家”实体平台运行评估指标体系进行了两轮德尔菲法专家意见判定之后 ，结 合专家对于指标适当性和便利性的评价 ，研究最终确定了“青年之家 ”实体平台运行评估指标 体系包括背景、投入、过程、产出 4 个维度，目标定位、活动场地、工作队伍、经费保障、项目设计、 项目内容、管理规范、云平台建设、常规成果、特色效果、社会评价等 11 个一级指标和“建设目标 符合共青团工作本位的情况”“功能定位符合所在区域特点的情况”“发展规划符合青年群体特 · 35· 征的情况”等 26 个二级指标，具体指标的适当性得分均值如下表所示 （ 见表 5） 。 表 5 “青年之家”实体平台运行评估指标体系（ 含均值） 评估维度 一级指标 背景维度 1. 目标定位 （ 4. 64） （ 4. 48） 二级指标 （ 1） 建设目标符合共青团工作本位情况（ 4. 61） （ 2） 功能定位符合所在区域特点情况（ 4. 61） （ 3） 发展规划符合青年群体特征情况（ 4. 70） 2. 活动场地 （ 4. 39） 投入维度 3. 工作队伍 （ 4. 48） （ 4. 41） 4. 经费保障 （ 4. 34） （ 4） 选址的科学合理性（ 是否在青年聚集、有较强需求的区域） （ 4. 59） （ 5） 场地建设情况（ 是否统一标识、布局合理、满足青年活动需求） （ 4. 59） （ 6） 队伍的稳定性情况（ 骨干流失率低） （ 4. 34） （ 7） 专业工作人员参与情况（ 专职社工、志愿者和团干部等） （ 4. 45） （ 8） 活动资金保障情况 （ 工作人员经费、常规项目 经 费、服 务 活 动 经 费 等） （ 4. 43） （ 9） 年度运行计划的可操作性（ 4. 55） 5. 项目设计 （ 4. 55） （ 10） 项目设计的针对性需求调查情况（ 4. 55） （ 11） 项目宣传动员情况（ 4. 59） （ 12） 属地团组织依托青年之家开展服务项目情况（ 数量） （ 4. 48） 6. 项目内容 过程维度 （ 4. 55） （ 13） 区域内青年自主设计和组织项目情况（ 数量） （ 4. 50） （ 14） 符合区域青年需求的特色品牌项目情况（ 数量） （ 4. 59） （ 4. 51） （ 15） 岗位职责的完整规范性（ 4. 48） 7. 管理规范 （ 4. 20） （ 16） 项目运行管理制度的完备性（ 4. 43） （ 17） 活动考评及意见反馈制度建设情况（ 4. 50） 8. 云平台建设 （ 4. 20） （ 18） 云平台使用情况（ 在活动发布、报名、展示、评价等方面的使用情况，用户 活跃度等） （ 4. 43） （ 19） 上级组织布置活动开展情况（ 4. 64） 9. 常规成果 （ 4. 55） （ 20） 团建任务完成情况（ 4. 57） （ 21） 联系青年情况（ 青年活动次数及参加人次） （ 4. 59） 产出维度 （ 4. 52） （ 22） 青年社团的培育及参与活动情况（ 4. 55） 10. 特色效果 （ 4. 57） （ 23） 参加青年的满意度调查（ 4. 64） （ 24） 平台所获荣誉或奖励情况（ 4. 30） 11. 社会评价 （ 4. 39） （ 25） 公共媒体（ 报纸、杂志、电视、广播、网络等） （ 4. 36） （ 26） 其他服务事项（ 取得较好社会反响） （ 4. 52） 四、“青年之家”实体平台评估指标的权重分配 在评估指标的权重赋值环节，本研究采用层次分析法进行权重分配 。主要步骤包括： 一是建立层次结构模型 。 结合已确定的评估指标 ，研究建立了包括三个层次的结构模 · 36· 型 。 第一层为目标层 ，即确定“青年之家 ”背景 、投入 、过程和产出等维度评估指标的权重 ； 第 二层是准则层 ，主要包括“目标定位”“活动场地”“工作队伍”“经费保障”“项目设计”“项目 内容”“管理规范”“云平台建设”“常规成果”“特色效果”“社会评价 ”等 11 个一级指标 ； 第 三层是要素层 ，共包括建设目标情况 、功能定位情况 、发展规划情况 、选址科学性情况等 26 个二级指标 。 二是构建两两比较的判断矩阵 。 根据构建的层次结构模型 ，研究设计出《“青年之家运 行的评估指标 ”AHP 专家咨询问卷 》，用以协助专家来判断评估指标的相对重要性程度 。 该 调查方法请专家对同一层次的评估指标进行两两比较 ，评分等级分为 1 － 9 分 9 个等级 ，分数 越高 ，则意味着其中一个指标相对于另一个指标的重要性越高 ，最终对重要性越高的指标赋 予越高的权重 。 根据已确定的指标体系 ，本研究建立了 13 个判断矩阵 （ 一级 1 个 ，二级 3 个 ， 三级 9 个 ） 。 三是进行判断矩阵的一致性检验 。 本研究排序权向量采用特征根方法 。 在计算出矩阵 的最大特征根后 ，需要先对矩阵的一致性进行检验 （ 即对专家判断的逻辑合理性进行检验 ） 。 通过一致性检验后方可根据最大特征根求解矩阵的权向量 。 本研究的一致性检验分为两个 步骤 ： 首先 对 44 份 专 家 答 卷 进 行 一 致 性 检 验 ，对 存 在“不 一 致 ”或 部 分 缺 失 的 回 答 通 过 YAAHP 的“检查 ”功能进行修补 （ 其中缺失值通过其他专家的回答的算数平均值进行补充 ） 。 44 份问卷全部通过一致性检验 。 在此基础上 ，本研究以群体决策的方式 ，通过几何平均数对 专家回答进行集结 ，基于专家打分的均值得出一组判断矩阵 。 对集结后的矩阵进行一致性 13 个矩阵均满足一致性的要求 （ ＜ 0. 1） 。 检验 ， 四是对评估指标进行权重计算。本研究采用几何平均数的方法集结所有专家的判断矩阵 ， 得到的 13 个判断矩阵通过了一致性检验。 之后通过特征向量法，分别计算出每级指标的权重 （ 通过矩阵的最大特征根计算特征向量 ，经过归一化处理后得到权向量 ） 。同时，为了检验组合 权向量的一致性，研究根据软件输出结果 C. I. 和 Ｒ. I. 指标计算了各个维度的组合一致性比 例。结果表明，总排序权向量的组合一致性检验通过，可以按照权重计算的结果进行决策。 基 于此，研究最终得出“青家之家”评估指标体系如下（ 见表 6） 。 表 6 “青年之家”实体平台运行评估指标体系（ 含权重） 评估维度 一级指标 背景维度 1. 目标定位 （ 0. 2723） （ 0. 2723） 二级指标 （ 1） 建设目标符合共青团工作本位情况（ 0. 0724） （ 2） 功能定位符合所在区域特点情况（ 0. 0819） （ 3） 发展规划符合青年群体特征情况（ 0. 1180） 2. 活动场地 （ 4） 选址的科学合理性（ 是否在青年聚集、有较强需求的区域） （ 0. 0148） （ 0. 0224） （ 5） 场地建设情况（ 是否统一标识、布局合理、满足青年活动需求） （ 0. 0076） 投入维度 3. 工作队伍 （ 6） 队伍的稳定性情况（ 骨干流失率低） （ 0. 0342） （ 0. 1388） （ 0. 0591） （ 7） 专业工作人员参与情况（ 专职社工、志愿者和团干部等） （ 0. 0249） 4. 经费保障 （ 8） 活动资金保障情况 （ 工作人员经费、常规项目 经 费、服 务 活 动 经 费 等） （ 0. 0574） （ 0. 0574） · 37· 续表 评估维度 一级指标 二级指标 （ 9） 年度运行计划的可操作性（ 0. 0246） 5. 项目设计 （ 0. 0668） （ 10） 项目设计的针对性需求调查情况（ 0. 0286） （ 11） 项目宣传动员情况（ 0. 0136） （ 12） 属地团组织依托青年之家开展服务项目情况（ 数量） （ 0. 0264） 6. 项目内容 过程维度 （ 0. 1042） （ 13） 区域内青年自主设计和组织项目情况（ 数量） （ 0. 0318） （ 14） 符合区域青年需求的特色品牌项目情况（ 数量） （ 0. 0461） （ 0. 2645） （ 15） 岗位职责的完整规范性情况（ 0. 0221） 7. 管理规范 （ 0. 0696） （ 16） 项目运行管理制度的完备性情况（ 0. 0217） （ 17） 活动考评及意见反馈制度的建设情况（ 0. 0258） 8. 云平台建设 （ 0. 0239） （ 18） 云平台的使用情况（ 在活动发布、报名、展示、评价等方面的使用情况，用 户活跃度等） （ 0. 0239） （ 19） 上级组织布置的活动开展情况（ 0. 0215） 9. 常规成果 （ 0. 0780） （ 20） 团建任务的完成情况（ 0. 0200） （ 21） 联系青年情况（ 青年活动次数及参加人次） （ 0. 0364） 产出维度 （ 0. 3244） （ 22） 青年社团的培育及参与活动情况（ 0. 0332） 10. 特色效果 （ 0. 0935） （ 23） 参加青年的满意度调查情况（ 0. 0468） （ 24） 平台所获荣誉或奖励情况（ 0. 0134） 11. 社会评价 （ 0. 1530） （ 25） 公共媒体的报道情况（ 报纸、杂志、电视、广播、网络等） （ 0. 0993） （ 26） 其他服务事项（ 取得较好社会反响） （ 0. 0537） 五、结论与建议 本研究以国内“青年之家”实体平台作为研究对象，基于公共服务绩效评估理论中的 CIPP 评估理论模型，充分运用访谈法、德尔菲法和层次分析法，通过概念化模型建立、指标筛选和权 11 个一级指标和 26 个具体指标的 重赋值等三个主要步骤，最终发展出一套包含了 4 个维度、 “青年之家”实体平台评估指标体系。 该指标体系具有两个重要特征： 一是评估内容的涵盖面 广，指标结构较为系统全面。二是评估的侧重点突出，体现出对结果的关注。 产出维度的评价 指标权重远高于其他维度，背景维度和过程维度的评价指标权重居中，投入维度的评价指标权 重略低，对于“青年之家”工作实践具有较好的引导意义。 基于研究发现，为了进一步改善和提升“青年之家 ”建设水平和工作质量，推动共青团专项 工作的发展，本文提出如下建议： 第一，加强专业化评估队伍建设，提高评估工作的规范化水平。 针对目前青年之家评估工 作现状，建议成立专门的评估工作团队和专家委员会 ，其职责包括研究起草“青年之家 ”评估工 作计划和实施指南，组织评估相关培训，监督评估实施情况，撰写年度工作报告，负责运营评估 网站，提出评估工作优化建议等。为保证评估工作的客观性，也可以考虑通过政府采购的形式， 委托第三方社会组织对“青年之家”运行情况进行科学客观的评估。 · 38· 第二，合理运用评估结果，实现评建结合、以评促建。 开展“青年之家 ”运行评估工作的目 的之一是查找其建设和运行过程中存在的不足，并通过“目标导向 ”来推动机构的发展建设。 结合研究开发的评估指标体系，在公布“青年之家 ”评估结果的同时，应为其提供下一步持续改 善的可操作建议。同时，对于评估过程中发现的特色项目 、管理模式创新等典型事例，要做好系 统内的宣传推广和激励，从而带动“青年之家”的整体建设向好发展。 第三，积极培育青年社团，开发特色项目，增强活动吸引力。针对评估指标体系开发过程中 发现的平台活动中“由上而下”的“规定动作 ”所占比重过高问题，建议在“青年之家 ”的具体运 行实践中，积极培育能够自主设计并开展活动的青年社团 ，鼓励其开发一批满足青年需求的特 色项目，并以此带动“青年社团的培育及参与情况”“区域内青年自主设计和组织项目的情况 ” “符合区域青年需求的特色品牌项目情况 ”等一系列相关指标产出的提高。 第四，适时调整平台的角色功能，使其不断适应时代发展新趋势。在评估指标开发过程中， 研究发现“青年之家”的角色和功能是决定评估指标内容的最为核心的影响因素 。 基于此，“青 年之家”在实践中除了要紧紧围绕执政党的工作目标确定其核心功能之外 ，还要不断优化其公 共服务功能，使平台的工作更加紧密地与各级政府服务青年群体 、满足青年需求、促进青年发展 的公共服务职能相结合，进而来获取政府机构更大范围、更多经费和更长时间的支持。 ［参 考 文 献 ］ ［1］共青团中央基层建设部： 《深化“青年之家”建设三年行动方案（ 2020 － 2022） 》（ 团组字（ 2019） 15 号） ，第 2 页。 ［2］陈 2020 年 6 月 4 日。 宗： 《促进青少年事务社工成为“青年之家”标配》，载《中国青年报》， ［3］安建增： 《青年中心的发展现状及问题》，载《四川理工学院学报》， 2012 年第 2 期。 ［4］漆光鸿 徐选国 等： 《青少年社区服务机构治理机制再探索———基于北京社区青年汇的实践》，载《中国青年社会科学》， 2017 年第 1 期。 ［5］漆光鸿： 《青少年社区服务机构在嵌入过程中的承认困境研究———以北京社区青年汇为例》，载《青年探索》，2015 年第 4 期。 ［6］汪永涛： 《青少年综合服务平台建设研究》，载《中国青年研究》， 2016 年第 4 期。 ［7］沈 涛 李先勇 向德平： 《青少年空间发展现状及对策研究———基于武汉市青少年空间建设的调查分析》，载《中国青年研 2012 年第 11 期。 究》， ［8］易帅东 郑 2015 年第 6 期。 雄： 《北京市社区青年汇专职社工人才队伍建设研究报告》，载《中国青年研究》， ［9］斯塔弗尔比姆等： 《评估模型》，苏锦丽等 译，北京： 北京大学出版社 2007 年版，第 323 页。 ［10］［11］叶 托 2015 年第 2 期。 胡税根： 《政府购买社会服务的绩效评估指标体系研究》，载《广东行政学院学报》， （ 责任编辑： 韩永涛） · 39·