方法公开 · 数据可查 · 程序公正
第一章 总纲
CPPPS 是一套公开、透明、可复现的综合评价体系。它对高校、城市、企业、期刊、行业协会、国家等各类评价对象,依据统一的方法论框架,给出可审计、可复算的评价结果与排名。
本体系遵循三项基本原则:
- 方法公开:权重、算法、数据源全部公开,任何第三方可复算验证。
- 数据可查:所有结论基于可查证的数据,标注来源、截止日期与置信区间。
- 程序公正:评价对象完整覆盖,保留申诉与复算通道。
第二章 目的与意义
目的
- 建立一套自主、系统、可复现的综合评价方法,为各类主体的横向比较与纵向监测提供量化工具。
- 补足现有评价体系在方法论上的不足——主观权重过高、本土贡献维度缺失、数据源不透明等。
- 通过公开的方法与数据,提升评价结果的可信度与可检验性。
意义
- 为决策、治理与公众选择提供可信、可查证的参考依据。
- 以"贡献度"等维度,引导评价对象关注实际产出与本土价值,而非单一的国际指标。
- 为学术研究、行业比较、国际对标提供一套方法论样本。
第三章 方法论总则
3.1 通用评价公式
任一评价对象 o 在指数 d 下的综合得分:Sd(o) = Σ wk(d) · σk(xk(o)) ,Σ wk(d) = 1
其中 xk(o) 为第 k 项指标原始值,σk(·) 为标准化映射(统一至 0–100),wk(d) 为权重。
3.2 四层指标框架
S = αH + βV + γE + δC ,α+β+γ+δ = 1
| 层 | 符号 | 含义 | 默认权重 | 数据来源 |
|---|---|---|---|---|
| 客观层 | H | 可查证的客观指标 | 0.35 | 官方统计、财报、文献 |
| 舆情层 | V | 全网情绪、口碑、风险 | 0.30 | 网络舆情数据 |
| 专家层 | E | 定向专家评审 | 0.15 | 问卷/评审 |
| 贡献层 | C | 对本国/本领域发展的实际贡献 | 0.20 | 公开数据 |
3.3 指标标准化方法
- 极差标准化(min-max):σ(x) = (x − xmin)/(xmax − xmin) × 100。
- 百分位标准化:按样本分布取百分位,用于偏态分布指标。
- 反向指标:对"越低越好"的指标,标准化后取 100 − σ(x)。
- 标准化方法随指标公开,并在数据源清单中注明。
3.4 权重确定方法
采用"专家赋权 + 数据驱动校准"的复合方法,一经发布在当期保持不变,保证复现性。权重调整须在新一期发布时同步说明理由。
3.5 置信区间与数据时效
- 每项结果标注数据截止日期与算法版本号。
- 对受抽样影响的指标,给出置信区间或波动范围。
- 用于趋势比较时,注明口径一致性。
第四章 已有评价算法对标与借鉴
| 体系 | 核心方法 |
|---|---|
| HDI 人类发展指数 | 三维几何平均 (I健康·I教育·I收入)1/3,避免单一维度拉高总分 |
| QS 世界大学排名 | 学术声誉 40%、雇主声誉 10%、师生比 20%、篇均引用 20%、国际教师/学生各 5% |
| THE 泰晤士 | 教学 30%、研究 30%、引用 30%、国际展望 7.5%、产业收入 2.5% |
| ARWU 软科 | 校友获奖 10%、教师获奖 20%、高被引 20%、N&S 论文 20%、国际论文 20%、师均表现 10% |
| 穆迪主权评级 | 经济实力、制度与治理、财政实力、突发事件敏感性四因素 |
| 标普主权评级 | 制度与治理、经济结构、外部流动性、财政灵活性与债务、货币灵活性五因素 |
| 世界幸福报告 | GDP、社会支持、健康寿命、自由、慷慨、腐败感知六变量回归 |
| WEF 全球竞争力 | 制度、基础设施、宏观经济、健康、教育等十二支柱 |
| JCR 影响因子 | IF = 前两年发文被引次数 / 前两年发文总量 |
| 中科院期刊分区 | 按影响因子分位数划分 Q1–Q4 区 |
第五章 对现有评价体系的学术评价
- QS / THE:声誉类主观权重合计高达 40%–50%,结果对英语国家与非英语国家存在结构性差异,且缺少"人才培养对本国贡献"维度。
- 软科(ARWU):纯客观指标值得借鉴,但获奖导向偏向历史存量,对新兴学科与发展中国家高校不利;中国大学排名的权重与数据源公开程度不足,可复现性受限。
- 武书连 / 校友会:指标偏向本土,但权重与算法公开度不足,第三方难以复算。
- 三大主权评级机构:评级方法存在顺周期性与对新兴经济体的系统性低估。
- HDI:仅覆盖健康、教育、收入三维,未纳入分配公平、环境可持续与主观福祉。
- 世界幸福报告:主观幸福感依赖抽样调查,跨文化可比性存疑。
CPPPS 的改进方向:以公开权重与数据源解决透明性;以贡献层补足本土价值维度;以舆情层补充主观福祉的客观化测度。
第六章 各指数项评价公式
6.1 中国榜
高校评价指数
H = 0.25σ(论文产出) + 0.20σ(师资) + 0.20σ(科研经费) + 0.20σ(成果转化) + 0.15σ(学术自主性)
V = 0.50σ(社会口碑) + 0.30σ(学界声誉) + 0.20σ(风险事件)
C = 0.50σ(毕业生国家关键领域去向) + 0.30σ(科研产业贡献) + 0.20σ(本土人才培养)
省市幸福指数
H = 0.25σ(房价收入比⁻¹) + 0.20σ(空气质量) + 0.20σ(消费水平) + 0.15σ(婚姻比例) + 0.20σ(交通拥堵⁻¹)
V = 0.40σ(情绪指数) + 0.30σ(口碑指数) + 0.30σ(风险事件指数)
C = 0.50σ(民生改善) + 0.50σ(治理效能)
上市公司质量指数
H = 0.25σ(净资产收益率) + 0.20σ(营收增长) + 0.20σ(资产负债率⁻¹) + 0.20σ(研发投入) + 0.15σ(净利润)
C = 0.40σ(就业) + 0.30σ(税收) + 0.30σ(产业带动)
行业协会促进指数
H = (1/8)·[σ(会员规模)+σ(学术活动)+σ(标准制定)+σ(人才培养)+σ(产学研)+σ(话语权)+σ(国际交流)+σ(科普)]
C = 0.40σ(人才供给) + 0.30σ(技术创新) + 0.30σ(标准输出)
影响力人物指数
H = 0.30σ(成就) + 0.30σ(财富) + 0.20σ(行业地位) + 0.20σ(公益贡献)
政务效能指数
H = 0.40σ(政务公开度) + 0.30σ(办事效率) + 0.30σ(数字化水平)
城市文脉指数
H = 0.35σ(历史渊源) + 0.25σ(名人典籍) + 0.20σ(物产技艺) + 0.20σ(文脉传承)
6.2 全球榜
国家综合发展指数(借鉴 HDI 几何平均 + 扩展维度)
S = (∏ σm(xm)wm)1/Σw ,覆盖健康、教育、收入、治理、环境、安全、创新、幸福
国家幸福指数
H = 0.25σ(人均GDP) + 0.20σ(社会支持) + 0.20σ(健康寿命) + 0.15σ(自由度) + 0.10σ(慷慨) + 0.10σ(清廉)
国家主权信用评价(对标穆迪/标普 + 扩展)
H = 0.25σ(经济实力) + 0.20σ(财政实力) + 0.20σ(外部流动性) + 0.20σ(制度与治理) + 0.15σ(货币灵活性)
结果映射为 CPPPS 信用等级(AAA/AA/A/BBB/BB/B…),并公开映射阈值。
全球榜的学府、城邑、商界、环境、科创各类,复用中国榜对应类的四层框架,仅将评价对象与客观指标替换为国际口径。
第七章 数据与算法规范
- 数据源分三级管理:官方数据(统计公报、财报、年报)、公开数据(公开数据库、机构报告)、自采数据(网络舆情、文献)。三级均在数据源清单中标注。
- 每项指数同步公开:权重表、算法脚本、原始数据(脱敏后)、标准化方法。
- 算法版本化:每次更新变更版本号,历史版本可回溯。
- 舆情层采用情感分析、事件抽取、叙事识别等方法,方法细节公开。
第八章 评价组织与治理
8.1 创始人
CPPPS 指标体系的创始人为赵盛烨。创始人负责确立总则与通用方法论(四层框架、通用公式、四条铁律),并对各指数的方法论拥有最终学术解释权;维护方法论的统一性与可复现性,对各评价委员会的方法论进行审核。
8.2 评价委员会
- 每个指数项(或指数大类)设立一个评价委员会,由该领域具有专业资质的专家组成。
- 委员会职责:确定该指数的指标集与权重;审核数据源与数据质量;审定排名结果;受理申诉。
- 委员会名单公开,接受社会监督。
8.3 评价主席
- 每个评价委员会设主席一名,由委员会推举或创始人聘任。
- 主席职责:召集并主持委员会;对该指数的方法论与评价结果承担学术责任;签署发布。
- 实行主席签署制,每期指数结果由评价主席署名发布。
8.4 工作流程
指标设计 → 委员会审定 → 数据采集 → 算法计算 → 委员会复核 → 主席签署 → 发布 → 申诉处理
8.5 公信力保障
- 委员会成员与主席名单公开。
- 利益冲突回避:委员与评价对象存在利害关系时应当回避。
- 委员实行任期制与轮换。
- 委员会决议以公开说明或会议纪要留档。
第九章 发布与更新规范
- 排名结果永久免费公开,不向评价对象收取任何上榜费用。
- 每期发布同步发布《方法论白皮书》与《数据源清单》。
- 保留申诉与复算通道,评价对象可在公示期内提交数据复议,经核实后修正并公告。
- 结果标注数据截止日、算法版本、置信区间。
第十章 公信力与合规
9.1 数据与个人信息
- 《中华人民共和国数据安全法》第二十一条:国家建立数据分类分级保护制度。CPPPS 对所涉数据实行分类分级管理。
- 《中华人民共和国数据安全法》第三十二条:任何组织、个人收集数据,应当采取合法、正当的方式。CPPPS 数据采集限于公开渠道。
- 《中华人民共和国个人信息保护法》第十三条:处理个人信息应当取得同意或符合法定情形。CPPPS 不采集、不公开可识别个人信息;确需处理的,依法取得同意并脱敏。
- 《中华人民共和国网络安全法》第十二条:任何个人和组织不得利用网络从事危害网络安全、扰乱社会秩序的活动。
9.2 统计与数据真实
- 《中华人民共和国统计法》第二十五条:统计调查对象必须如实提供统计资料,不得虚报、瞒报、拒报、迟报。CPPPS 引用官方统计须注明来源,不作篡改。
- 《中华人民共和国统计法》第二十九条:统计机构、统计人员对统计资料保密。CPPPS 对涉及保密范围的统计资料依法保密。
9.3 名誉与商誉
- 《中华人民共和国民法典》第一千零二十四条:民事主体享有名誉权。任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。
- 《中华人民共和国民法典》第一千零二十五条:为公共利益实施新闻报道、舆论监督等行为,影响他人名誉的,不承担民事责任,但有捏造、歪曲事实等情形的除外。
- 《中华人民共和国民法典》第一千零二十六条:认定行为人是否尽到合理核实义务,应当考虑内容来源的可信度、对明显可能引发争议的内容是否进行了必要调查等因素。
- 《中华人民共和国反不正当竞争法》第十一条:经营者不得编造、传播虚假信息或者误导性信息,损害竞争对手的商业信誉、商品声誉。
据此,CPPPS 所有评价结论必须基于可查证数据,不进行无依据的定性评价;涉及企业、机构、个人的评价,须尽到合理核实义务,并保留申诉通道。
9.4 知识产权
- 《中华人民共和国著作权法》:引用的文献、数据版权归原作者,引用依法注明来源;CPPPS 自身的方法论白皮书、算法脚本依法享有著作权,允许转载但须署名。
9.5 网络信息内容
- 《网络信息内容生态治理规定》:CPPPS 发布内容应当遵守法律法规,不得含有违法信息,不得发布虚假信息。