德国科学评估经验及其对中国科技评估实践的启示.pdf

第 2 9卷第 4期 2 0 0 8年 7月 科研管理 S c i e n c e Re s e a r c h Ma n a g e me n t V0 1 2 9 No 4 J u l y 2 0 08 文章编号：1 0 0 0 2 9 9 5(2 0 0 8)o 4 0 0 5 0 1 8 5 德 国科学评估经验及 其对 中国科技评估 实践 的启示 陈乐生(中德科学中心，北京1 0 0 0 8 5)摘要：经济、科技全球化进程加快，德国教育研究实力面临严峻挑战。为了提升德国教育研 究机构的竞争力，德国政府对高校和科研机构进行了一系列改革，并实施国际科学评估，推动高校和科研机构改革，促进了德国 教育研究事业发展。本文系统介绍了德国科学评估组织体 系、科学评估原则及其程序、科学评估主要标准及 评估 实践经验，研究提出了德 国科 学评估经验对中国科技评估实践的启示。关键词：德国；科学评估；中国；评估实践；启示 中圈分类号：G 5 1 I 文献标识码：A 科学评估是科技管理 的重要手段之一，近年 来受到了学术界和政府科技管理部门以及科研相 关机构的广泛关注，不仅有关科技评估的著作和 论文显著增长，而且在评估 实践层面涌现 了一大 批科技评估机构。尽管如此，如何评价科研机构 和高等院校的科研工作，仍然是长期困扰各国政 府科技主管部门的一道难题。德国经过多年探 索，在科研工作评价方面积累了许多经验，值得总 结并借鉴。前几年德国的高校、马普学会、德国科 学基金会纷纷开展科学评估，取得了显著成效，高 校、科研机构及基金组织通过改善运行机制，提高 了工作效率并调整了未来发展方向。改革的结 果，既提升了科技在社会和公众中的地位，也扩大 了科技在国内外的影响。本文系统介绍了德国科学评估组织体系、科 学评估原则及其程序、科学评估主要标准以及若 干评估实践的成效，分析 了德 国科学评估 过程 中 面临的问题与解决问题的思路，研究提出了德国 科学评估经验对中国科技评估实践的启示。1 德国科学评估组织体 系 德国政府一直把科学评估作为科学、教育和 研究事业的重要管理手段和监督措施。科学评估 对德国科研和教育事业发挥了重要的作用，已经 成为建立科学教育机构设置、科研计划制定和项 目 选择等决策的重要依据，成为保障科研和教育 质量、提高工作效率的重要措施，成为国家公共基 金使用效益评估必不可少的方法和程序。值得指 出的是，科学评估不是给高校或科研单位，特别是 科研人员额外增加压力的一种政府行为，也不 能 打破被评单位正常的工作秩序，更不能给被评估 单位和科研人员“添乱”。目前德国已经建立了 比较完整的科学评估组织体系，包括联邦层面的 科学顾 问委员会、科研教育资助机构和大学 与研 究机构等。1 1 德国科学顾 问委员会开展的评估 活动德 国科学顾问委员会成立于 1 9 5 7 年，是由联邦政府 和州政府共同支持和承担费用的咨询机构，是联 邦政府与州政府主要评估机构和独立的科学咨询 与科研政策机构，主要任务是对高等院校和科研 机构的组织结构、工作效率、管理能力、财政状况、发展方 向等问题，提 出权 威性评估报告和改进措 施建议。德国科学顾问委员会成员来 自 科技界和 政府，由联邦政府任命派遣。成员每届任期三年，收稿 日期：2 0 0 8 0 1 2 9 作者简介：陈乐生(1 9 5 7 1 1)，男(汉)，上海南汇人，中德科学中心，正译审，科研管理，。维普资讯 科研管理 2 0 0 8崔 最多可任职两届。在评估过程 中，评估机构成员 必须遵守严格的回避制度，不得参加与 自己有 利害关系的相关单位的评估工作。德国科学顾问 委员会作为独立的评估机构，曾经对原东德地区 的科研机构和高等院校进行了一系列评估，提出 了许多有益 的评估 意见 和建议，为政府部 门决策 提供了重要支撑。德 国科学评估委员会的评估实 践奠定了其在德国科研机构和高等院校评估中的 重要地位，其权威性得到了德国高等院校和科研 机构决策者 的广泛认 同。1 2 科研教 育资助机构开展的评估活动德 国 科学基金会、德意志学术交流中心、洪堡基金会等 机构组织评估委员会，邀请一些专家学者对本机 构资助的项 目 进行评估。为了保证评估工作的公 正性，评估组织和实施评估时，力求邀请无利益关 系的外部专家参加评估。1 3 大学和科研机构开展的评估活动 马普学 会、弗朗霍夫学会、亥姆赫兹学会和莱布尼兹学会 等大型研究机构对其所属研究所或研究组进行 的 评估。值得指出的是，评估在功能上区分为内部 评估和外部评估，前者通常是为了改进机构 内部 管理、提高资源使用效率而进行的评估，兼具问题 诊断功能，后者通常是为资源(目前的资源或未 来的资源)分配提供决策依据。实践中，被评估 机构的自评估结果也列入被评估机构提交的文件 清单，作为评估委员会的参考资料。2 德 国科学评估原则及其程序 德国科学评估在多年科学评估实践中积累了 大量经验，形成了有效保证评估结果公正合理的 评估原则和评估程序。评估原则包 括 4个方 面：一是公开透 明。评 估委员会成员开始评估时，必须知道评估的标准、程序、方法和评估专家组成员职责。评估委员和 成员须事先将这些评估程序和方法向被评估的科 研机构进行解释。二是充分参与。评估者和 被评估者必须充分参与评估活动。评估专家必须 全程参与评估，充分 占有与评估有关的信息，包括 听取被评估机构的评估报告陈述和邀请被评估机 构代表参加讨论以及找被评估单位领导和科研人 员单独谈话。三是真实可靠。被评单位的数据、档案、成果应该保持原始状态，体现其真实性，不 得修改或篡改。被评单位不得进行针对评估进行“突击性”准备，以免提供虚假信息。四是公开一 致。评估方法必须得到参与评估专家 的一致认 同。如果评估专家在评估过程中产生异议，应该 让被评估机构进行解释或申辩，但被评估机构没 有否决权。被评估机构的 自评报告必须得到所有 评估专家的认可，在评估过程中不得修改。必要 时，评估专家委员会可以访 问被评估机构，进行公 开提问和听取意见。在评估委员会提出问题前，应将评估报告提交被评估机构资助部门征求意 见。评估组织者必须把评估结果公布于众，如果 发现对评估结果的真实性产生置疑，可 以拒绝或 中断评估工作，进行重新评估。除坚持上述基本原则之外，还需要注意两点。一是重视报告 的建议功能。评估报告一经通过，不得修改。评估报告必须附有建议书，建议书应 该直接与被评单位见 面，评估小组可 以听取被评 单位对此的反应，但不接受他们的反馈意见。二 是慎选评估专家。评估工作成功与否在很大程度 上取决于评估专家的素质和质量。选择优秀评估 专家是评估工作的重点，应该根据评估工作需要 和预算约束情况适当邀请国外评估专家参与，例 如德国马普学会 的国际评估通常选择相当比例的 国外专家参与评估。评估程序是评估结果公正合理的重要保证。德国科学评估已经形成了相对成熟的评估程序，主要包括以下 6个方面：一是建立独立的评估小 组或评估委员会，邀请来 自国内外的专家学者参 加。二是认真分析评估内容，提出可行性依据，选 择主要评估方法。三是制定评估工作计划，提 出 调研提纲。四是设计调查问卷，分析调查结果。五是被评单位提交 自估报告，评估专家进行实地 考察和分类访谈与座谈。六是评估专家充分讨 论，不断修改完善评估报告，提出评估报告和评估 结论与建议，提交评估委托者。3 德国科学评估主要标准及评估实践 科学评估内容涉及科研能力与科研绩效、教 学质量与水平、科研 服务与咨询能力、人员和经费 管理等。科学评估 旨在识别被评估机构的优势、维普资讯 第4期 陈乐生：德国科学评估经验及其对中国科技评估实践的启示 劣势、机会和挑战，从整体上提高管理效率，改进 科研、教学和科研服务质量。3 1 科学评估标准 科研能力 和水平评估、科研 服务 与咨询 能力 评估是科学评估的重要内容，必须充分考虑科研 活动和科研服务咨询活动的特点，采用适合的评 价标准。3 1 1 科研能力与水平评估 评估一个科研机构的科研 能力 和水平，评估 委员会 以该科研机构研究工作 的内容和性质为中 心，采用国际上普遍认可的评估标准：首先，对科研活动的计划进行评估。该机构 科研计划的相关性及其重点是否 明确，科研工作 是否具有创新能力，科研计 划 中远期规划是否符 合研究机构发展方 向，与 国内外同行科研能力进 行 比较是否有差距。这项评估工作通常 由国外一 流学者完成。第二，对科研活动产出进行量化评估，特别关 注发表的论文与著作、组织会议、专利等。对从事 自然科学、医学、经济学和社会科学研究的科研机 构，着重评估其在学术杂志上发表论文的数量对 从事人文科学研究的科研机构，着重评估其出版 的专著和在专业杂志、非专业杂志和论文集上发 表论文的数量；对从事工程科学研究的科研机构，除评估其专业论文的数量外，尤其注重其申报专 利的数量和工业产出的具体例子。此外，本单位 科学家应邀到重要的国内外 国际学术会议上作学 术报告以及举办重要国内和国际学术会议也是重 要的评估 内容。第三，对科研活动的质量进行评估。评估包 括：检查该机构是否经常性 地进行 自查和外查相 结合，是否存在着走过场 的现象；管理机制和监督 机制是否完善；科研人员的质量和素质是否得到 保证，检查研究所领导成员的任命、科研人员的培 养，包括博士生的培养和科研人员在大学获取授 课资格，甚至调查其学历的真伪；科研人员在科研 机构中的流动程度，必须拥有一定数量和有期限 规定的科研人员，应该 占该机构科研人员总数的 3 0 以上。第四，对科技合作活动进行评估。评估内容 包括：评估该机构与国内外高校 和其他科研机构 的合作情况；研究所领导和学术带头人是否是“近亲繁殖”，德国人非常忌讳“近亲繁殖”的做 法；检查科研人员参与高校的教学和企业合作的 程度；该机构派往或者为其他高校和单位选派或 受聘的教授职务或领导职务的情况；科研人员在 国外科研机构作学术 逗留情况；科研人员到重要 学术团体或国际组织任职的状况；评价在国内外 学术界的地位。第五，对科研成果应用进行评估，主要是针对 那些基础研究或应用基础研究机构。评估 内容包 括：检查科研成果和技术转让的能力；申请知识产 权保护和专利的状况；创建独立的创新企业；通过 委托研究 或合 同研究项 目所获取 的科研 经费 比 例；“独立门户”创业人员的状况。3 1 2 科研服务和咨询能力评估 德国十分重视科研为社会 服务 的理念，科研 资助来源于纳税人，理应为纳税人做贡献。因此，科研机构必须承担科研服务和咨询，其专业图书 馆、科学信息中 fl,、大型科研设备、公益性实验室 等必须对外开放，同时要承担一定的社会责任和 社会义务。科研机构的科研服务和咨询能力评估内容应 该包括：对外提供科研基础设施及社会委托研究；科研地位在社会中的影响；用户需求和用户满意 程度；对外服务项 目的有效利用率；技术转让服 务，含技术转换成产品的服务理念；投入与产 出的 比例；调查某些客户对其服务能力的评价和质量 监督；研究所 的独立性；令人信服的咨询和透 明的 咨询程序；对外开放程度。科研机构在进行评估 以后，评估委员会需要在专业评估报告的基础上，从科学政策的角度提出评估意见，通过投票表决，确定被评机构 的科研 工作是否符合 科学政策标 准，并建议联邦政府和州政府是否继续对其进行 资助。在特殊情况下，科学顾问委员会提请资助 者在两年后对评估建议的执行情况提交一份报 告，并保 留在一定的时间内对其重新评估 的权利。评估委员会只评估公益性科研机构，并且是 由联邦或州政府向科学顾问委员会提出评估委 托。评估委员会主席和科学顾问委员会秘书长对 委托书进行审查，在没有问题的情况下，建议评估 委员会和科学顾问委员接受委托。在有问题情况 下，则由评估委员会讨论后提出建议。在一定情 况下，可邀请被评估单位代表参加讨论。维普资讯 科研管理 2 0 0 8正 对一个科研机构进行专业评估，评估委员会 需要成立一个评估小组，原则上 由一位评估委员 会的成员担任领导。评估小组的任务是：在广泛 调查研究的基础上，写出 以事实为依据 的专业评 估报告，并递交评估委员会讨论和修改。评估委 员会对评估报告进行讨论，并在评估报告的基础 上，从科学政策的角度，对被评估机构 的发展和前 景提出意见 或建议。如果评估结果认 为，被评估 机构科研水平低下、管理松弛、人浮于事，评估委 员会有权建议资助部 门终止对该机构 的资助，这 主要针对那些 曾经接受过评估并且也被明确指出 了存在的问题，现在仍无任何改进的科研机构。3 2科学评估实践 为了实现国际化战略 目标，德国于 2 0 0 6年开 始在德国部分高校实施“精英计划”。参加该计 划 的评估专家有 8 5 来 自国外。目前，德 国大学 已经进行了两次评估，第一次评估有 3 所大学达 标；第二次评估有 6所 大学达标 J。通过评估 的大学得到了联邦政府大幅度增长的经费。这种 国际化评估 的成功经验 和模式为德 国科学评估积 累了很好的经验，实践证 明成功的国际化评估模 式是可行的，提升 了德 国高校 的竞争 意识和积极 性。2 0 0 7年，德 国科学基金会 和中国国家 自然科 学基金会委托中德评估专 家小组，完成 了对 中德 科学中心评估工作。评估历时 2年，评估小组 采用 S WO T方法(强项、弱势、机遇、危机)，完 成 了一份近百页的英文评估报告，全面客观地对该 机构成立以来的运行方式、资助领域、管理结构、受资助人和被否决人的反馈意见、数据处理等工 作进行 了分析和判断，梳理 了该机构的绩效评估 和实践活动，肯定 了已经 取得 的成绩，提 出了 1 2 条改进建议。评 估报告认 为，中德科学 中心运行 规范，管理严格，成绩突出，对中德合作起到积极 的促进作用，深受中德科学家的欢迎。德国科学 基金会和 国家 自然科学基金会根据报告建议将对 该中心加大支持力度。科学评估方法、程序需要在实践过程中不断 完善。例如，两德统一后，由科学评估委员会组织 专家，对原东德地区高校和科研机构进行 了评估，评估报告对德国政府决策产生了重要影响。经过 多年实践检验，证 明当初 的一些评估结论是片面 的。为此，一些优秀科学家又被招 回重用，一些科 研机构在优化管理机制之后又得到重建。事实上，德国科学评估也长期受一些问题困 扰。一是评估专家选择。如少数评估专家不敢实 事求是或直截了当地指 出所发现 的问题，怕得罪 委托单位和被评单位。为此，德国采取经常更换 评估专家等方法，避免评估专家多次参与一个机 构的评估。二是审计专家选择。被评单位财务审 计专业性很强，需要委托审计 专家进行审计。为 保证审计人员与被审计机构之间的“距离”感，德 国的评估采取经常根据需要更换审计专家或者审 计事务所。三是评估结果落实难。评审过程中，如果发现被评单位一些人员的劳动强度不足、工 作效率低下、办事存在着严重官僚作风，将直接影 响到评估报告对编制设置和劳动素质的评价。如 果评估报告提出裁员建议，工会组织往往会 出面 干涉评估结论。被评单位责任人和评估委托机构 对此也难有作为。四是评估结论 的风险。科研水 平和能力 比较难以划定界线。评估委员会通常是 在与其他相似机构进行 比较后得出结论。这种排 队式的评估结论很难具有说服力。被评单位目前 的科研能力和水平似乎不及他人，但情况会发生 变化的。如果出现了这种情况，必然会使评估专 家感到十分难堪。4 德 国科学评估经验对我 国科技评 估 实践 的启示 科学评估是科技管理的重要手段之一，能够 有效推动高校和科研机构合作与竞争，提升科研 能力与水平。必须相应调整科学研究政策，改革 科学研究体制，创造科学竞争环境，让最具创新性 的思想和研究课题得到 国家资助。德国科学评估 实践对建设中国科技评估体系和规范中国科技评 估机构能力建设以及科技评估实践有许多重要启 示，值得借鉴。为此，本文提出以下建议。4 1 完善科技评估组织体系 近年来，中国科技投入逐年快速增长，科学技 术创新活动的效率、效益、影响的评估 已经成为公 众理解科学技术创新共同体的重要内容，需要加 强对政府资助 科技机构 和科技 活动 的第 三方评 估。尽管 目 前中国已经涌现了一大批科技评估机 维普资讯 第4 期 陈乐生：德国科学评估经验及其对中国科技评估实践的启示 构，从 中央到地方政府支持建立的评估 中心到社 会中介评估机构。但是，评估机构的独立性仍然 不强，多数依附于评估委托者，代表社会公众评估 公共财政支持的科研机构、科研项 目和科技人才 的评估活动在一定程度上还显得不足。因此，迫 切需要营造 良好社会环境，促进第三方、独立的评 估机构发展。4 2 建立科技评估程序和标准 建立公正合理当评估程序和评估标准是 中国 评估机构评估能力建设的关键。必须坚持公开透 明、充分参与、真实可靠、公开一致 四项基本评估 原则；同时重视评估报告 的建议功能，审慎选择评 估专家，严格评估 程序。在评估 程序设计 应注意 以下内容：(1)评估委员会专 家构成确定与专 家 回避制度；(2)评估方法选择与专家共识；(3)评 估计划制定与专家共识；(4)评估信息采集与加 工；(5)评估专家与被评估专家充分交流，确保评 估信息的真实可靠；(6)评估专家内部充分讨论，形成共识，提出观点鲜明的评估报告。4 3 鼓励国际评估和国外专家参与 为 了有效发挥 国外专家科研能力强、敢 于直 面评估问题的特点，应该结合评估活动的特点和 预算约束，尽可能增加国外专家参与科技评估的 比重，特别是在 中国有一定能力的基础研究领域 采取 国际评估是有积极意义 的，不仅能够为评估 者提供相对准确的判断，还能够为被评估机构未 来发展提出重要建议。4 4 重视科研服务与咨询能力评估 科技评估不仅要重视科研能力和水平的评 估，更要对科研服务和咨询能力 进行评估。只有 强化了科研服务与咨询能力，才能够使科研能力 建设可持续，才能够让社会更加理解科学技术和 创新共同体，引导科学技术和创新资源合理配置，提升科学技术创新整体效率，扩大其效益和影响。参 考文献：1 Wi s s e n s c h a f t s r a t w w w w i s s e n s e h a f t s r a t d e E B O L 2 W i s s e n s c h a f t s r a t w i s s e n s c l m f t s r a t d e E B O L B e g u t a c h t u n g u n d E n t s c h e i d u n g s v e r f a h r e n 3 Wi s s e n s c h a f t s r a t w i s s e n s e h a f t s mt&C E S O L B i l a n z u n d P e r s p e k t i v e n，2 7 2 0 0 7 4 F r a u n h o f e r G e s e l l s c h a f t w w w f la g d e E B O L L e i s t u n g s s p e k t mm，I n n o v a t i o n s c l u s t e r 5 石春薇星光计划德国的“2 1 1 工程”J 中国科学 基金，2 0 0 6(4)6 D F G Y e a r b o o k2 0 0 6 E x z e l l e n z in i t i a t i v e R G e r m a nS c i e n c e F o u n d a t i o n2 0 0 7 7 韩建国，陈乐生中德科学中心评估中国基础科学，2 0 0 8 (1)Ge r ma n s c i e n t i fic e v a l u a t i o n e x p e r i e n c e a n d i t S e n l i g h t e n me n t f o r Ch i n e s e p r a c ti c e o f s c i e nt ifi c a nd t e c hn i c al a s s e s s m e nt Ch e n Le s he n g (T h e S i n o Ge r ma n C e n t e r f o r R e s e a r c h P r o mo t i o n，B e i j i n g 1 0 0 0 8 5，C h i n a)Ab s t r a c t：As t h e p r o c e s s o f e c o n o my g l o b ali z a t i o n，s c i e n c e a n d t e c h n o l o g y g l o b ali z a t i o n i s l s o s p e e d i n g u p，t h e Ge r ma n e d u c a t i o n and r e s e a r c h s t r e n g t h i s f a c i n g s e v e r e c h a l l e n g e s I n o r d e r t o e n h anc e the c o mp e ti t i v e n e s s of Ge rm a n e d u c a t i o n and r e s e a r c h i n s t i t u t i o n s，the Ge rm an g o v e r n me n t c o n d u c t e d a s e rie s of r e f o rm s a t the u n i v e r s i t i e s a n d r e s e a r c h i n s t i t u t i o n s a n d i mp l e me n t e d i n t e r n a t i o n al s c i e n t i f i c a s s e s s me n t s a n d t h u s d r o v e t h e r e f o rm s at t h e s e o r g a n i z a t i o n s a n d the d e v e l o p me n t of Ge rm an e d u c a t i o n a n d r e s e a r c h T h e Ge rm an o r g an i z a t i o n al s y s t e m of s c i e n c e a s s e s s me n t，the p rin c i p l e s an d p r o c e d u r e s of s c i e n c e a s s e s s me n t，the ma i n s c i e n t i f i c a s s e s s me n t s t a n d a r d s and t h e p r a c t i c a l e x p e r i e n c e o f a s s e s s me n t a r e d e alt w i t h nl e e n l i g h t e n me n t f r o m t h e Ge r ma n a s s e s s me n t e x p e ri e n c e f o r Ch i n e s e s c i e n t i f i c and t e c h n i c al a s s e s s me n t p r a c t i c e i s p u t f o r wa r d Ke y wo r d s：Ge rm any；s c i e n ti f i c e v alu a t i o n；C h i n a；e v a l u a ti o n p r a c t i c e；e n l i g h t e n me n t 维普资讯