第虢２ｏ０９年８月 期 Ｊｏ【瓜Ｎ情报杂志 ＡＬ ＯＦ ＩＮⅡ ＬＬＩ（江ＩＮＣＥ ＶＯＡｕ１．ｇ２８ Ｎ２００９ ｏ．８ 基于情报分析法的科技成果评价研究 Ｒｅｓｅａｒｃｈ ０ｎ ｔｈｅ ＥＶａｌｕａｔｉｏｎ ｏｆ Ｓｄｅｎｔｉｆｉｃ ａＩｌｄ ｏｌｏ ｃａ１ ＡｃｈｉｅＶ锄ｅｎｔｓ ＢａｓＩｅｄ佃Ｉｎｔｅｌｌｉｇｅｎｃｅ Ａｎａｌｙｓｉｓ 瞿丽曼 （上海图书馆上海科技情报研究所上海２０００３１） 摘要通过对当前主流成果评价方法局限性的剖析，提出一种成果评价改进方法；重点探讨在成果评价中结合情 报分析法，即通过情报分析与研究的手段，对科技成果进行基于相关文献公开报道的全方位客观、公正评价，弥补当 前科技成果评价方法体系中的不足，提高科技成果评价质量。 关键词情报分析科技成果评价研究 中图分类号Ｃ３ Ｇ３５０ 文献标识码Ａ 文章编号１ｏ０２—１９６５【２００９）０８一ｏ０８４一Ｏ４ ｌ科技成果评价的重要性和广泛性 际上科技成果评价常用方法有：同行评议法、德尔菲 法、综合评价法、层次分析法、模糊综合评价法等Ｌ３ Ｊ。 科学技术对人类社会发展的巨大影响，使得科学 其中同行评议法是世界各国成果评价的主要实践形式 研究越来越得到各国政府的重视，国家财政对科学研 之一，也是当前我国科技成果评价的主要方法。 究的投入日益加大。为了验证投人产出实际效果，世 同行评议法是由从事该领域或相关领域的专家来 界各国通常采取科技成果评价的形式，考察财政投入 评定一项科学研究工作的学术水平或重要性的一种方 科技成果的研究效果。 法。同行评议作为科研工作的评价方法已有数百年历 发达国家 ２０世纪中期就开始进行科技成果评 史，它的广泛应用是从２０世纪５０年代开始Ｌ４ Ｊ。同行 价工作，科技评价机制比较健全。目前，在日本已建立 评议，即在同研究领域内聘请与被评价成果在研究方 国家级、产业部门级、企业集团级三个层次的科技评价 向相同或接近的有较高研究水平的专业人员对该成果 机构；美国从国会、联邦政府到地方州各级决策部门都 进行评价。这种评价方式的优点是，评价专家是本行 有相应的科技评价机构。发达国家的科技评价机制的 业的专业人员，对本专业科技发展的现状及进展程度 各组成部分比较完备，能够成为一个统一配套的整体， 比较了解，可以指出被评价成果的优点或不足，能掌握 即具有相应的法律法规制度，设有评价机构，评价对象 该成果所属国内外领域的同类研究水平，从而客观准 明确，评价方法比较成熟ｌ＿１ Ｊ。１９９４年，我国国家科委 确地作出评价，这种方法促进了科学化、民主化的科研 颁布了《科学技术成果鉴定办法》，规定列入国家和省、 管理进程。因此，被许多国家普遍采用，广泛应用于科 自治区、直辖市以及国务院有关部门科技计划内的应 研管理过程，也成为成果评价的主要手段。但长期的 用技术成果，以及少数科技计划外的重大应用技术成 实践表明，在我国实施该方法仍存在一定的弊端和局 果，要按照该办法进行鉴定。２０００年国家科技部推出 限性，常见的局限性有： 《科技评估管理暂行办法》，２０Ｏ１年出台《科技评估规 ａ．知识更新和学科细分造成的局限性，会造成同 范》，规范各类科技活动（科技政策、计划、项目、成果、 行专家对成果研究不甚了解的情况发生，使科技成果 机构、人员）的评估。在我国，科技成果评价起步较晚， 评价的准确性下降。 科技成果评价体系仍不尽完善，与发达国家有一定差 ｂ．人情关系网形成的局限性，有时会使给出的评 距。 价不符合被评成果，使成果评价很难公平公正，造成评 ２科技成果评价的主要方法及其局限性 议结果出现偏差。 ｃ．不良学术竞争引发评议的局限性，比如有的同 目前，科技成果评价可以采用多种方式，包括鉴 行评审专家，与项目完成人在学术上研究方向一致，研 定、验收、科技评估、行业准人评价、项目结题等［２ｌ。国 究内容相同，形成竞争对手关系。由于个人看问题的 收稿日期：２ｏｏ９—０３—０９ 修回日期：２ｏ０９一Ｏ４—２９ 作者简介：瞿丽曼（１９７Ｏ一），女，硕士，高级工程师，研究方向为产业情报、专利情报、科技项目评估等。 第８期 瞿丽曼：基于情报分析法的科技成果评价研究 ·８５· 角度不同，学术观点不一致，有些人很难接受别人的观 从不同角度对科技成果进行评价。情报分析法不仅其 评价方式客观、公正，而且能提供技术层面、知识产权 层面、技术壁垒层面、项目风险层面、项目可持续发展 层面等较为全面的评价结果。情报分析法的引入可以 为科技成果评价的全面性、系统性提供重要辅助，有利 于完善我国当前的科技成果评价体系。 由于情报分析法主要是基于文献的情报分析手 点，学术竞争也会引起专家之间的个人矛盾，从而引起 评审人不可能做到公平公正，易使评估结果产生偏差。 知名度引发成果评价的局限性，也常可能产生对 项目不公正的评价。比如，被评项目完成人如果是知 名度很高的名人，其在社会上的“名人效应”将会影响 其成果的评价，不管成果水平如何，相近条件下，评审 结果往往有利于被评项目；另外，高知名度专家作出的 判断，不管是肯定还是否定意见，都可能直接给项目定 段，是通过对国内外相关文献的检索，以及对所得相关 文献按照一定的目标要求，结合项目实际进行对比分 性，有可能产生对项目不公正的评价Ｌ５Ｊ。目前在我国 各种科技成果评价中，基本上仅以同行专家意见作为 主要的评价结果依据，难以做到科技成果评价的公正 性、客观性和全面性；因此，亟需建立一种能弥补同行 评议不足的评价方法。 ３成果评价中引入情报分析法的可行性和必要性 本文研究的情报分析法的应用对象，不仅仅局限 于一般意义上的成果鉴定评价，而是泛指对已完成的 各种科技成果的评价，形式上可以是成果鉴定、项目验 收、科技项目评估，如事中评估、事后评估等。其中科 技项目事后评估，即项目后评估，在近年得到各级政府 管理机构的高度重视。但当前大多数的项目后评估仍 以同行评议为主，情报分析法的应用也将有利于此类 项目的评价。 ３．１可行性情报分析法是通过调研与被评成果 相关的各个方面文献，并利用情报方法进行分析、研 究，从而对科技成果做出评价的一种方法。由于与绝 大部分科技成果相关的内容，比如研究、产品、专利、标 准、市场数据等，在国内外都有相关文献报道，而且被 评单位在项目研究中也经常会以国内外文献为依据， 即在国内外相关研究的基础上进行改进或创新。因 而，利用基于文献的情报分析法可以用于科技成果的 评价。 ３．２必要性 当前，我国成果评价的方法较为单 以同行专家评议为主。同行专家评议法固然重要， 因为评价专家是本行业的专业人员，对本专业科技发 展进程比较了解，但客观地讲，行业专家很难对一个领 域做到全面了解，比如，被评成果的知识产权实施是否 有侵权可能，是否有技术壁垒、市场风险，以及被评成 果的市场需求现状及前景等方面，对于即将步入市场 竞争的科技成果都显得特别重要，但行业专家很难对 以上问题做出判断，而情报分析法却可以为解决以上 等问题提供有力手段。 为了避免方法单一以及同行专家评议在我国实际 应用中存在的弊端，给评价结果带来的不公正，应考虑 析，从而对项目的实际特点做出评价。情报分析一般 不存在不利于公正评估的人为干预，因此情报分析的 结果可以为客观、公正的科技成果评价提供重要保障。 ４情报分析法在成果评价中的具体应用 ４．１情报分析的基本步骤情报分析法的基本步 骤应包括：项目内容审查、情报调研、情报分析、结果评 价等。 ４．１．１项目内容研读。科技成果评价中，情报分 析的第一步应该是审查项目内容，包括：形式审查，即 审查项目资料与项目的一致性和有效性；内容审查，通 过研读项目技术文件，审查立项时的总体目标、研究内 容和关键技术、创新点、完成形式和考核指标；项目实 际研究的技术方案、关键技术、创新点；项目完成情况 及主要技术指标、技术效果；项目完成结果是否与立项 目标一致，是否全部完成；知识产权状况；发表论文情 况等。 ４．１．２情报调研。情报调研中采用的信息采集 方法，可以是实地调研法、专家咨询法和文献检索法。 通过实地调研，听取项目负责人或技术人员汇报，若需 要应赴现场考察，核实相关问题，收集第一手资料；通 过向同行专家咨询，进一步获得项目评价中需了解的 相关问题、解析项目中的疑难问题等；文献检索是情报 分析调研中的主要信息采集方法，结合被评项目，进行 相关数据库检索、网上信息采集，得到与被评项目相关 的各种相关信息，包括相关研究信息、专利信息、产品 信息、市场信息、标准信息等。 ４．１．３情报分析。对情报调研得到的相关信息， 采用科学的情报方法进行分析，如可采用比较法、分类 法、分析法、综合法、归纳法、演绎法、文献计量法等，以 事先设定的情报分析基本内容为分析目标，结合项目 研究实际情况进行分析。 ４．１．４结果评价。综合、归纳情报分析结果，评 价项目的实际特点，给出结论与建议。 ４．２情报分析的基本内容 以文献报道为基础的 情报分析法，可以对科技成果进行技术创新性、先进 ８６· 情报杂志 第２８卷 性、知识产权状况及前景、技术壁垒、项目风险、市场现 在情报分析中，可以通过专利法律状态检索、了解某专 状及前景、可持续发展等方面的评价，满足不同类型成 果的评价需要。 利的当前法律状态，由此确定或预测项目的知识产权 前景，如专利申请已授权公告，且处于专利有效期内， 则具有知识产权；若项目的专利申请的法律状态为撤 回，视为撤回、被驳回、专利权的无效宣告或专利权的 理、已公开或已进入实质审查阶段等，则项目有可能获 知识产权；另外，通过对项目已申请但未授权专利所涉 技术方案进行专利性检索，特别是新颖性和创造性检 ４．２．１技术层面评价。ａ．创新性评价。成果单 位自行认为的关键技术的突破，并不能代表该技术具 能对所有相关文献做过阅读，因此有时很难对此做出 解答；但有一定专业基础的情报专家对相关文献进行 调研和对比分析后，可对技术创新性做出明确判断。 则项目不具有知识产权；若项目专利申请已受 有创新性。对于技术创新性，由于同行专家通常不可 撤消等，事实上，不少项目在完成后，才发现已有完全相同的研 究报道，因此近年我国项目申请管理机构逐渐增加了 立项前的查新，以加强把关。目前在成果鉴定中，普遍 采用查新报告对新颖性的判断结果，辅助专家评价。 在验收、科技评估等成果评价中，同样可以采用类似查 新的情报分析手段，对成果的创新性进行评价。 创新性的评价在难度上要高于新颖性判断。一项 技术方案的创新性，是指其不仅具有新颖性，而且具有 创造性。新颖性，是指该技术方案在国内外未见相同 报道、在国内未公开使用；创造性，是指与国内外同类 技术相比，该产品、方法的技术方案有突出的实质性特 点和显著的进步，或者该产品的形状、构造的技术方案 有实质性特点和进步。创新性评价，要结合新颖性和 创造性两者的判断，才能给出合理评价。创新性的评 价对情报专家的要求比较高，要求其不仅有娴熟的检 索能力，而且要熟悉该领域的专业知识。 ｂ．先进性评价。先进性分析在项目后评估中显得 特别重要，尤其是产业类成果或应用类成果，其研究的 关键在于应用功效。情报分析法中，先进性分析通常 是将项目的性能指标、功能或应用效果与国内外同类 技术或产品的性能指标、功能或应用效果进行比较，得 出结论。通过对国内外同类技术的研究、专利、产品、 标准的调研，采用演绎法进行分析推理，即可基本判断 出该成果在国内外所处的水平。而对于纯基础研究成 果，由于其成果的主要表现形式为论文，因此，其先进 性分析主要为发表论文的质量评价，包括论文被引用， 被主要检索工具ＳＣＩ、ＥＩ、Ｉ ｒＩ）等的收录分析。利用情 报分析法对先进性的分析结果，更有助于同行专家对 成果的先进性做出客观评价。 ｃ．论文引用评价。情报分析法对于论文的评价。 则从其被引情况、被引频次以及发表期刊影响因子（发 表当年）角度进行评价。相比同行专家仅从论文质量 的主观评价而言，论文引用评价角度显得更加客观。 ４．２．２知识产权评价。知识产权评价是指对项 目研究中形成的各种知识产权的评价。情报分析法在 知识产权评价方面，特别是在专利评价中极具优势。 索，可以基本判断其授权前景。 单从项目申请的专利是否授权，其实还不能对这 项专利做出全面评价。专利获得授权并不代表其能自 主实施。一项专利是否具有自主知识产权，是否可以 自主实施，即实施后是否侵权，可通过专利情报调研后 进行分析判断。同行专家则无法对以上专利评价做出 判断。 ４．２．３ 技术壁垒评价。情报分析法中，技术壁 垒的评价范围包括标准壁垒和专利壁垒。在当前各种 形式的成果评价中，技术壁垒评价主要应用于科技项 目评估中，特别是产业化项目或应用类项目等的后评 估中。一般不用于成果鉴定或验收中。当产业化项目 或应用类项目等形成的产品即将出口的，应分析其是 否具有技术壁垒，以免产生不必要的损失。 标准壁垒的判断，可以通过检索国外是否有与该 类产品相关的国际标准或法规，特别是近年来是否有 新标准或新法规出台，对该类产品的出口形成标准壁 垒。 专利壁垒的判断主要分析国外，特别是进口国是 否有与项目关键技术相关的专利网．使拟出口产品无 法突破。 ４．２．４成果风险评价。对于一项成果，特别是即 将或已经进入应用领域或市场化的成果，进行风险评 价相当重要。随着世界各国对知识产权的日益重视， 各行业有一定实力的研究机构或厂商纷纷实施专利战 略，因而稍不留意，极有可能落入侵权陷阱，遭遇专利 诉讼。所以在成果形成的产品上市前应进行专利侵权 风险分析。项目的侵权风险分析，一般分为以下几种 情况：ａ．项目完成的成果或产品仅在国内实施，不涉及 出口的，主要检索与分析中国专利和在时间上有进入 中国可能的ＰＣＴ专利中，是否有密切相关专利公开或 公告，以判断项目的实施是否存在侵权风险。ｂ．项目 完成的成果或产品涉及出口的，不仅要检索中国专利 和在时间上有进人中国可能的ＰＣＴ专利，而且要检索 进口国或地区是否有密切相关专利公开或公告，以判 断项目的实施是否存在侵权风险。除了专利侵权风险 第８期 瞿丽曼：基于情报分析法的科技成果评价研究 ·８７· 外，对于即将步入市场化的技术或产品，还应考虑市场 文分析。应用研究类项目应根据项目特点，以先进性、风险。对于某一领域的市场风险而言，市场开拓人员 较有发言权，而参与成果评价的研究专家往往不甚了 解。通过情报分析法，对行业竞争对手的多寡、政策以 及国际上替代倾向等的调研，可在一定程度上做出市 场风险判断，可为同行专家提供重要参考。 ４．２．５市场层面评价。利用情报分析法，可以调 研项目所属大环境的发展情况，所属行业的市场需求 现状及增长率，应用领域及宽泛度等；可以调研政策支 可持续发展包括市场现状及前景、侵权风险、市场风险 等为评价重点，创新性次之，由于此类项目一般不涉及 出口，因而通常不包括技术壁垒分析。产业化项目须 重点考虑产品的先进程度，且要考虑该产品是否有良 好的市场前景、可持续发展性，是否有市场风险，在国 内实施是否侵权，出口是否有技术壁垒、侵权风险，相 比之下，项目创新性的重要程度次之。 持情况，如国家、地方是否有与项目相关的政策支持； 若无市场数据，甚至可以从该领域全球专利申请数量 及增长率等方面进行间接评价。根据以上调研结果， 可以对项目所属行业的市场现状、市场前景等做出分 析，对项目的可持续发展情况做出评价。 ４．３基本内容的选取和评价原则性、针对性和重点性原则。 科技成果的情 报分析与评价中，基本内容的选取和评价要遵从全面 ５情报分析法的应用规范化 虽然从表面上看，情报分析法可以比较客观、全 面、公正地对科技成果进行评价，但要达到良好评价效 果，还需要建立规范化的机构机制、人员机制和质量控 制系统。从事情报分析评价的机构要具备相应的文献 和数据库资源、产业和知识产权情报研究等的业务经 验和相应的人员配备；从事情报分析评价的人员不仅 要求有扎实的相关专业、外语基础和丰富的专利知识， ４．３．１全面性原则。全面性原则，即评价的内容 而且要具有娴熟的信息采集能力和情报研究工作经 要尽量全面。比如，对于科技项目后评估等类型评价， 验。为了保证科技成果的评价质量，相应机构需要建 不仅仅要涉及技术本身的评价，及其技术的成果形式 立质量控制系统。质量控制系统由评价规范、实施程 如知识产权、论文的评价，而且由于很多项目涉及市场 序、奖励处罚制度和其他保证措施组成。评价质量控 行为，因此，还要进行技术壁垒（如标准壁垒、专利壁 （如市场现状、市场前景、政策支持）等的评价。 ４．３．２针对性原则。针对性原则，即为在成果评 价的基本内容选取中，要针对科技成果本身的阶段特 制既涉及严格的技术层面，如数据采集和方法的选取， 行为规范等非技术层面Ｌ６Ｊ。 垒）、项目风险（如侵权风险、市场风险）、可持续发展 对相关事实的分析、报告的撰写等，又涵盖职业道德、 ６结束语 开展科技成果评价，是财政资助科技成果的政府 向和政策的重要措施之一。情报分析法可以对科技成 用将有利于完善我国科技成果评价体系，其评价结果 可为政府管理机构提供重要参考。 参考文献 点、形式特点等，选取相应的评价内容。例如成果鉴 面，通常只需进行关键技术创新性、先进性等评价。当 可能性、实用性等角度进行评价。但对于科技项目后 评估来说，一般是在项目结题一、两年后进行，故此时 有些项目可能正在做产业化或应用准备，有些项目可 能已进入产业化或应用阶段。因此，科技项目后评估 不仅要评价项目技术本身的创新性和先进性，而且更 要关注项目的知识产权问题、侵权风险、可持续发展情 况等。 定项目，一般处于小试完成阶段，还未涉及产业化层 管理机构，管理财政资金利用有效性，调整未来资助方 然，同行专家可进一步从关键技术的突破，技术的实施 果提供较为客观、全面、公正的评价。情报分析法的应 ｌ岳玉珠，李岩．我国科技成果评价体系的改革建议［Ｊ］．中国科 技信息，２０ｏ７（２４）：３５１—３５２ ２蒋景楠，尹邦奇．我国科技成果评价与管理创新建议［Ｊ］．科技管 理研究，２ｏｏ８（３）：２８４—２８６ ４．３．３重点性原则。重点性原则，即评价内容要 ３杨斯博，李敏强，宗毅．新型科技成果评价方法的研究与实践 根据项目的类型特点有所侧重。比如，在成果鉴定中， 评价先进性。又比如，对于科技项目后评估而言，由于 基础研究项目的完成成果主要为论文，一般不涉及专 利、具体应用或产品。因此，此类项目的评价重点为关 键技术创新性分析，不涉及知识产权方面的分析，也不 ［Ｊ］．天津大学学报（社会科学版），２ｏｏ５，７（４）：２６６—２７０ 志，２ｏｏ６，２２（９）：６１２—６１４ ５荷欢，邵雪梅．论科技成果评价中同行专家评议的局限性．医药 世界，２０ｏ６（１Ｏ）：６９—７Ｏ 科技成果评价的常用方法和分析［Ｊ］．中华医院管理杂 基础研究项目要重点评价创新性；产业化项目要重点 ４徐文焕．６科技评估规范［ＥＢ］．ｈ婶：／／ｅｃ．ｃｃｓｔ．ｇａｖ．饥／ （责编：王平军） 包括技术风险分析，其中先进性评价通常采用论文引