通知通告
   热点专题
   成员单位网站
   地方纲要网站
   相关工作网站
   新闻媒体网站
当前位置: 主页 > 经验交流 > 海外视野 >

“评估”帮助科学节“成长”

时间:2016-12-01   打印

    英国科学节的效果评估在检验科学节的目标、产出、组织实施情况及受众传播效果中发挥了积极作用,同时也存在客观性不足、流于表面等局限性,这对我国科学节效果评估体系的建立和完善有一定的借鉴和启示意义。
    科学节在传播科学知识、普及科技成果、拉近公众与科学的距离、提升公民科学素养等方面发挥着重要作用,是当前世界各国广泛采用的一种科学传播形式。科学节发展至今已经形成了集科学讲座与演讲、专题报告、展览、工作坊、动手实验、戏剧表演等多种类型的活动于一体的形式。
英国是公众理解科学运动的发源地,也是世界上最早创立科学节并开展科学节活动的国家。每年科学节结束后,英国科促会都会出具相应的评估报告。英国科学节在长时间的发展中积累了丰富经验,形成了鲜明特色,随之建立起较为稳定的效果评估体系。

科学节的效果需要评估
    评估是现代管理的核心工具之一,已在国际上广泛应用于各个领域并形成评估产业。至20世纪末,评估开始被运用到科普领域。目前,我国科普领域的评估主要体现在对科普项目绩效、科普组织机构科普能力、科普活动效果等方面的评估。其中,科普活动效果评估是科普项目评估中的一项重要内容,也是一种典型的社会干预项目评估。
    科技展览项目具有四种评估类型:预评估、修正性评估、形成性评估和总结性评估,而这一评估类型的划分同样适用于科学节。其中,总结性评估是指在科学节结束之后进行的旨在检验活动是否达到预期目标、检验传播效果和影响力的评估类型。英国科学节采取的是总结性评估,即在每年9月份科学节结束之后,由评估团队对整个科学节的举办过程、影响力和参与人群等进行评估。
    对科普活动开展效果评估,能促使科普活动的相关决策、资源利用、活动设计与实施、活动的延续更加科学合理,更加富有效率。评估是用以测度科普活动的成效及日后改进的重要依据。通过适时的检测评估,可以验证活动效果是否理想,是否真正满足了公众对科学知识的实际需求,是否得到了公众的认可,是否真正能够实现科学活动最初的目标和期望,以及探讨在哪些方面还有提升的空间。
    从广义上看,科学节等大型科普活动也是公益活动的一种,其最终目的是使社会公众受益而非个人,而非营利性和追求社会效益的特点也与公益活动相契合。对公益项目评估的意义有四点,也可以作为科学节效果评估作用的借鉴:一是实现项目目标的保证;二是对相关利益群体负责;三是树立社会组织的社会公信度;四是帮助社会组织发现项目管理中存在的问题,总结项目管理中的经验,从而提升社会组织的能力。
    对科学节效果评估的作用可以总结为以下几点:
    (1)检验目标的实现和完成情况;
    (2)给予利益相关者反馈。科学节的利益相关者主要指其赞助者和合作者,包括政府、企业、社会公益组织、个人等,他们为科学节提供资金、场地、宣传等服务。通过评估阐明资金和服务的使用情况及效果,给利益相关者提供反馈以便让他们决定未来是否继续提供赞助或与科学节合作;
    (3)发现问题,总结经验,从而提升科学节各项工作开展的效率、组织能力、公众认可度和整个科学节的质量;
    (4)检验科学节的产出、组织实施情况以及受众传播效果。使用与满足理论认为,人们之所以选择、接触并使用某种媒介,是为了满足自己的需求。同样地,科学节也可以被视为一种特殊的传播媒介,受众选择参加不同类型的活动是为了满足需求,通过评估受众满意度、态度、行为的变化等是检验科学节受众传播效果的有效方式。

英国科学节的评估目标
    英国科学节在内部评估报告中从不明确表述评估目标,而只是表述本届科学节希望达到的目标,例如2014年的内部评估报告提出:希望本届科学节的参观人数达到50000;科学节的活动地域能够拓展到伯明翰市中心及附近的图书馆;青少年项目的参与人数能够达到2000。可以看出,英国科学节的评估目标之一是评估科学节是否完成了起初设立的目标。
    评估目标在评估体系中具有引领、指示整个评估框架建构和评估内容走向的功能,因此评估目标的设置应清晰、明确,有较强的指向性和针对性。比较来看,英国科学节的外部评估目标在表述上过于宏观和笼统,缺乏针对性,而内部评估中评估目标的“缺席”则意味着英国科学节的内部评估体系迄今为止仍然缺少一种系统的、科学的评估理念和目标指引。

英国科学节的评估内容和方法
    自2007年起,英国科学节评估报告开始采用固定的内容评估模块,包括三个方面:影响力、人口统计、活动过程,整篇报告的框架和内容开始变得清晰明确。自2014年起,评估报告又增加了“青少年项目”这一内容模块,这在一定程度上体现了英国科学节对青少年项目及青少年受众的重视。其中,“影响力”主要评估科学节的影响,聚焦于活动和受众反馈;“人口统计”用来评估谁参加了科学节;“过程”则评估本年度科学节的运作并和往年作对比,反馈可以为未来的科学节提供借鉴;“青少年项目”对科学节中专门针对青少年举办的活动进行受众体验、意见反馈的调查和分析。
    内部评估主要采取定性与定量结合的方法,如采用问卷法和人口统计特征分析法对参与科学节受众的数量、种族、地区、满意率等基本信息进行统计分析;通过观察法和访谈法对演讲者和受众进行观察和采访,并选取具有代表性的采访内容在报告中进行描述性呈现;此外,针对科学节的官方媒体宣传和媒体报道的数量、浏览量、相关互动指数等采用数据分析法进行分析,并与往年的数据相对比以提出进一步的媒体宣传和市场策略。
    与内部评估报告相比,外部评估报告在内容设置上更为全面、科学和专业化。七个内容模块可以归纳为三个维度:一是对所有科学节参与者的评估,包括受众、演讲者、合作者和利益相关者、活动组织运营方这四个内容模块;二是专门针对科学节活动的“活动”评估模块;三是针对科学节媒体与宣传的评估,包括市场和传播及媒体两个内容模块。每一个内容模块下都设置若干针对性和指向性较强的调查问题,不同内容模块之间极少出现问题重复和交叉的现象。
    外部评估也采取定性与定量结合的评估方法,其中大部分都与内部评估所采用的方法一致,一个显著的不同是外部评估采用了“焦点小组”的方法,主要用于对受众的评估,例如受众参与科学节的原因,受众对活动内容、参与质量的评价,对科学节优点和不足的评价以及对科学节举办地纽卡斯尔的印象和后续期望等。
    整体来说,英国科学节的内部和外部评估报告在评估内容的设置上差异较大,内部评估的内容设置较为宏观,不同内容模块之间边界较为模糊,常出现调查问题交叉、重复的现象;外部评估报告内容设置明确且具体,不同内容模块的调查问题针对性强,且在调查的深度上由浅入深。而从评估方法上来说,不论是内部评估,还是外部评估,都采取了定性与定量相结合的评估方法,评估方法的类型也较为多元化。

英国科学节效果评估的作用
    英国科学节历年的评估报告在检验目标完成情况、给予利益相关者反馈、发现问题和总结经验方面都发挥了一定的作用,且具有较高的完成度。那么,“检验产出、组织实施情况及受众传播效果”是如何发挥作用及其局限性有哪些呢?
    在检验产出、组织实施情况及受众传播效果方面,不论是内部评估还是外部评估,英国科学节都从多个角度对科学节进行了检验。具体来说有以下几方面:
    (1)活动产出情况。每年科学节的评估报告中都会总结活动数量、时长、内容等基本信息并与往年进行对比,测算其在数量上是增长还是下降,并通过采访呈现参与者对活动的总体评价;
    (2)活动的组织和实施情况。历年的内部评估报告一般是将其与活动产出一并进行总结,在总结活动基本信息的基础上选取具有代表性的几个活动进行活动内容及其开展过程的简单描述。2013年的外部评估则详细分析了活动主题的选取和确定过程、活动主讲人的邀请等具体内容,有助于公众和投资方对活动的细节方面有更多了解;
    (3)受众传播效果。历年的内部评估中,“受众”评估却只是作为一部分调查问题分散在“影响力”“人口统计”“过程”等内容模块中,没有形成系统完整的评估,这是内部评估的一个缺失。而不同于内部评估报告中对受众较为笼统和分散的评估,受众评估在外部评估中得到了强调和突出。从初级阶段对受众基本信息的调查到对受众参与动机、参与体验的分析以及最后上升至对整个科学节的评价,是一个由表及里、由现象到原因逐步深入的评估过程;
    (4)媒体和宣传效果。不论是内部还是外部评估报告,媒体评估都是极为重要的一部分,包括对科学节官方媒体如官方网站、Blog、Facebook、Twitter上的信息发布和浏览量、点击量的分析,以及其他各类媒体,包括报纸杂志等印刷媒体和电视、广播以及网络上对科学节的新闻报道的评估。根据这些来测算本年度与往年相比在媒体报道和市场宣传等方面的进展。通过上述总结可以看出效果评估对于英国科学节的进一步完善具有重要作用,但也不可避免地存在一定的局限性。

中国城市科学节的借鉴
    英国科学节在英国具有极大的影响力和传播效果,在长期的发展和实践中形成了极具特色且较为稳定的评估体系。通过分析可以发现,英国科学节以内部评估为主的方式与外部评估相比虽然缺乏一定的专业性,且存在例行公事和主观性较强等缺点,但内部评估能在极大程度上节省时间、人力、财力,且能够使整个评估过程更为精简和高效,同时也为参与科学节举办过程的内部工作人员提供了一个自我总结和反思评估的机会,长期来看对科学节工作团队和整个科学节品质的进一步提升具有重要意义。
    从评估的作用来看,其在检验目标完成情况、发现问题和总结经验,检验科学节的产出、组织实施情况及受众传播效果等方面发挥了积极作用,提升了科学节的品质和公众认可度。但也存在一定的局限性,例如在某些问题的分析上流于表层、不够深入、客观性不足等,这也表明英国科学节的效果评估在未来仍有改进和完善的空间。
    在我国,城市科学节作为科学节的一种类型刚刚兴起,探讨英国科学节的效果评估体系,能够在一定程度上为我国科学节评估体系的建立和完善提供借鉴。
文/中国科学院大学人文学院 李海力 莫扬

来源:全民科学素质工作动态 作者:KXSZ
 
 上一篇:巴塞罗那“宇宙盒”科技馆:把宇宙装进盒子里
 下一篇:没有了

机构简介


    机构简介
 
    办公室成员
 
    成员单位职责

视频点播


内部信息平台

    留言板
·无标题
·无标题
·请问评价全民科学素质的标准与依据?
·全民素质有有待提高
我要留言>> 

     站内检索



网站简介  |  联系方式  |  添加收藏  |  设为首页  |  ENGLISH  |  旧版入口
版权所有  全民科学素质纲要实施工作办公室主办  京ICP备05038217号