【争鸣与探讨】 全国第四轮学科评估方案中的科研评价部分,特别是“A类期刊”的增列与取消,一时成为热议话题。事实上,科研评价是世界性难题,最近几年,国际学术界提出了科研评价方面的两个“宣言”——“莱顿宣言”和“旧金山宣言”。放在世界的范围内,如何看待这次学科评估中某些新鲜尝试呢?有哪些可取之处和不足之处?“A类期刊”的取消不意味着相应的探索和思考也被取消。 “莱顿宣言”纠偏“量化至上” “莱顿宣言”(The Leiden Manifesto for research metrics)的提出源于2014年在荷兰莱顿召开的一次国际会议,美国佐治亚理工学院的公共政策教授Diana Hicks等提出了合理利用科学评价指标的七条原则,后来扩充为十条,并于2015年4月发表在《自然》杂志上。 “莱顿宣言”的十条原则,简言之,第一,量化评估应当支撑质化的专家评估,而不是取而代之;第二,衡量绩效应基于机构、团队和个人的科研使命;第三,保护卓越的本地化的相关研究;第四,保持数据采集和分析过程的公开、透明和简单;第五,允许被评估者验证数据和分析;第六,考虑发表和引用的学科差异;第七,对个人研究的评价应基于其综合作品的质性评价;第八,应避免评估指标的不当的具体性和虚假的精确性;第九,识别认清评价指标对科研系统的影响;第十,定期审查评价指标并加以改进。 按笔者的理解,这十大原则可以归为四个方面。 第一方面,即总的原则是:基于指标的量化评估是第二位的,是辅助性的,而同行评价的质性评估是第一位,是主导性的。量化指标可以降低同行评价中的偏见,促进更加深入的审议,提高同行评价的质量,但量化指标不应取代评估者基于充分信息基础上的判断。评估者仍然需要对其评估负责,而不是完全让“数据说话”了事(第一条原则)。所以,“莱顿宣言”并不提倡科研评价要用量化指标,更不提倡把量化指标作为主导甚至是唯一指标。“莱顿宣言”只是说在用到起辅助作用的量化指标时需要注意的一些原则。 第二方面,在总的原则指导下,运用科研评价指标做具体评价工作时的下位原则,即要充分考虑科研活动本身是创造性的、个性化的、独特性的等特点,所以需要在评价过程中特别注意科研活动的使命的差异(第二条原则)、地域性的差异(第三条原则)、学科性的差异(第六条原则)、个体性的差异(第七条原则)。这些差异容易被量化指标遮蔽,所以需要在评价中采用综合计量或者质性评估办法。 第三方面,关于科研评价指标的具体数据采集和分析的要求,要公开透明(第四条原则)、可以复核验证(第五条原则)。 第四方面,对科研评价指标的态度,要理解实质内涵(第八条原则)、警惕负面影响(第九条原则)、不断改进完善(第十条原则)。 “莱顿宣言”每一条都内涵丰富,指向明确。与之对比,可以发现,我国科学评价工作还大有改进空间。 “旧金山宣言”纠偏“以刊评文” “旧金山宣言”(The San Francisco Declaration on Research Assessment,DORA)的提出源于2012年12月美国细胞生物学学会年会期间,一些学术期刊的编辑和出版者提出关于科研评价的建议,在此基础上形成了“旧金山宣言”,2013年5月,78个科学组织的155位科学家签署了这份宣言。“旧金山宣言”引发了世界科学界的广泛关注,《科学》杂志撰写社论支持“旧金山宣言”,认为影响因子最重要的危害是可能妨碍创新,它引导科学家关注发高影响因子的文章,追逐所谓的“热点”,而不是潜心科研创新。 “旧金山宣言”并不像“莱顿宣言”那样包含相当宽泛的内容,它只是针对期刊的计量指标(主要是期刊影响因子)而提出的,呼吁科学界停止使用期刊影响因子来评价科学家及其工作。内容包括总体建议以及对资助机构、研究机构、出版机构、计量指标提供机构以及科研人员的建议,共计18条。总体建议是:“停止使用期刊影响因子等期刊计量指标作为替代指标,来评价单个研究论文或学者个体的贡献,或者是作为聘用、晋升、资助等方面的依据。”其他区分对象的建议都是围绕着总建议展开的。 期刊影响因子是20世纪50年代由汤姆森路透公司开发出来的,其最初提出的目的是为帮助图书馆评估和挑选决定订购哪种期刊,但是现在影响因子已经被广泛应用于评价个人和研究机构的水平和贡献。期刊影响因子的含义是某期刊前两年发表的论文在统计当年的被引用总次数除以该期刊在前两年内发表的论文总数。可见它只是期刊的评价指标,并非科研工作本身的评价指标,影响因子不具有对学术质量精确评价的功能,所以不能单凭影响因子就断言论文优劣。“旧金山宣言”倡导的就是评估科研工作要回归到科研工作本身的价值中去,而不是基于刊载的期刊。 “A类期刊”弊大于利 回到开篇的话题。客观地讲,这次学科评估方案在完善科研评价方面积极探索,其价值取向和工作方向与“莱顿宣言”所倡导的内容是比较契合的。比如在评估方案和相关说明中,提出“学术论文质量”采用“三结合”评价组合。一是坚持质量与数量相结合,采用代表性论文,在“比总量”与“比人均”之间找到平衡点;二是坚持主观与客观相结合,通过量化指标统计进行客观评价外,还通过“代表性论文”进行专家主观评价;三是坚持国内与国外相结合,要求包含一定比例的中文期刊,强化中国论文评价话语权。这背后的指导思想都是“莱顿宣言”提倡的摒弃“唯量化指标论”,采用更加综合的评价方式。 “莱顿宣言”的第三条原则特别提到,要保护卓越的本地化的研究。研究的卓越不等同于在国际期刊上发表英文论文。一些偏重于本国或者区域性的课题的研究,往往并不被知名的英文期刊所青睐。“只有基于高质量的本地语言期刊的指标才能正确评价和推动卓越的本地化的研究。”这高度契合了这次评估中强化国内研究论文地位的思想。 但“A类期刊”的取消仍有许多值得反思和总结的地方。无论如何,“A类期刊”的设定其本质依然是“以刊评文”,这是“旧金山宣言”所明确反对的。“以刊定质”,而不是用学术质量本身来评价科学研究,已经日益遭到越来越多人的反思、质疑、批评和抵制,这个时候又祭出这杆大旗,似有逆向而动之嫌。真正需要下功夫的是如何在同行评价和代表作评价方面拿出切实可行的操作办法,而不是继续在“看刊物、数数量”的道路上越走越远,那样只能带来更多的浮躁。更为重要的是,教育行政部门在主导此事,其“指挥棒的力量”不会随评估结束而结束,而会长久发挥作用。量化指标的推出在世界范围内几乎都是“民间”行为,鲜见教育行政部门直接推动设立。无论是从“管办评分离”“放管服”的角度,还是从落实创新发展理念、推进“两个一流建设”的角度,推出“A类期刊”都是弊大于利。
评价科研论文的直观指标是所在杂志的水平(中文核心/sci,影响因子高低),发表时间较长的论文可以看被引次数不过,影响因子代表的是杂志的整体水平,而且不能用于学科间的比较评价科研论文水平的根本指标是该篇论文发表后产生的影响力具体来讲,优秀论文的要素:1、正确选题;2、合适的切入点;3、简洁明了;4、说清自己的贡献;5、可靠的/可重现的结果;6、可重复的过程;7、好的文章结构和逻辑流程;8、精选的参考文献如果论文能在基础理论方法或技术手段方面有明确的创新点,自然很有价值
研究思路、研究方法、技术路线和实施步骤 1、研究什么?——怎样确定研究课题 一切科学研究始于问题——问题即课题;教学即研究(掌握方法很重要,否则就不是研究);进步与成果即成长。 教育科研课题主要来源于两大方面: A.实践来源——客观存在的或潜在的教育实际问题,教育教学实践本身存在的问题。 教育教学与其外部的矛盾(教师与家长、教师与学校、学校与社会、教育与社会发展)。 B.理论来源——现有教育理论所揭示的问题以及理论体系中的空白和矛盾点(例如《关于“信息技术与课程整合”的冷思考》一文产生的过程) 2、怎样进行研究课题的论证? 我们既然已选定了一个课题,我们就必须对这个课题的所有情况进行全面的了解。了解这个课题目前在国外、国内的研究情况,包括研究已取得的成果和存在的问题,了解这一课题所属的理论体系等等。对课题的全面了解,可以使我们在研究过程中少走弯路,确立研究的主攻方向,这就是我们常说的:“知己知彼,百战百胜”。 怎样对一个课题进行论证呢?论证一个课题主要是弄清如下几个问题: A.所要研究的问题是什么性质和类型的问题? B.要研究的问题具有什么现实意义?它的理论价值(即在理论上预计有哪些突破?) C.要研究的问题目前已有哪些研究成果?研究的方向是什么? D.要研究的问题所应具备的条件分析。 E.课题研究的策略和步骤如何? F.课题研究的成果及其表现形式有哪些? 3、教育课题研究的基本方法有: ⑴ 观察法 ⑵ 调查法 ⑶ 测验法 ⑷ 行动研究法 ⑸ 文献法 ⑹ 经验总结法 ⑺ 个案研究法 ⑻ 案例研究法 ⑼ 实验法(在一个课题研究过程中,根据不同的研究目的和要求,往往会用到两种以上方法) 1 观察法:为了了解事实真相,从而发现某种现象的本质和规律。 观察法的步骤:观察法的实施分为以下三个步骤,步骤之一就是进行观察研究的设计,此步骤可分为如下几个方面: 1 作大略调查和试探性观察。 这一步工作的目的不在于搜集材料,而在于掌握基本情况,以便能正确地计划整个观察过程。例如:要观察某一教师的教学工作,便应当预先到学校大致了解这位教师的工作情况,学生的情况,有关的环境和条件等等。这可以通过跟教师和学校领导人谈话,查阅一些有关的材料,如教案、教学日记、学生作业等,以及听课等方式进行。 2 确定观察的目的和中心。 根据研究任务和研究对象的特点,考虑弄清楚什么问题,需要什么材料和条件,然后作明确的规定。如果这规定不明确,观察便不能集中,结果就不能深入。观察不能有几个中心,范围不能太广,全部观察要围绕一个中心进行。如果必须要观察几个中心,那就采取小组观察,分工合作。 3 确定观察对象 一是确定拟观察的的总体范围; 二是确定拟观察的个案对象; 三是确定拟观察的具体项目。 比如,要研究新分配到小学任教的中师或大专毕业生在课余时间进行业务、文化进修的情况,那么,拟观察总体就是教师工作年限达一年或两年的新教师。在这一总体范围内,再定下具体观察哪几所小学,哪几个教研组中的哪些教师。具体观察名单确定以后,再把拟观察的时间、场合、具体观察项目确定下来。 4 制定观察计划 观察计划除了明确规定观察的目的、中心、范围,以及要了解什么问题、搜集什么材料之外,还应当安排观察过程:观察次数、密度、每次观察持续的时间,如何保证观察现象的常态等。 5 策划和准备观察手段 观察手段一般包括两种: 一种是获得观察资料的手段;一种是保存观察资料的手段。 获得观察资料的手段主要是人的感觉器官,但有时需要一些专门设置的仪器来帮助观察,如观察屏、计算机终端装置、更高级的如动作反应器等。这些仪器主要起两方面作用:保证观察的客观性与提高观察的精确性。 在保存资料的手段中,人脑是天然器官。但这种与观察主体连在一起的保存手段缺乏精确性和持久性,也不能实现资料的客体化。因此,人们先利用文字、图形等符号手段,进而又利用摄影、录音、录像等技术手段,把观察时瞬间发生的事、物、状况以永久的方式,准确地、全面地记录下来,供研究地反复观察资料和分析资料所用。 无论哪一类手段,都应在观察开始前就准备好,对观察中使用的种仪器也须事先作好功能检查,以保证在使用过程中不出现障碍。对于观察人员来说,必须掌握使用仪器的基本方法,并知道在观察中应做些什么。如要详细、全面拍摄一堂课,一部摄像机是不够的。观察者应准备几部摄像机,并事先作好分工。即使是作观察记录,也需要事先作好设计。在记录纸上印好以一定的格式排列的必须记录的项目,还可以约定一些记录符号,以尽量减少现场记录时书写文字的时间. 我们以中学生课堂行为记录为例,见表5-1。在下面表格中,研究人员根据研究需要,列出他认为在课堂上学生可能发生的行为。但估计所列不会完全,所以留出一些空格,让观察员在需要时使用。研究者如果要请别人帮助观察,必须事先和观察人员讲清楚每一个项目的具体所指,遇到意外情况的处理方法,要求他们熟悉每一个项目的所在位置。为了稳妥起见,还可以在正式观察前先作几次观察练习,帮助观察人员熟悉表格的内容;如发现表格的缺陷,可在正式观察前作出调整。 6 规定统一性标准 为了增加观察的客观性,为了便于衡量和评价各种现象,为了易于用数量来表达观察的现象,为了使观察结果可以核对、比较、统计和综合,必须事先考虑自己的观察可能涉及到的各种因素,并对每一因素规定出统一的标准。每次观察或观察同一现象的不同观察者,要坚持采用统一的标准去衡量。这主要在于,不同的研究项目常会涉及到不同性质的标准。如:有的涉及到单位问题,如怎样衡量学生表现的知识质量;有的涉及到定义问题,如怎样才算违反纪律;有的涉及计算方式问题,如怎样登记和表达学生之间产生的矛盾的频率,等等。对类似问题,都应事先做好统一规定。 7 逐段提出观察提纲 在观察计划的基础上,应对每次或每段(几次同一性质上一内容的观察组成一段)观察提出具体提纲,以便使观察者对每一次观察的目的、任务和要获得什么材料非常明确。观察提纲可以包括本次观察要解决的具体问题,并且应当在前一次观察的基础上,经过深思熟虑之后提出来。亦可采用表格的方式,以便于分类统计。 观察实际过程,加以分析研究,得出某种结论。也许可以形成某个研究课题。 2 调查法 : 同样是为了了解事实情况,分析事实情况,得出结论,证实某种问题,以便改进工作(包括改进研究方法)或形成新的研究课题。 包括问卷调查、访问调查等。了解事实情况、分析情况、认真研究,得出结论,寻找解决办法或进一步研究的方案。 举例说明调查法的操作过程: 抽样调查的主要步骤 在实际的抽样操作中,整个过程可大致分为如下步骤: 确定调查的目的(确定问题,形成假说;通过调查验证假说,使问题明确化,得出结论)。 确定抽样总体。要从中进行抽样的总体应与要得到信息的总体(目标总体)一致。从样本得出的结论适用于被抽样总体,超出这个范围结论的适用程度取决于被抽样总体与目标总体的差异程度。 确定待收集的数据。一般只收集与调查目的有关的数据,过长的调查表会降低回答的质量。 选择抽样方法。这时总体中的哪种单位作为个体基本上可定下来。 编制抽样框。如学校名录、学生花名册等。 确定需要的精确度。因抽样调查是要由样本推断总体,会带有某些不确定性。一般是对相对误差或绝对误差作出概率水平上的要求。 估计样本容量,估计费用。 抽样试验,在小范围内试填一下调查表,做些必要的改进。 实地调查工作的组织。按抽样方案进行调查。对收回的调查表的质量及时进行检查。对不回答的表要有处理方案。 根据所用的抽样方法进行数据分析。 可对同样的数据采用其它的分析方法,以作比较。 写出调查报告。留存有关总体的信息,它们可能对将来的抽样起指导作用。 对于教育现象,有时难于进行严格意义上的概率抽样,可以考虑采用下列方法抽样:从总体中选出若干有代表性的大单位(群),在群内进行概率抽样;从一个小总体中选出接近于研究者对总体平均数的印象的那些个体;样本限于总体中易于取到的部分;样本是随便选取的;样本由自愿被调查的人员组成;等等。但对这样得到的样本要选择适当的数据分析方法,对结论也要慎重,应充分利用其它信息进行核查、确认。在教育现象的研究中,研究者的智恝、经验和抽样技术的有机结合,是获取好样本的关键。 3 测验法: 是想描述某些行为的状况,或推论某些行为的状况(包括:能力与成就,个性、兴趣、动机、态度、观念及心理需要等);从而考虑改建的策略或方案,或进一步形成新的研究课题。 在教育学和心理学中,测量被用作定量研究的重要方法。主要功能是评估、诊断和预测。(举例,如XXX老师所做的“学生自学能力测验(试验)”,就是为了了解小学中高年级学生的自学能力究竟能达到何种程度)。 所谓测量就是根据一定的法则,将某种物体或现象所具有的属性或特征用数字或符号表示出来的过程。测验法是教育和心理学测量的一项主要内容和形式。 测验的客观性是关于测验系统化过程好坏程度的指标。测验的控制,在不同时间对于同一个被试,或同一时间对于不同的被试,其意义都应该是相同的。保持刺激的客观性则要遵照一定的程序予以控制。(如周文琴老师在做这一测试前邀请我去在他们的家长会上的讲话,目的就在于排除和避免人为因素影响,排除测验的随意性和不真实性,实现评测标准的同一性)。 推论的客观性指对同一结果不同的人所做的推论应该一致,同一个人在不同的时间对同一结果的所做解释应该相同。 4 行动研究法: 行动研究法是一种适应小范围内教育改革的探索性的研究方法,其目的不在于建立理论、归纳规律,而是针对教育活动和教育实践中的问题,在行动研究中不断地探索、改进改进工作,解决教育实际问题。行动研究将改革行动与研究工作相结合,与教育实践的具体改革行动紧密相连。(特点是边执行、边评价、边修改)。 模式基本是:计划——行动——考察——反思(即总结评价)。教师个体比较适用。 另一种模式:预诊——搜集资料初步研究——拟订总体计划——制订具体计划——行动——总结评价 从上述行动研究法的几个步骤中可以发现三个明显的特征: 一是具有动态性,所有的设想、计划、,都处于一个开放的动态系统中,都是可修改的; 二是较强的联合性与参与性,研究者、教师、行政人员的全体小组成员参与行动研究法实施的全过程。 三是在整个研究过程中,诊断性评价、形成性评价、总结性评价贯穿于行动研究法工作流程的始终。 具体说说操作方法: (一)预诊:这一阶段的任务是发现问题。对教学或学校工作中的问题,进行反思发现问题,并根据实际情况进行诊断,得出行动改变的最初设想。在各步骤中,预诊占有十分重要的地位。 (二)收集资料初步研究:这一阶段成立由教研人员、教师和教育行政人员组成的研究小组对问题进行初步讨论和研究,查找解决问题的有关理论、文献,充分占有资料,参与研究的人员共同讨论,听取各方意见,以便为总体计划的拟定做好诊断性评价。 (三)拟定总体计划:这是最初设想的一个系统化计划。行动研究法是一个动态的开放系统,所以总体计划是可以修订更改的。 (四)制定具体计划:这是实现总体计划的具体措施,它以实际问题解决的需要为前提,有了它,才会导致旨在改变现状的干预行动的出现。 (五)行动:是整个研究工作成败的关键。这一阶段的特点是边执行、边评价、边修改。在实施计划的行动中,注意收集每一步行动的反馈信息,可行的,则可以进入下一步计划和行动。反之,则总体计划甚至基本设想都可能需要作出调整或修改。这里行动的目的,不是为了检验某一设想或计划,而是为了解决实际问题。在行动研究中,过程性资料的搜集、整理也是非常重要的。 (六)总结评价:首先要对研究过程进行考察。考察内容有:一是行动背景因素以及影响行动的因素。二是行动过程,包括什么人以什么方式参与了计划实施,使用了什么材料,安排了什么活动,有无意外的变化、如何排除干扰。三是行动的结果,包括预期的与非预期的,积极和消极的。要注意搜集三方面的资料,背景资料是分析计划设想有效性的基础材料,过程资料是判断行动效果是不是、由方案带来和怎样带来的考察依据;结果资料是分析方案带来的什么样的效果的直接依据。考察要灵活运用各种观察技术以及数据、资料的采集和分析技术,充 分利用录象、录音等现代化手段。 总结评价实际上是对行动研究过程及其结果的“反思”。反思是行动研究第一个循环周期的结束,又是过渡到另一个循环周期的中介。这一环节包括:整理描述,评价解释,写出研究报告。这是对整个研究工作的总结和评价。这一阶段除了要对研究中获得的数据、资料进行科学处理,得到研究所需要的结论外,还应对产生这一课题的实际问题作出解释和评价。 5 经验总结法: 这是教师可以常用的方法。教育经验总结法是根据教育实践所提供的事实,分析概括教育现象,挖掘现有的经验材料,并使之上升到教育理论的高度,以便更好地指导新的教育实践活动的一种教育科学研究方法。关键是要能够从透过现象看本质,找出实际经验中的规律;从而更好地更加理性地改进自己的教学。进行教育经验总结要遵循以下基本要求: 一、要注意经验的 先 进 性(观念必须更新) 二、要全面考察总结的对象,充分占有原始的事实材料;且做到有“点”有“面”,“点”、“面”结合,防止以偏概全的片面性。 三、要以教育实践活动为依据,不能凭空想当然,那是毫无价值。 四、要善于进行理论分析 6 文献法: 分类阅读有关文献(包括文字、图形、符号、声频、视频等具有一定历史价值、理论价值和资料价值的材料),得出一般性结论或者发现问题,寻找新的思路。 文献按内容性质分,有零次文献、一次文献、二次文献和三次文献。零次文献是未经发表和有意识处理的最原始的资料。一次文献指直接记录事件经过、研究成果、新知识、新技术的专著、论文、调查报告等文献。二次文献是指对一次文献进行加工整理,包括著录其文献特征、摘录其内容要点,并按照一定方法编排成系统的便于查找的文献。三次文献是指工具书和在二次文献的基础上,又对众多一次文献的综合研究结果。 7 个案研究法: 个案研究法就是对单一的研究对象进行深人而具体研究的方法。 个案研究的对象可以是个人,也可以是个别团体或机构。前者如对一个或少数几个优生或差生进行个案分析,后者如对某先进班级或学校进行个案研究。个案研究一般对研究对象的一些典型特征作全面、深入的考察和分析,也就是所谓“解剖麻雀”的方法。 个案研究中,原始的资料积累是非常重要的。同时个案研究不仅停留在对个案的研究和认识的水平上,而且需要认识教育与发展之间的因果关系,提出一些积极的教育对策,以改革教育教学方法。也可能通过对某个案的研究而形成假说,进而产生新的研究课题或教改实验。 观察或追踪一个人、几个人、一个团体、一节课……的过程,时间可长可短,依需要而定,进行分析概括,透过现象看本质,得出规律性的结论,找出解决问题的办法。(个案研究的对象少,研究规模也较小;同时个案研究一般都是在没有控制的自然状态中进行的,也不要在一段时间内突击完成。所以,个案研究就特别适合教师的研究。教师可以抓住一两个典型的学生或一类学生,结合教学、教育工作实践进行研究。对于每一个教育实践工作者来说,总可以在班上找到研究对象,而且也不需要什么特殊的处理,不影响正常的教育活动)。 8 案例研究法: 什么是“案例”?中外学者尚无普遍公认的、权威的定义,一般认为,案例是对现实生活中某一具体现象的客观描述。教育案例是对教育活动中具有典型意义的,能够反映教育某些内在规律或某些教学思想、原理的具体教学事件的描述、总结分析,它通常是课堂内真实的故事,教学实践中遇到的困惑的真实记录。对这些“真实记录”进行分析研究,寻找规律或产生问题的根源,进而寻求解决问题或改进工作的方法,或形成新的研究课题。在案例法的研究中,研究者自身的洞察力是关键。
第一方面,即总的原则是:基于指标的量化评估是第二位的,是辅助性的,而同行评价的质性评估是第一位,是主导性的。量化指标可以降低同行评价中的偏见,促进更加深入的审议,提高同行评价的质量,但量化指标不应取代评估者基于充分信息基础上的判断。评估者仍然需要对其评估负责,而不是完全让“数据说话”了事(第一条原则)。所以,“莱顿宣言”并不提倡科研评价要用量化指标,更不提倡把量化指标作为主导甚至是唯一指标。“莱顿宣言”只是说在用到起辅助作用的量化指标时需要注意的一些原则。第二方面,在总的原则指导下,运用科研评价指标做具体评价工作时的下位原则,即要充分考虑科研活动本身是创造性的、个性化的、独特性的等特点,所以需要在评价过程中特别注意科研活动的使命的差异(第二条原则)、地域性的差异(第三条原则)、学科性的差异(第六条原则)、个体性的差异(第七条原则)。这些差异容易被量化指标遮蔽,所以需要在评价中采用综合计量或者质性评估办法。第三方面,关于科研评价指标的具体数据采集和分析的要求,要公开透明(第四条原则)、可以复核验证(第五条原则)。第四方面,对科研评价指标的态度,要理解实质内涵(第八条原则)、警惕负面影响(第九条原则)、不断改进完善(第十条原则)。“莱顿宣言”每一条都内涵丰富,指向明确。与之对比,可以发现,我国科学评价工作还大有改进空间。“旧金山宣言”纠偏“以刊评文”“旧金山宣言”(The San Francisco Declaration on Research Assessment,DORA)的提出源于2012年12月美国细胞生物学学会年会期间,一些学术期刊的编辑和出版者提出关于科研评价的建议,在此基础上形成了“旧金山宣言”,2013年5月,78个科学组织的155位科学家签署了这份宣言。“旧金山宣言”引发了世界科学界的广泛关注,《科学》杂志撰写社论支持“旧金山宣言”,认为影响因子最重要的危害是可能妨碍创新,它引导科学家关注发高影响因子的文章,追逐所谓的“热点”,而不是潜心科研创新。
最近我也在写论文的开题报告。下面是我复制的,百分之百正确。调查法调查法是科学研究中最常用的方法之一。它是有目的、有计划、有系统地搜集有关研究对象现实状况或历史状况的材料的方法。调查方法是科学研究中常用的基本研究方法,它综合运用历史法、观察法等方法以及谈话、问卷、个案研究、测验等科学方式,对教育现象进行有计划的、周密的和系统的了解,并对调查搜集到的大量资料进行分析、综合、比较、归纳,从而为人们提供规律性的知识。调查法中最常用的是问卷调查法,它是以书面提出问题的方式搜集资料的一种研究方法,即调查者就调查项目编制成表式,分发或邮寄给有关人员,请示填写答案,然后回收整理、统计和研究。观察法观察法是指研究者根据一定的研究目的、研究提纲或观察表,用自己的感官和辅助工具去直接观察被研究对象,从而获得资料的一种方法。科学的观察具有目的性和计划性、系统性和可重复性。在科学实验和调查研究中,观察法具有如下几个方面的作用:①扩大人们的感性认识。②启发人们的思维。③导致新的发现。实验法实验法是通过主支变革、控制研究对象来发现与确认事物间的因果联系的一种科研方法。其主要特点是:第一、主动变革性。观察与调查都是在不干预研究对象的前提下去认识研究对象,发现其中的问题。而实验却要求主动操纵实验条件,人为地改变对象的存在方式、变化过程,使它服从于科学认识的需要。第二、控制性。科学实验要求根据研究的需要,借助各种方法技术,减少或消除各种可能影响科学的无关因素的干扰,在简化、纯化的状态下认识研究对象。第三,因果性。实验以发现、确认事物之间的因果联系的有效工具和必要途径。文献研究法文献研究法是根据一定的研究目的或课题,通过调查文献来获得资料,从而全面地、正确地了解掌握所要研究问题的一种方法。文献研究法被子广泛用于各种学科研究中。其作用有:①能了解有关问题的历史和现状,帮助确定研究课题。②能形成关于研究对象的一般印象,有助于观察和访问。③能得到现实资料的比较资料。④有助于了解事物的全貌。实证研究法实证研究法是科学实践研究的一种特殊形式。其依据现有的科学理论和实践的需要,提出设计,利用科学仪器和设备,在自然条件下,通过有目的有步骤地操纵,根据观察、记录、测定与此相伴随的现象的变化来确定条件与现象之间的因果关系的活动。主要目的在于说明各种自变量与某一个因变量的关系。定量分析法在科学研究中,通过定量分析法可以使人们对研究对象的认识进一步精确化,以便更加科学地揭示规律,把握本质,理清关系,预测事物的发展趋势。定性分析法定性分析法就是对研究对象进行“质”的方面的分析。具体地说是运用归纳和演绎、分析与综合以及抽象与概括等方法,对获得的各种材料进行思维加工,从而能去粗取精、去伪存真、由此及彼、由表及里,达到认识事物本质、揭示内在规律。跨学科研究法运用多学科的理论、方法和成果从整体上对某一课题进行综合研究的方法,也称“交叉研究法”。科学发展运动的规律表明,科学在高度分化中又高度综合,形成一个统一的整体。据有关专家统计,现在世界上有2000多种学科,而学科分化的趋势还在加剧,但同时各学科间的联系愈来愈紧密,在语言、方法和某些概念方面,有日益统一化的趋势。个案研究法个案研究法是认定研究对象中的某一特定对象,加以调查分析,弄清其特点及其形成过程的一种研究方法。个案研究有三种基本类型:(1)个人调查,即对组织中的某一个人进行调查研究;(2)团体调查,即对某个组织或团体进行调查研究;(3)问题调查,即对某个现象或问题进行调查研究。功能分析法功能分析法是社会科学用来分析社会现象的一种方法,是社会调查常用的分析方法之一。它通过说明社会现象怎样满足一个社会系统的需要(即具有怎样的功能)来解释社会现象。数量研究法数量研究法也称“统计分析法”和“定量分析法”,指通过对研究对象的规模、速度、范围、程度等数量关系的分析研究,认识和揭示事物间的相互关系、变化规律和发展趋势,借以达到对事物的正确解释和预测的一种研究方法。模拟法(模型方法)模拟法是先依照原型的主要特征,创设一个相似的模型,然后通过模型来间接研究原型的一种形容方法。根据模型和原型之间的相似关系,模拟法可分为物理模拟和数学模拟两种。探索性研究法探索性研究法是高层次的科学研究活动。它是用已知的信息,探索、创造新知识,产生出新颖而独特的成果或产品。信息研究方法信息研究方法是利用信息来研究系统功能的一种科学研究方法。美国数学、通讯工程师、生理学家维纳认为,客观世界有一种普遍的联系,即信息联系。当前,正处在“信息革命”的新时代,有大量的信息资源,可以开发利用。信息方法就是根据信息论、系统论、控制论的原理,通过对信息的收集、传递、加工和整理获得知识,并应用于实践,以实现新的目标。信息方法是一种新的科研方法,它以信息来研究系统功能,揭示事物的更深一层次的规律,帮助人们提高和掌握运用规律的能力。经验总结法经验总结法是通过对实践活动中的具体情况,进行归纳与分析,使之系统化、理论化,上升为经验的一种方法。总结推广先进经验是人类历史上长期运用的较为行之有效的领导方法之一。描述性研究法描述性研究法是一种简单的研究方法,它将已有的现象、规律和理论通过自己的理解和验证,给予叙述并解释出来。它是对各种理论的一般叙述,更多的是解释别人的论证,但在科学研究中是必不可少的。它能定向地提出问题,揭示弊端,描述现象,介绍经验,它有利于普及工作,它的实例很多,有带揭示性的多种情况的调查;有对实际问题的说明;也有对某些现状的看法等。数学方法数学方法就是在撇开研究对象的其他一切特性的情况下,用数学工具对研究对象进行一系列量的处理,从而作出正确的说明和判断,得到以数字形式表述的成果。科学研究的对象是质和量的统一体,它们的质和量是紧密联系,质变和量变是互相制约的。要达到真正的科学认识,不仅要研究质的规定性,还必须重视对它们的量进行考察和分析,以便更准确地认识研究对象的本质特性。数学方法主要有统计处理和模糊数学分析方法。 思维方法思维方法是人们正确进行思维和准确表达思想的重要工具,在科学研究中最常用的科学思维方法包括归纳演绎、类比推理、抽象概括、思辩想象、分析综合等,它对于一切科学研究都具有普遍的指导意义。系统科学方法20世纪,系统论、控制论、信息论等横向科学的迅猛发展,为发展综合思维方式提供了有力的手段,使科学研究方法不断地完善。而以系统论方法、控制论方法和信息论方法为代表的系统科学方法,又为人类的科学认识提供了强有力的主观手段。它不仅突破了传统方法的局限性,而且深刻地改变了科学方法论的体系。这些新的方法,既可以作为经验方法,作为获得感性材料的方法来使用,也可以作为理论方法,作为分析感性材料上升到理性认识的方法来使用,而且作为后者的作用比前者更加明显。它们适用于科学认识的各个阶段,因此,我们称其为系统科学方法。
研究思路、研究方法、技术路线和实施步骤 1、研究什么?——怎样确定研究课题 一切科学研究始于问题——问题即课题;教学即研究(掌握方法很重要,否则就不是研究);进步与成果即成长。 教育科研课题主要来源于两大方面: A.实践来源——客观存在的或潜在的教育实际问题,教育教学实践本身存在的问题。 教育教学与其外部的矛盾(教师与家长、教师与学校、学校与社会、教育与社会发展)。 B.理论来源——现有教育理论所揭示的问题以及理论体系中的空白和矛盾点(例如《关于“信息技术与课程整合”的冷思考》一文产生的过程) 2、怎样进行研究课题的论证? 我们既然已选定了一个课题,我们就必须对这个课题的所有情况进行全面的了解。了解这个课题目前在国外、国内的研究情况,包括研究已取得的成果和存在的问题,了解这一课题所属的理论体系等等。对课题的全面了解,可以使我们在研究过程中少走弯路,确立研究的主攻方向,这就是我们常说的:“知己知彼,百战百胜”。 怎样对一个课题进行论证呢?论证一个课题主要是弄清如下几个问题: A.所要研究的问题是什么性质和类型的问题? B.要研究的问题具有什么现实意义?它的理论价值(即在理论上预计有哪些突破?) C.要研究的问题目前已有哪些研究成果?研究的方向是什么? D.要研究的问题所应具备的条件分析。 E.课题研究的策略和步骤如何? F.课题研究的成果及其表现形式有哪些? 3、教育课题研究的基本方法有: ⑴ 观察法 ⑵ 调查法 ⑶ 测验法 ⑷ 行动研究法 ⑸ 文献法 ⑹ 经验总结法 ⑺ 个案研究法 ⑻ 案例研究法 ⑼ 实验法(在一个课题研究过程中,根据不同的研究目的和要求,往往会用到两种以上方法) 1 观察法:为了了解事实真相,从而发现某种现象的本质和规律。 观察法的步骤:观察法的实施分为以下三个步骤,步骤之一就是进行观察研究的设计,此步骤可分为如下几个方面: 1 作大略调查和试探性观察。 这一步工作的目的不在于搜集材料,而在于掌握基本情况,以便能正确地计划整个观察过程。例如:要观察某一教师的教学工作,便应当预先到学校大致了解这位教师的工作情况,学生的情况,有关的环境和条件等等。这可以通过跟教师和学校领导人谈话,查阅一些有关的材料,如教案、教学日记、学生作业等,以及听课等方式进行。 2 确定观察的目的和中心。 根据研究任务和研究对象的特点,考虑弄清楚什么问题,需要什么材料和条件,然后作明确的规定。如果这规定不明确,观察便不能集中,结果就不能深入。观察不能有几个中心,范围不能太广,全部观察要围绕一个中心进行。如果必须要观察几个中心,那就采取小组观察,分工合作。 3 确定观察对象 一是确定拟观察的的总体范围; 二是确定拟观察的个案对象; 三是确定拟观察的具体项目。 比如,要研究新分配到小学任教的中师或大专毕业生在课余时间进行业务、文化进修的情况,那么,拟观察总体就是教师工作年限达一年或两年的新教师。在这一总体范围内,再定下具体观察哪几所小学,哪几个教研组中的哪些教师。具体观察名单确定以后,再把拟观察的时间、场合、具体观察项目确定下来。 4 制定观察计划 观察计划除了明确规定观察的目的、中心、范围,以及要了解什么问题、搜集什么材料之外,还应当安排观察过程:观察次数、密度、每次观察持续的时间,如何保证观察现象的常态等。 5 策划和准备观察手段 观察手段一般包括两种: 一种是获得观察资料的手段;一种是保存观察资料的手段。 获得观察资料的手段主要是人的感觉器官,但有时需要一些专门设置的仪器来帮助观察,如观察屏、计算机终端装置、更高级的如动作反应器等。这些仪器主要起两方面作用:保证观察的客观性与提高观察的精确性。 在保存资料的手段中,人脑是天然器官。但这种与观察主体连在一起的保存手段缺乏精确性和持久性,也不能实现资料的客体化。因此,人们先利用文字、图形等符号手段,进而又利用摄影、录音、录像等技术手段,把观察时瞬间发生的事、物、状况以永久的方式,准确地、全面地记录下来,供研究地反复观察资料和分析资料所用。 无论哪一类手段,都应在观察开始前就准备好,对观察中使用的种仪器也须事先作好功能检查,以保证在使用过程中不出现障碍。对于观察人员来说,必须掌握使用仪器的基本方法,并知道在观察中应做些什么。如要详细、全面拍摄一堂课,一部摄像机是不够的。观察者应准备几部摄像机,并事先作好分工。即使是作观察记录,也需要事先作好设计。在记录纸上印好以一定的格式排列的必须记录的项目,还可以约定一些记录符号,以尽量减少现场记录时书写文字的时间. 我们以中学生课堂行为记录为例,见表5-1。在下面表格中,研究人员根据研究需要,列出他认为在课堂上学生可能发生的行为。但估计所列不会完全,所以留出一些空格,让观察员在需要时使用。研究者如果要请别人帮助观察,必须事先和观察人员讲清楚每一个项目的具体所指,遇到意外情况的处理方法,要求他们熟悉每一个项目的所在位置。为了稳妥起见,还可以在正式观察前先作几次观察练习,帮助观察人员熟悉表格的内容;如发现表格的缺陷,可在正式观察前作出调整。 6 规定统一性标准 为了增加观察的客观性,为了便于衡量和评价各种现象,为了易于用数量来表达观察的现象,为了使观察结果可以核对、比较、统计和综合,必须事先考虑自己的观察可能涉及到的各种因素,并对每一因素规定出统一的标准。每次观察或观察同一现象的不同观察者,要坚持采用统一的标准去衡量。这主要在于,不同的研究项目常会涉及到不同性质的标准。如:有的涉及到单位问题,如怎样衡量学生表现的知识质量;有的涉及到定义问题,如怎样才算违反纪律;有的涉及计算方式问题,如怎样登记和表达学生之间产生的矛盾的频率,等等。对类似问题,都应事先做好统一规定。 7 逐段提出观察提纲 在观察计划的基础上,应对每次或每段(几次同一性质上一内容的观察组成一段)观察提出具体提纲,以便使观察者对每一次观察的目的、任务和要获得什么材料非常明确。观察提纲可以包括本次观察要解决的具体问题,并且应当在前一次观察的基础上,经过深思熟虑之后提出来。亦可采用表格的方式,以便于分类统计。 观察实际过程,加以分析研究,得出某种结论。也许可以形成某个研究课题。 2 调查法 : 同样是为了了解事实情况,分析事实情况,得出结论,证实某种问题,以便改进工作(包括改进研究方法)或形成新的研究课题。 包括问卷调查、访问调查等。了解事实情况、分析情况、认真研究,得出结论,寻找解决办法或进一步研究的方案。 举例说明调查法的操作过程: 抽样调查的主要步骤 在实际的抽样操作中,整个过程可大致分为如下步骤: 确定调查的目的(确定问题,形成假说;通过调查验证假说,使问题明确化,得出结论)。 确定抽样总体。要从中进行抽样的总体应与要得到信息的总体(目标总体)一致。从样本得出的结论适用于被抽样总体,超出这个范围结论的适用程度取决于被抽样总体与目标总体的差异程度。 确定待收集的数据。一般只收集与调查目的有关的数据,过长的调查表会降低回答的质量。 选择抽样方法。这时总体中的哪种单位作为个体基本上可定下来。 编制抽样框。如学校名录、学生花名册等。 确定需要的精确度。因抽样调查是要由样本推断总体,会带有某些不确定性。一般是对相对误差或绝对误差作出概率水平上的要求。 估计样本容量,估计费用。 抽样试验,在小范围内试填一下调查表,做些必要的改进。 实地调查工作的组织。按抽样方案进行调查。对收回的调查表的质量及时进行检查。对不回答的表要有处理方案。 根据所用的抽样方法进行数据分析。 可对同样的数据采用其它的分析方法,以作比较。 写出调查报告。留存有关总体的信息,它们可能对将来的抽样起指导作用。 对于教育现象,有时难于进行严格意义上的概率抽样,可以考虑采用下列方法抽样:从总体中选出若干有代表性的大单位(群),在群内进行概率抽样;从一个小总体中选出接近于研究者对总体平均数的印象的那些个体;样本限于总体中易于取到的部分;样本是随便选取的;样本由自愿被调查的人员组成;等等。但对这样得到的样本要选择适当的数据分析方法,对结论也要慎重,应充分利用其它信息进行核查、确认。在教育现象的研究中,研究者的智恝、经验和抽样技术的有机结合,是获取好样本的关键。 3 测验法: 是想描述某些行为的状况,或推论某些行为的状况(包括:能力与成就,个性、兴趣、动机、态度、观念及心理需要等);从而考虑改建的策略或方案,或进一步形成新的研究课题。 在教育学和心理学中,测量被用作定量研究的重要方法。主要功能是评估、诊断和预测。(举例,如XXX老师所做的“学生自学能力测验(试验)”,就是为了了解小学中高年级学生的自学能力究竟能达到何种程度)。 所谓测量就是根据一定的法则,将某种物体或现象所具有的属性或特征用数字或符号表示出来的过程。测验法是教育和心理学测量的一项主要内容和形式。 测验的客观性是关于测验系统化过程好坏程度的指标。测验的控制,在不同时间对于同一个被试,或同一时间对于不同的被试,其意义都应该是相同的。保持刺激的客观性则要遵照一定的程序予以控制。(如周文琴老师在做这一测试前邀请我去在他们的家长会上的讲话,目的就在于排除和避免人为因素影响,排除测验的随意性和不真实性,实现评测标准的同一性)。 推论的客观性指对同一结果不同的人所做的推论应该一致,同一个人在不同的时间对同一结果的所做解释应该相同。 4 行动研究法: 行动研究法是一种适应小范围内教育改革的探索性的研究方法,其目的不在于建立理论、归纳规律,而是针对教育活动和教育实践中的问题,在行动研究中不断地探索、改进改进工作,解决教育实际问题。行动研究将改革行动与研究工作相结合,与教育实践的具体改革行动紧密相连。(特点是边执行、边评价、边修改)。 模式基本是:计划——行动——考察——反思(即总结评价)。教师个体比较适用。 另一种模式:预诊——搜集资料初步研究——拟订总体计划——制订具体计划——行动——总结评价 从上述行动研究法的几个步骤中可以发现三个明显的特征: 一是具有动态性,所有的设想、计划、,都处于一个开放的动态系统中,都是可修改的; 二是较强的联合性与参与性,研究者、教师、行政人员的全体小组成员参与行动研究法实施的全过程。 三是在整个研究过程中,诊断性评价、形成性评价、总结性评价贯穿于行动研究法工作流程的始终。 具体说说操作方法: (一)预诊:这一阶段的任务是发现问题。对教学或学校工作中的问题,进行反思发现问题,并根据实际情况进行诊断,得出行动改变的最初设想。在各步骤中,预诊占有十分重要的地位。 (二)收集资料初步研究:这一阶段成立由教研人员、教师和教育行政人员组成的研究小组对问题进行初步讨论和研究,查找解决问题的有关理论、文献,充分占有资料,参与研究的人员共同讨论,听取各方意见,以便为总体计划的拟定做好诊断性评价。 (三)拟定总体计划:这是最初设想的一个系统化计划。行动研究法是一个动态的开放系统,所以总体计划是可以修订更改的。 (四)制定具体计划:这是实现总体计划的具体措施,它以实际问题解决的需要为前提,有了它,才会导致旨在改变现状的干预行动的出现。 (五)行动:是整个研究工作成败的关键。这一阶段的特点是边执行、边评价、边修改。在实施计划的行动中,注意收集每一步行动的反馈信息,可行的,则可以进入下一步计划和行动。反之,则总体计划甚至基本设想都可能需要作出调整或修改。这里行动的目的,不是为了检验某一设想或计划,而是为了解决实际问题。在行动研究中,过程性资料的搜集、整理也是非常重要的。 (六)总结评价:首先要对研究过程进行考察。考察内容有:一是行动背景因素以及影响行动的因素。二是行动过程,包括什么人以什么方式参与了计划实施,使用了什么材料,安排了什么活动,有无意外的变化、如何排除干扰。三是行动的结果,包括预期的与非预期的,积极和消极的。要注意搜集三方面的资料,背景资料是分析计划设想有效性的基础材料,过程资料是判断行动效果是不是、由方案带来和怎样带来的考察依据;结果资料是分析方案带来的什么样的效果的直接依据。考察要灵活运用各种观察技术以及数据、资料的采集和分析技术,充 分利用录象、录音等现代化手段。 总结评价实际上是对行动研究过程及其结果的“反思”。反思是行动研究第一个循环周期的结束,又是过渡到另一个循环周期的中介。这一环节包括:整理描述,评价解释,写出研究报告。这是对整个研究工作的总结和评价。这一阶段除了要对研究中获得的数据、资料进行科学处理,得到研究所需要的结论外,还应对产生这一课题的实际问题作出解释和评价。 5 经验总结法: 这是教师可以常用的方法。教育经验总结法是根据教育实践所提供的事实,分析概括教育现象,挖掘现有的经验材料,并使之上升到教育理论的高度,以便更好地指导新的教育实践活动的一种教育科学研究方法。关键是要能够从透过现象看本质,找出实际经验中的规律;从而更好地更加理性地改进自己的教学。进行教育经验总结要遵循以下基本要求: 一、要注意经验的 先 进 性(观念必须更新) 二、要全面考察总结的对象,充分占有原始的事实材料;且做到有“点”有“面”,“点”、“面”结合,防止以偏概全的片面性。 三、要以教育实践活动为依据,不能凭空想当然,那是毫无价值。 四、要善于进行理论分析 6 文献法: 分类阅读有关文献(包括文字、图形、符号、声频、视频等具有一定历史价值、理论价值和资料价值的材料),得出一般性结论或者发现问题,寻找新的思路。 文献按内容性质分,有零次文献、一次文献、二次文献和三次文献。零次文献是未经发表和有意识处理的最原始的资料。一次文献指直接记录事件经过、研究成果、新知识、新技术的专著、论文、调查报告等文献。二次文献是指对一次文献进行加工整理,包括著录其文献特征、摘录其内容要点,并按照一定方法编排成系统的便于查找的文献。三次文献是指工具书和在二次文献的基础上,又对众多一次文献的综合研究结果。 7 个案研究法: 个案研究法就是对单一的研究对象进行深人而具体研究的方法。 个案研究的对象可以是个人,也可以是个别团体或机构。前者如对一个或少数几个优生或差生进行个案分析,后者如对某先进班级或学校进行个案研究。个案研究一般对研究对象的一些典型特征作全面、深入的考察和分析,也就是所谓“解剖麻雀”的方法。 个案研究中,原始的资料积累是非常重要的。同时个案研究不仅停留在对个案的研究和认识的水平上,而且需要认识教育与发展之间的因果关系,提出一些积极的教育对策,以改革教育教学方法。也可能通过对某个案的研究而形成假说,进而产生新的研究课题或教改实验。 观察或追踪一个人、几个人、一个团体、一节课……的过程,时间可长可短,依需要而定,进行分析概括,透过现象看本质,得出规律性的结论,找出解决问题的办法。(个案研究的对象少,研究规模也较小;同时个案研究一般都是在没有控制的自然状态中进行的,也不要在一段时间内突击完成。所以,个案研究就特别适合教师的研究。教师可以抓住一两个典型的学生或一类学生,结合教学、教育工作实践进行研究。对于每一个教育实践工作者来说,总可以在班上找到研究对象,而且也不需要什么特殊的处理,不影响正常的教育活动)。 8 案例研究法: 什么是“案例”?中外学者尚无普遍公认的、权威的定义,一般认为,案例是对现实生活中某一具体现象的客观描述。教育案例是对教育活动中具有典型意义的,能够反映教育某些内在规律或某些教学思想、原理的具体教学事件的描述、总结分析,它通常是课堂内真实的故事,教学实践中遇到的困惑的真实记录。对这些“真实记录”进行分析研究,寻找规律或产生问题的根源,进而寻求解决问题或改进工作的方法,或形成新的研究课题。在案例法的研究中,研究者自身的洞察力是关键。
调查法 调查法是科学研究中最常用的方法之一。它是有目的、有计划、有系统地搜集有关研究对象现实状况或历史状况的材料的方法。调查方法是科学研究中常用的基本研究方法,它综合运用历史法、观察法等方法以及谈话、问卷、个案研究、测验等科学方式,对教育现象进行有计划的、周密的和系统的了解,并对调查搜集到的大量资料进行分析、综合、比较、归纳,从而为人们提供规律性的知识。 调查法中最常用的是问卷调查法,它是以书面提出问题的方式搜集资料的一种研究方法,即调查者就调查项目编制成表式,分发或邮寄给有关人员,请示填写答案,然后回收整理、统计和研究。 观察法 观察法是指研究者根据一定的研究目的、研究提纲或观察表,用自己的感官和辅助工具去直接观察被研究对象,从而获得资料的一种方法。科学的观察具有目的性和计划性、系统性和可重复性。在科学实验和调查研究中,观察法具有如下几个方面的作用:①扩大人们的感性认识。②启发人们的思维。③导致新的发现。 实验法 实验法是通过主支变革、控制研究对象来发现与确认事物间的因果联系的一种科研方法。其主要特点是:第一、主动变革性。观察与调查都是在不干预研究对象的前提下去认识研究对象,发现其中的问题。而实验却要求主动操纵实验条件,人为地改变对象的存在方式、变化过程,使它服从于科学认识的需要。第二、控制性。科学实验要求根据研究的需要,借助各种方法技术,减少或消除各种可能影响科学的无关因素的干扰,在简化、纯化的状态下认识研究对象。第三,因果性。实验以发现、确认事物之间的因果联系的有效工具和必要途径。 文献研究法 文献研究法是根据一定的研究目的或课题,通过调查文献来获得资料,从而全面地、正确地了解掌握所要研究问题的一种方法。文献研究法被子广泛用于各种学科研究中。其作用有:①能了解有关问题的历史和现状,帮助确定研究课题。②能形成关于研究对象的一般印象,有助于观察和访问。③能得到现实资料的比较资料。④有助于了解事物的全貌。 实证研究法 实证研究法是科学实践研究的一种特殊形式。其依据现有的科学理论和实践的需要,提出设计,利用科学仪器和设备,在自然条件下,通过有目的有步骤地操纵,根据观察、记录、测定与此相伴随的现象的变化来确定条件与现象之间的因果关系的活动。主要目的在于说明各种自变量与某一个因变量的关系。 定量分析法 在科学研究中,通过定量分析法可以使人们对研究对象的认识进一步精确化,以便更加科学地揭示规律,把握本质,理清关系,预测事物的发展趋势。 定性分析法 定性分析法就是对研究对象进行“质”的方面的分析。具体地说是运用归纳和演绎、分析与综合以及抽象与概括等方法,对获得的各种材料进行思维加工,从而能去粗取精、去伪存真、由此及彼、由表及里,达到认识事物本质、揭示内在规律。 跨学科研究法 运用多学科的理论、方法和成果从整体上对某一课题进行综合研究的方法,也称“交叉研究法”。科学发展运动的规律表明,科学在高度分化中又高度综合,形成一个统一的整体。据有关专家统计,现在世界上有2000多种学科,而学科分化的趋势还在加剧,但同时各学科间的联系愈来愈紧密,在语言、方法和某些概念方面,有日益统一化的趋势。 个案研究法 个案研究法是认定研究对象中的某一特定对象,加以调查分析,弄清其特点及其形成过程的一种研究方法。个案研究有三种基本类型:(1)个人调查,即对组织中的某一个人进行调查研究;(2)团体调查,即对某个组织或团体进行调查研究;(3)问题调查,即对某个现象或问题进行调查研究。 功能分析法 功能分析法是社会科学用来分析社会现象的一种方法,是社会调查常用的分析方法之一。它通过说明社会现象怎样满足一个社会系统的需要(即具有怎样的功能)来解释社会现象。 数量研究法 数量研究法也称“统计分析法”和“定量分析法”,指通过对研究对象的规模、速度、范围、程度等数量关系的分析研究,认识和揭示事物间的相互关系、变化规律和发展趋势,借以达到对事物的正确解释和预测的一种研究方法。 模拟法(模型方法) 模拟法是先依照原型的主要特征,创设一个相似的模型,然后通过模型来间接研究原型的一种形容方法。根据模型和原型之间的相似关系,模拟法可分为物理模拟和数学模拟两种。 探索性研究法 探索性研究法是高层次的科学研究活动。它是用已知的信息,探索、创造新知识,产生出新颖而独特的成果或产品。 信息研究方法 信息研究方法是利用信息来研究系统功能的一种科学研究方法。美国数学、通讯工程师、生理学家维纳认为,客观世界有一种普遍的联系,即信息联系。当前,正处在“信息革命”的新时代,有大量的信息资源,可以开发利用。信息方法就是根据信息论、系统论、控制论的原理,通过对信息的收集、传递、加工和整理获得知识,并应用于实践,以实现新的目标。信息方法是一种新的科研方法,它以信息来研究系统功能,揭示事物的更深一层次的规律,帮助人们提高和掌握运用规律的能力。 经验总结法 经验总结法是通过对实践活动中的具体情况,进行归纳与分析,使之系统化、理论化,上升为经验的一种方法。总结推广先进经验是人类历史上长期运用的较为行之有效的领导方法之一。 描述性研究法 描述性研究法是一种简单的研究方法,它将已有的现象、规律和理论通过自己的理解和验证,给予叙述并解释出来。它是对各种理论的一般叙述,更多的是解释别人的论证,但在科学研究中是必不可少的。它能定向地提出问题,揭示弊端,描述现象,介绍经验,它有利于普及工作,它的实例很多,有带揭示性的多种情况的调查;有对实际问题的说明;也有对某些现状的看法等。 数学方法 数学方法就是在撇开研究对象的其他一切特性的情况下,用数学工具对研究对象进行一系列量的处理,从而作出正确的说明和判断,得到以数字形式表述的成果。科学研究的对象是质和量的统一体,它们的质和量是紧密联系,质变和量变是互相制约的。要达到真正的科学认识,不仅要研究质的规定性,还必须重视对它们的量进行考察和分析,以便更准确地认识研究对象的本质特性。数学方法主要有统计处理和模糊数学分析方法。 思维方法 思维方法是人们正确进行思维和准确表达思想的重要工具,在科学研究中最常用的科学思维方法包括归纳演绎、类比推理、抽象概括、思辩想象、分析综合等,它对于一切科学研究都具有普遍的指导意义。 系统科学方法 20世纪,系统论、控制论、信息论等横向科学的迅猛发展,为发展综合思维方式提供了有力的手段,使科学研究方法不断地完善。而以系统论方法、控制论方法和信息论方法为代表的系统科学方法,又为人类的科学认识提供了强有力的主观手段。它不仅突破了传统方法的局限性,而且深刻地改变了科学方法论的体系。这些新的方法,既可以作为经验方法,作为获得感性材料的方法来使用,也可以作为理论方法,作为分析感性材料上升到理性认识的方法来使用,而且作为后者的作用比前者更加明显。它们适用于科学认识的各个阶段,因此,我们称其为系统科学方法。
【争鸣与探讨】 全国第四轮学科评估方案中的科研评价部分,特别是“A类期刊”的增列与取消,一时成为热议话题。事实上,科研评价是世界性难题,最近几年,国际学术界提出了科研评价方面的两个“宣言”——“莱顿宣言”和“旧金山宣言”。放在世界的范围内,如何看待这次学科评估中某些新鲜尝试呢?有哪些可取之处和不足之处?“A类期刊”的取消不意味着相应的探索和思考也被取消。 “莱顿宣言”纠偏“量化至上” “莱顿宣言”(The Leiden Manifesto for research metrics)的提出源于2014年在荷兰莱顿召开的一次国际会议,美国佐治亚理工学院的公共政策教授Diana Hicks等提出了合理利用科学评价指标的七条原则,后来扩充为十条,并于2015年4月发表在《自然》杂志上。 “莱顿宣言”的十条原则,简言之,第一,量化评估应当支撑质化的专家评估,而不是取而代之;第二,衡量绩效应基于机构、团队和个人的科研使命;第三,保护卓越的本地化的相关研究;第四,保持数据采集和分析过程的公开、透明和简单;第五,允许被评估者验证数据和分析;第六,考虑发表和引用的学科差异;第七,对个人研究的评价应基于其综合作品的质性评价;第八,应避免评估指标的不当的具体性和虚假的精确性;第九,识别认清评价指标对科研系统的影响;第十,定期审查评价指标并加以改进。 按笔者的理解,这十大原则可以归为四个方面。 第一方面,即总的原则是:基于指标的量化评估是第二位的,是辅助性的,而同行评价的质性评估是第一位,是主导性的。量化指标可以降低同行评价中的偏见,促进更加深入的审议,提高同行评价的质量,但量化指标不应取代评估者基于充分信息基础上的判断。评估者仍然需要对其评估负责,而不是完全让“数据说话”了事(第一条原则)。所以,“莱顿宣言”并不提倡科研评价要用量化指标,更不提倡把量化指标作为主导甚至是唯一指标。“莱顿宣言”只是说在用到起辅助作用的量化指标时需要注意的一些原则。 第二方面,在总的原则指导下,运用科研评价指标做具体评价工作时的下位原则,即要充分考虑科研活动本身是创造性的、个性化的、独特性的等特点,所以需要在评价过程中特别注意科研活动的使命的差异(第二条原则)、地域性的差异(第三条原则)、学科性的差异(第六条原则)、个体性的差异(第七条原则)。这些差异容易被量化指标遮蔽,所以需要在评价中采用综合计量或者质性评估办法。 第三方面,关于科研评价指标的具体数据采集和分析的要求,要公开透明(第四条原则)、可以复核验证(第五条原则)。 第四方面,对科研评价指标的态度,要理解实质内涵(第八条原则)、警惕负面影响(第九条原则)、不断改进完善(第十条原则)。 “莱顿宣言”每一条都内涵丰富,指向明确。与之对比,可以发现,我国科学评价工作还大有改进空间。 “旧金山宣言”纠偏“以刊评文” “旧金山宣言”(The San Francisco Declaration on Research Assessment,DORA)的提出源于2012年12月美国细胞生物学学会年会期间,一些学术期刊的编辑和出版者提出关于科研评价的建议,在此基础上形成了“旧金山宣言”,2013年5月,78个科学组织的155位科学家签署了这份宣言。“旧金山宣言”引发了世界科学界的广泛关注,《科学》杂志撰写社论支持“旧金山宣言”,认为影响因子最重要的危害是可能妨碍创新,它引导科学家关注发高影响因子的文章,追逐所谓的“热点”,而不是潜心科研创新。 “旧金山宣言”并不像“莱顿宣言”那样包含相当宽泛的内容,它只是针对期刊的计量指标(主要是期刊影响因子)而提出的,呼吁科学界停止使用期刊影响因子来评价科学家及其工作。内容包括总体建议以及对资助机构、研究机构、出版机构、计量指标提供机构以及科研人员的建议,共计18条。总体建议是:“停止使用期刊影响因子等期刊计量指标作为替代指标,来评价单个研究论文或学者个体的贡献,或者是作为聘用、晋升、资助等方面的依据。”其他区分对象的建议都是围绕着总建议展开的。 期刊影响因子是20世纪50年代由汤姆森路透公司开发出来的,其最初提出的目的是为帮助图书馆评估和挑选决定订购哪种期刊,但是现在影响因子已经被广泛应用于评价个人和研究机构的水平和贡献。期刊影响因子的含义是某期刊前两年发表的论文在统计当年的被引用总次数除以该期刊在前两年内发表的论文总数。可见它只是期刊的评价指标,并非科研工作本身的评价指标,影响因子不具有对学术质量精确评价的功能,所以不能单凭影响因子就断言论文优劣。“旧金山宣言”倡导的就是评估科研工作要回归到科研工作本身的价值中去,而不是基于刊载的期刊。 “A类期刊”弊大于利 回到开篇的话题。客观地讲,这次学科评估方案在完善科研评价方面积极探索,其价值取向和工作方向与“莱顿宣言”所倡导的内容是比较契合的。比如在评估方案和相关说明中,提出“学术论文质量”采用“三结合”评价组合。一是坚持质量与数量相结合,采用代表性论文,在“比总量”与“比人均”之间找到平衡点;二是坚持主观与客观相结合,通过量化指标统计进行客观评价外,还通过“代表性论文”进行专家主观评价;三是坚持国内与国外相结合,要求包含一定比例的中文期刊,强化中国论文评价话语权。这背后的指导思想都是“莱顿宣言”提倡的摒弃“唯量化指标论”,采用更加综合的评价方式。 “莱顿宣言”的第三条原则特别提到,要保护卓越的本地化的研究。研究的卓越不等同于在国际期刊上发表英文论文。一些偏重于本国或者区域性的课题的研究,往往并不被知名的英文期刊所青睐。“只有基于高质量的本地语言期刊的指标才能正确评价和推动卓越的本地化的研究。”这高度契合了这次评估中强化国内研究论文地位的思想。 但“A类期刊”的取消仍有许多值得反思和总结的地方。无论如何,“A类期刊”的设定其本质依然是“以刊评文”,这是“旧金山宣言”所明确反对的。“以刊定质”,而不是用学术质量本身来评价科学研究,已经日益遭到越来越多人的反思、质疑、批评和抵制,这个时候又祭出这杆大旗,似有逆向而动之嫌。真正需要下功夫的是如何在同行评价和代表作评价方面拿出切实可行的操作办法,而不是继续在“看刊物、数数量”的道路上越走越远,那样只能带来更多的浮躁。更为重要的是,教育行政部门在主导此事,其“指挥棒的力量”不会随评估结束而结束,而会长久发挥作用。量化指标的推出在世界范围内几乎都是“民间”行为,鲜见教育行政部门直接推动设立。无论是从“管办评分离”“放管服”的角度,还是从落实创新发展理念、推进“两个一流建设”的角度,推出“A类期刊”都是弊大于利。
教育论文可分为一般论文和特殊论文两类,两类论文有其不同特征。但两类论文的撰写,实质上都是提出问题、分析(或陈述)问题、解决(或回答)问题的过程。据此,我们可以探讨两类论文共同的评价标准。对教育论文的评价,一般认为有五个评价标准。这五个评价标准有其特定的内涵,它们是评价一篇教育论文是否优良的基本依据。 关键词:两类论文;解决(或回答)问题;评价标准 怎样写好一篇论文常常与如何评价一篇论文有关,因为值得了论文的评价标准,实际上也就大致知道了写好一篇论文的方向和要求。 一 教育论文可分为两大类:一类是一般学术探讨文章,另一类是特殊研究报告。两类论文各具不同的特征。 一般学术探讨文章俗称“议论文”,是思辨性研究论文。这类教育论文的文体结构灵活多变,它主要依据研究者已有的知识经验积累和现成的文献资料就可写成,无须进行系统的专门的研究行动。我国教育期刊上发表的大多是此类论文。思辨性论文以理论分析和逻辑证明为其基本特征,在内容上,注重观点创新、理论深度和学术研讨;在方法上,常用因果分析、矛盾分析、历史分析、比较分析、结构功能分析、归纳与演绎、分析与综合、科学抽象等定性分析法;在行文上,重论述轻叙述,重考证轻实证,重文献注释轻图表统计,重理论推理轻实践检验。 特殊研究报告大多是实证性研究论文,这类教育论文包括教育实验报告、调查报告、经验总结报告、行动研究报告、观察研究报告、个案研究报告等。之所以称为“特殊论文”,是因为这些研究报告的文体有其独特的结构模式。例如,实验研究报告的结构模式为:①报告的题目;②问题的提出;③研究方法;④实验的结果;③讨论与结论;⑥参考资料。一般而言,实证性研究的文体结构严谨,表述规范,格式相对固定,具有“应用文”文体的某些要求,在大多数情况下,研究者需经历一定的研究行动或研究实践才能完成。这类论文以检验假设、证实理论判断,或获得经验体会为主要特征。在行文上,一般先陈述研究背景、研究价值、研究目的或假设,有关变量、研究过程和方法,然后,重点陈述研究结果,并对所得到的结果进行分析讨论,指出新发现的情况和问题,最后,针对所得的研究结果,回答对理论假设的检验情况和是否达到研究目的、解决了研究问题,或陈述研究者的见解,也可提出进一步探讨的问题和建议。必须注意的是,对研究问题、变量、过程与方法的陈述,要清晰、准确,简明扼要;对研究结果的描述和解释要客观、平实,条理清楚;讨论问题应以客观事实为依据,采用科学的语体,恰如其分地阐析和评价;作结论应全面归纳、高度概括。 虽然上述两类论文的特征有异,但由于教育研究过程实质上都是提出问题、陈述问题或分析问题、解决问题或回答问题的过程,两类论文的撰写大致按此过程展开,因此两类论文的评价标准也有共性。 二 1974年出版的《美国心理学会出版手册》(第二版)规定了心理学研究论文的格式和写作方式。这一手册已成为心理学杂志发表论文报告的标准。据有关研究,心理学论文与研究报告的评价有如下8条标准: 1具有一个或多个具有理论意义的新结果;2研究结果具有重要的实际意义和可应用性;3论文构思新异,或者以新方式说明老问题;4研究结果的解释明确合理;5论文以简明方式综合了新的研究数据;6论文指出了先前所持的某种理论观点的问题或局限;7研究有明确的研究图式、思路或者实验(或实践)操作;8所报告的结果或理论具有普遍性。 这八条标准中,突出了对研究结果的评价标准(见第1、2、4、8条),注重论文的创新性(见第1、3、5、6条)以及应用性和推广性(见第2、8条),此外,还重视论文的思路、价值、以往研究探讨、研究方法、数据资料、结果的解释等问题的评价。《美国心理学会手册》建议,在第一稿写好后,应让与自己意见不同的人来阅读和评价,而不应只让“朋友”来评定,这样才会更容易发现问题或错误。文章还要注意书写整洁和段落分明,这样会使论文阅读效果更好。 根据美国心理学会对论文和研究报告的规定和要求,一篇优良的心理学论文或研究报告,大致应回答五个基本问题: 1你研究什么问题?2你为什么要研究这个课题?3你用什么方法去研究?4你的研究有什么创新?5你如何解释发现的问题? 我们认为,如果将这五条评价标准赋予不同的内涵(即赋予教育论文评价方面的具体要求),那么,这五条标准也可作为评价一篇教育论文的标准。达五条标准以“问题”为出发点和归结,以逐步回答问题为主线,体现了一般的教育论文和特殊的教育研究报告所共同具备的“提出问题——分析问题——解决或回答问题”这一基本研究过程。作者试图根据教育研究的情况,对上述五个评价标准的内涵作进一步阐释。 (一)你研究什么问题 研究以问题为诱因和起点,评价一篇教育论文的优劣,首先要判断研究者对研究问题的陈述是否明晰和具体。有经验的研究者,一般根据研究课题的内涵和课题领域的实际,去确定具体的研究问题和内容,进而确定论文的体系结构。一篇论文要探讨的具体问题以3至6个为宜,对每一个研究问题都要明确研究什么内容。要判断这些问题中哪些问题别人已经解决了、哪些是人们尚未解决且亟待解决的问题、这些问题是否具有“探讨性”、是否需要我们花时间和精力去研究。研究问题的提出,角度要新,要有深度、有启发性,有进一步思考和探索的价值。还要清晰认识问题的重点、关键和难点,明确解决问题的突破口。每个研究问题的组合和排序,要显示一定的逻辑结构和理论框架,应具备完整性和严密性。 (二)你为什么要研究这个课题 评价一篇教育论文的质量时,还要看论文选题的背景、意义和价值。选题的水平,主要表现在课题的社会实践意义和理论建树价值。要判断该课题的研究成果,对人类社会发展、学科建设,对个体的生活、工作和学习可能产生的贡献。作为评价者,主要是通过通读全文后的反思,综合分析研究成果的作用和价值,来判断作者研究这个课题的必要性。 (三)你用什么方法去研究 在特殊研究报告中,通过分析研究方法的适宜性、科学性和规范性,可判断所获得的研究结果是否可靠,因此要重视研究方法的评价。在教育调查论文和教育实验报告中常常用专门一部分或一段文字叙述所使用的研究方法及其运用过程,目的是让读者分析和判断该课题所使用的研究方法的适合性和科学性,从而判断所获得的研究结果是否可靠,进而考虑是否接受研究者所得出的研究结论。 在许多学术论文中,虽然没有对研究方法进行专门的阐述,但常常关注论文的研究视角和思路,这也属研究方法问题。在学术研究中,有时探讨问题的视角和切入点往往决定一篇论文的成败。只有思维方法正确,才能把研究问题引入讨论和深化。思维方法独特,还可以导致问题创新。 (四)你的研究有什么创新 论文的创新性是评价一篇论文水平高低的核心和重点。在实证研究中的新发现和新见解,在思辨研究中的新论点和独到的分析,甚至所用的研究方法和新的研究思路,均可视为论文的创新性。评价论文的创新性可有如下几种方法。 1根据论文中的文献述评。探讨以往有关文献,可发现该课题的研究基础和新起点,从而判断研究的突破口和创新点,区别哪些内容是已有的研究成果、哪些内容是创新成果、哪些内容是在别人研究基础上进一步的完善和深化的成果。 2根据研究结果。在特殊研究报告中,研究结果往往包含研究者的新发现,研究结果越丰富,研究者的新发现可能就多。重要发现会使人眼前一亮。一般学术论文,则要根据作者的理论观点去判断其创新性。 3根据论文中的明确表述,结合评价者的知识经验。通过论文中“摘要”、“分析”和“结论”等判断论文的新观点、新见解和新结论,在行文中常用“我们认为……”、“我们的结论是……”等字样。但必须指出,有的论文作者自认为是他们的新观点和独到见解,但实际上并不是什么新东西。因此,需对课题领域有较深入的了解和研究,并结合评价者的知识经验才能作出正确的判断。 (五)你如何解释发现的问题 对特殊研究报告的评价,评价的重点是论文是否对研究结果进行了深入的分析和讨论,在分析讨论研究结果时,是否结合研究者所掌握的有关情况,拓宽研究视野,是否对检验假设的情况能作恰当的解释,对新情况新问题作出合适的说明。 对一般学术论文的评价,主要看分析问题是否有深度,对现象的描述是否准确,对事件的评价是否恰如其分,对观点的论述是否注意理论联系实际等。无论何种教育论文,都要求观点鲜明、正确,有说服力;解释或论述具有逻辑性、条理性、层次性和完整性。 总之,评价一篇教育论文一般应从问题陈述、选题意义、研究方法、研究创新、分析深度、文章的结构和文字表达等方面去评价。重点是看研究课题的价值和研究者是否正确地解决了研究问题,或解决问题过程是否包含着创造性,是否达到研究目的。
评价科技期刊的影响力主要指标是该期刊的影响因子。为查询科技期刊的影响,可以进入中国知网,在首页右上角,点击“出版物检索”。点击期刊名称,进入期刊详细信息页面。在这个信息页面可以看到该科技期刊的影响因子。影响因子在一定程度上代表了该期刊的影响力,数据库收录可以判断该期刊是否属于SCI、EI,是否属于核心期刊。影响因子:科学期刊的影响因子是一种测度期刊有用性和显示度的指标,而且也是测度期刊的学术水平,乃至论文质量的重要指标。影响因子是一个相对统计量。科技期刊在第N年的影响因子计算方法为:分母 = N-1年与N-2年该期刊发表的总论文数;分子 = 分母中的论文在第N年被引用的次数。一般认为影响因子在5以上即为优秀期刊,10以上为顶级期刊。以上内容参考:百度百科——影响因子