中国社会科学院的“社会科学成果评估体系”
鉴于以上存在的问题,我建议参照中国社会科学院的一些研究所采用“社会科学成果评估指标体系”[2],对学术论文进行较为科学的评估。若了解了其结构要素,我们在写作论文时就会有一种学术标准进行自我衡量,以保证论文至少像个论文,多少有些创造性。
社会科学成果评估体系是由一系列指标构成的。首先考察论文的规范性。这里的规范性,不仅指引证的规范,而是指研究者对研究资料的占有、分析深度、遵循学术引证规则这三方面的情况如何。是否充分占有资料,这本身就是论文的最大规范问题。不充分占有资料,特别是不占有最新的资料,无法保证观点的创造性,有些结论可能是许多年前就已经有的了;或者造成论文低水平的重复。这种情况下当然仍旧可以写上许多话,但这无论如何算不上有水平的论文。
这三方面的论文“规范”,从一开始就将那些不占有研究资料而拍拍脑子随意想出若干“××性”,或随意地从个别事例推出整体的文章,从学术论文中予以排除。资料的占有和分析,实质上是要求对前人的研究成果有所了解,或对现实有所了解,防止研究者因某些局限而忽略必要的事实,疏漏某些可能的逻辑关系。当然,这些关于论文的规范性考察,并不等于论文就具有科学性了,但是它会影响到论文结论的科学性;而且,规范的论文也能够为后来的研究者提供较为清晰的学术发展脉路。
第二,对论文的难度作出评估。假如第一关过了,可以认定算是学术论文了,那么马上就面临第二个问题,即这篇论文实际付出的精力有多大?一般地说,付出精力大的研究,其成果的质量也较高。这里的指标有两项,一是论文的规模,一是论文的复杂程度。
这里的“规模”,不是指参与人数的多少,而是指研究本身所要操作的概念、事实要素或实证研究中的变量等的多少。需要处理的因素越多,规模越大;反之越小。这是考察作者研究能力的一种指标,并非文章越长规模越大。有时一篇论文并不长,但是需要很多论据,必须论证得当,它的规模就属于较大一类。例如关于北京“新疆村”的研究论文,涉及人口、经营规模、材料来源、语言和文化生活、社会管理系统、雇佣关系、同胞关系、家庭、生育、宗教、民族政策、法治、饮食等等,必须处理这样多的因素。因此,可以认定该项研究的规模较大。
这里的“复杂程度”,不是指涉及面大(有些选题涉及面较宽,但是逻辑关系简单,分析起来并不困难),而是指需要处理的因素之间逻辑关系复杂。有些看起来不大的选题,如果其中要说明的各种关系较难把握,那么应当说其复杂程度较高。例如“我国的地下色情产业”这个社会学选题,它似乎算不上重大选题,但是真正研究起来,要处理的各种因素间的关系非常复杂。关系越复杂,需要运用的知识量、知识深度、研究能力等的要求就越高。
第三,对论文的研究成份进行评估。一篇论文,不一定完全是研究性的,有些成份属于是在普及某些知识,或者仅仅提供了一些资料。根据智力对材料加工程度的差异,研究性质成份是指论文中提供了新的认识的那部分。
因此,需要先对论文的研究成份的多少下一个判定,这里提供了四种选择:25%、50%、75%、100%。看来还是简单了些,但重要的不是划分研究成份占多少的讨论,而是要在观念上学会区分研究、普及、资料这三种不同的成份,努力使自己的论文增大研究成份。一般地说,硕士论文如果有50%属于研究成份,可算是相当不错的了。这里需要说明:并非只要属于研究成份就好,同样属于研究成份的部分,水平高低差异很大,这里还要有其他的衡量标准。
第四,考察论文的科学性,即可靠性。这需要根据对论文研究性、普及性和资料性成份所作的划分,分别评估。如果确定成果全部或部分属于研究类,就要首先对成果研究部分的科学性进行评估。这里有五项标准。
1,基本理论依据或前提的可靠性。提出这一对论文的基本要求,在于经常存在这样的情况:论文中具体概念没有发现不成立,论据也颇有力,论证不能说不严密,方法也有效,但是由于理论前提不可靠,实际上一切皆不能成立。例如若有人提出“太阳黑子活动决定经济发展”的假设,这完全可以通过计量经济分析证明该假设成立,而且在统计学上确有明显性。但是这在经济学方法论上是完全错误的,错就错在没有可靠的理论前提。