“差评”研究生学位论文主要特点鉴别

来源：论文查重 时间：2019-09-23 15:13:17

摘要：选取s大学2017届411份“差评”研究生学位论文盲审专家评阅意见，采用质性研究词频统计方法及文献编码方法 分析“差评”论文评阅意见。发现其主要存在研究主题不明确、逻辑结构混乱、论证分析方法不当、结论不实与建议泛化、写作 不规范、写作态度不端正、创新性缺乏等七个特征。并进一步将七个特征归结为对研究生学位论文学科性、规范性、学理型、 实用性、创新性的要求。既为学位论文过程管理中鉴别“差评”学位论文提供了参考，也为优化学位论文质量评价体系提供了 新思路和新方法。
关键词：差评：研究生；学位论文查重
一、问题的提出
质量标准与社会需求紧密相关，研究生教育质量是社会 各界对高校培养研究生“量”的要求及“质”的要求。有数据 显示2016年，我国在校研究生总规模达1981051人，博士研 究生在校生数达342027人，硕士研究生在校生数达1639024 人…。在庞大的数量基础上，协调数量与质量的矛盾，确保 研究生教育质量稳步提升，已成为新时代研究生教育的主要 问题。撰写学位论文可检验研究生对专业领域理论知识及 实践技能的掌握程度，综合反映研究生独立从事科研工作的 能力。袁本涛等人认为，研究生教育质量包括狭义与广义两 个方面，狭义的研究生教育质量就是指研究生的学位论文质 量心]。常思亮和何维雄将研究生学位论文优良率作为反映 研究生教育质量效率的重要指标。为保障研究生学位论 文质量，2014年政府管理部门制定了《学位授予单位研究生 教育质量保证体系建设基本规范》，其中明确规定要健全研 究生学位论文质量过程管理机制。国内关于研究生教育质 量研究较多，但对研究生学位论文质量研究尤其是定量研究 的很少。因此开展研究生学位论文质量定量研究，对学位论 文过程管理具有重要的理论价值和现实意义。
文献计量领域专家安东尼·拉昌(Anthony F．J．VaIl R阳n)指出，同行评价是评价文献质量的主要途径Hj。梁帅 等人认为，基于同行评议的专家评审意见是学术论文最原 始、最直接、最全面的质量认定∞J。李敏等人认为，专家评阅 意见能直观且详细地反映专家对所评论文学术水平的综合判断，具有丰富的信息量和重要的参考价值∞J。盲审专家是 研究生学位论文质量的“把关者”，评审意见也是最能反映论 文质量的材料。研究生学位论文管理相关条例明确规定了 学位论文同行评审须采用盲审手段，即不透露研究生个人信 息及导师相关信息，因此良好地保证了评审过程的公正性。 评阅意见具有很强的问题导向性，能够聚焦到研究生学位论 文的各种细节问题上，反映评阅专家最关注的问题、研究生 学位论文的主要特点、提高研究生学位论文质量的方向等三 个信息。故笔者从“差评”研究生学位论文盲审评阅意见出 发，深层次分析专家评语，鉴别与分析“差评”研究生学位论 文主要问题，为学位论文过程管理中鉴别“差评”论文提供参 考，进而提升研究生学位论文质量。
二、研究设计
(一)研究对象
“差评”论文是指同行专家盲审意见总体评价等级为 “C”及“D”的论文。研究选取S大学2017年所有“差评”研 究生学位论文作为研究对象，共有41l份“差评”论文的评阅 意见(共计11万余字)，涉及哲学、经济学、法学、教育学、文 学、理学、工学、农学、医学、管理学、艺术学等11个学科、99 个专业。S大学为我国中部地区“211工程”及“双一流”学 科建设高校，研究生学位论文送审专家均为校外“211” “985”高校本学科领域的专家。本研究得到s大学研究生院 的支持，原始论文评阅意见书均从该校研究生信息管理系统 获得，故研究资料具有代表性和权威性。
(二)研究方法
1．词频分析方法
字词是文本最基本的意义单元，统计文本中用词的频 次，可以反映与文本主题相关方面的趋势和特点l 7【。研究采 用词频分析方法，借助P”hon语言的jieba模块，选择精确模 式进行词汇切分旧J。提取评阅专家在评阅意见中提及频次 最高词汇，以反映评阅专家最关注的问题。P)rthon语言需要 一定的计算机语言基础，但较传统分词工具有快速、精准及 可定制化特点。具体操作如下：
一是对文本资料进行预处理，保存为Python可读取的编 码形式为U，11F'一8的TXT文档。
二是借助jieba模块进行精确分词，并去除与论文质量 不存在直接关联的词汇以及停用词、英文、数字、特殊符号 等，并将表达意思相近的词汇合并。
三是将所得结果写入Excel中，并利用Excel绘制图表。 词频分析可反映专家评阅研究生学位论文时最为关注 的问题，初步展现“差评”学位论文的整体特点，给予研究者 宏观方向的引导。
2．文献编码方法
仅仅采用词频统计方法分析，结果太过粗略，既无法深 入挖掘研究生学位论文存在的微观问题，也难以反映各种问 题之间的逻辑关联，故还需借助文献编码方法，细化词频分 析结果。研究借助澳大利亚QsR公司设计开发的质性研究 软件Nviv010．0进行编码分析，鉴别“差评”研究生学位论文 的主要特点。研究步骤如下：
一是将硕士学位论文评阅意见按所属学科分别归类命 名，分为1l份文档。由于博士学位论文评阅意见样本量较 少，故单独为1份文档，共计12份文档，即12个材料来源。 将论文评阅意见转化为Nviv010．0可读取的word文档形式， 并将文档导人到软件中。
二是对评阅意见逐句逐段浏览编码，倘若一段话中包含 多个概念，则分别标记到相应的节点，在编码过程中不断调 整节点关系最终确定研究框架。
三是利用Nviv010．o绘制相应图形，将图形及编码统计 结果导入Excel中。
节点确定的依据有两个方面：一是词频分析结果。词频 分析结果反映了评阅专家在撰写评语中提及次数最多的词 汇，可以推断出研究生学位论文存在的主要问题集中在这些 方面。二是s大学研究生学位论文评价指标体系。该指标 体系是相关专家经过多次修改而成，博士研究生和硕士研究 生学位论文评价指标大致相同，具有科学性及可行性。
三、结果与分析
(一)结果统计
1．数据基本情况统计
对41 1份“差评”论文分布情况进行描述性分析，结果分 布在表l中。具体包括硕士研究生374份，其中361份总体 评价等级为c，13份总体评价等级为D；博士研究生37份， 其中29份总体评价等级为c，8份总体评价等级为D。各学 科“差评”学位论文的数量从高到低依次是教育学131份、艺 术学77份、法学62份、文学42份、理学37份、管理学27份、 工学16份、哲学1l份、医学4份、经济学3份、农学l份。
S大学共送审2017届研究生论文2721份，总“差评”率 为15．10％。各学科送审数量具体包括哲学42份、经济学69 份、法学363份、教育学709份、文学333份、理学482份、工 学51份、农学4份、医学17l份、管理学195份、艺术学302 份。论文“差评”率从高到低依次是工学(31．37％)、哲学 (26．19％)、艺术学(25．50％)、农学(25．00％)、教育学 (18．48％)、法学(17．08％)、管理学(13．85％)、文学 (12．61％)、理学(7．68％)、经济学(4．35％)、医学 (2．34％)，见表1。
2．词频结果统计
借鉴孙清兰提出的高频词与低频词临界值计算公式， n=√D，n为临界值，D为词汇总数归J。通过jieba模块分词 处理，共出现2610个词汇，√2610=51．09，故得出高频词与 低频词临界值为51，即频次大于51的词汇为高频词。将表 达意思相同的词汇合并，得出18个高频词(具体见图1)。 从高到低依次是写作规范520次、研究方法449次、语言表 达401次、论文题目383、论证375次、参考文献330次、逻辑 277次、对策与建议266次、理论基础206次、结论139次、研 究意义131次、摘要128次、研究设计105次、文献综述101 次、概念94次、创新性93次、结果93次、观点68次。其结果 表明，评阅专家对研究生学位论文的写作规范、研究方法、参 考文献、逻辑与结构、结论与建议、创新性等问题关注较多。
3．编码结果统计
在反复研读论文评阅书的基础上，结合词频分析结果及 s大学研究生学位论文评价指标体系，经过多次讨论和修改 形成编码的一级节点和二级节点，三级节点直接引用评阅意 见中的文字，将表达意思相近的语句进行整合，形成11个一级节点、23个二级节点和l 18个三级节点(由于篇幅原因不 在文中一一列举)。11个一级节点具体是论文题目不当、文 献综述失范、逻辑结构混乱、研究设计随意、论证分析薄弱、 核心概念模糊、结论与建议不实、写作态度不端正、写作不规 范、内容缺乏新意、缺乏创新成果(见表2)。
编码结果细化了词频统计结果，使“差评”研究生学位论 文特征更加清晰。评阅意见共编码1417次。其中：第一， “写作不规范”的编码次数最高，共编码473次，其下属二级 节点“格式排版不规范”共编码267次，在所有二级节点中编 码次数最高，占18．84％；第二，“逻辑结构混乱”编码288次， 其二级节点“层次逻辑凌乱”编码次数为229次，在所有二级 节点中编码次数排第2位，占16．16％；第三，“研究设计随 意”编码178次，其二级节点“研究方法失当”编码141次，在 所有二级节点中编码次数排第3位，占9．95％；第四，“写作 态度不端正”编码次数较少，共编码23次，其中包括“工作量 不足”编码15次，占1．06％，“学术不端”8次，占O．56％；第 五，“缺乏创新成果”编码9次，占比最少。
(二)特点分析
1．研究主题不明确
确定研究主题是学位论文撰写的“第一步”，研究主题的 确定需经历从发现问题到确定研究对象边界，再从确定研究 对象边界到主题解释与意义反思，这是一个不断调整的过 程。确定研究主题不仅需要考虑其可研究性，还需考虑其理 论意义与现实价值，并综合自身研究能力调整选题的宽度与 难度。“差评”论文研究主题不明确主要表现在以下四个方 面：
第一，研究假设缺乏或不合理。“研究假设随意”在二级 节点中编码lO次，表明部分论文随意提出带有强烈主观色 彩的研究假设，依据不充分，缺乏相关文献线索。有些“差 评”论文甚至没有研究假设，不知所论为何，缺乏问题意识。
第二，研究对象不清晰。它在二级节点中编码27次，主 要包括论文中的研究对象不清晰不突出，研究对象不符合题 目的范围。例如，评阅专家在评阅某篇管理学论文中提出： “社会工作职业社会认同度到底是指谁对社会工作职业的认 同度?该文并没有明确也没有区分认同的对象，但这个问题 在这项研究中很重要。”
第三，论文题目不当。“论文题目”在词频统计中出现 383次，排在高频词的第4位。在文献编码中“论文题目不 当”共编码72次，其中“论文选题不当”编码14次，“章节标 题不当”编码58次。论文选题不当主要表现在：一是选题太 宽泛，指向性差，文章浮于表面缺乏理论深度；二是选题陈 旧，重复研究现象严重，缺乏新的理论意义和实践意义；三是 论文选题与作者所学专业不符，作者对论文选题的学科专业 界限缺乏了解。例如，某篇行政管理专业论文的专家评阅书 指出：“Xx市两型社会发展的问题与对策似乎属于行政管理 专业之外的选题，故本选题需要做较大调整与修改。建议作 者以行政管理专业领域研究的问题作为论文选题的出发点 与最终归宿，以行政管理专业的学术话语体系及理论基础作 为论文依据”；另外，论文题目的问题还包括“章节标题不 当”，表现在章节标题不明确、模糊，没有凝练和概括文章的 内容及作者的观点，甚至出现论文总题目与章、节标题相同 以及章与节的标题相同的现象。例如，某篇法学专业的论文 专家评阅意见指出：“我国检察机关行政公益诉权的现状及 问题标题不够明确，我国检察机关行政公益诉权有什么问 题，理论问题还是制度问题?保护问题还是实施问题?下面 内容也不够明确。”
第四，核心概念模糊。核心概念是论文的“导向标”，界 定核心概念的过程即明确研究主题方向的过程。在词频统 计中，“概念”出现94次，排在高频词的第14位。在文献编 码中，“核心概念模糊”共编码67次，其中“概念界定模糊”编码41次，“偷换概念”编码26次。“差评”论文中核心概念 问题表现在：一是没有界定核心概念或者界定不清。有的作 者做论文时根本无核心概念的意识，缺乏对核心概念的把握 在研究中重要性的认识。例如，专家评阅对某篇体育人文社 会学专业论文的意见：“作者对于核心概念界定过于含糊，这 是由于作者本身对于‘正义’的概念认知不明确。”二是概念 偷换，或者随意扩大或压缩核心概念的内涵与外延。例如， 《xxx视觉符号在淄博日用瓷中的设计研究》一文的评阅意 见指出：“文中所提的研究对象是淄博的陶瓷行业，而非淄博 日用瓷的设计。”再如，《xxx羽毛球私教的优化发展研究》 一文将“xxx羽毛球私教的优化发展等同于长沙市羽毛球 私教的发展现状”。
2．逻辑结构混乱
清晰的逻辑结构是学位论文最基本的要求，而逻辑结构 (包括顺序逻辑和层次逻辑)混乱是“差评”论文最主要的特 点之一。“逻辑”在词频统计中出现277次，排在高频词 的第7位。在文献编码中“逻辑结构混乱”共编码288次，其 中“顺序逻辑杂乱”编码59次，“层次逻辑凌乱”编码229次。 值得注意的是“层次逻辑凌乱”编码次数，在所有二级节点中 排第2位。
第一，“差评”论文的“顺序逻辑杂乱”，表现在文章结构 顺序安排没有严格按照研究设计进行，部分重要章节缺失或 为了拼凑字数画蛇添足导致结构冗余。例如，专家评阅某学 科教学(思政)硕士学位论文时指出：“第一章的第三节是初 中思想品德个性化课堂教学的组织原则，出场太早，在论文 开始就找到解决问题的基本原则了，不合逻辑。”
第二，“差评”论文的“层次逻辑凌乱”，表现在文章观点 前后矛盾，前后章节彼此割裂，文章的内容和文章标题处于 相互独立状态即“两张皮”现象。例如，评阅专家指出某出版 专业硕士学位论文的逻辑问题：“在第三章第一节与下面的 第一个问题有逻辑上的矛盾。第一节一脉相承的编辑思想 与办刊理念。另起炉灶，坚持经典，一脉相承与另起炉灶是 相反的两回事。”
3．论证分析方法不当
论证分析即检验研究假设或观点是否合理的过程，观点 论证需要恰当的理论基础、合适的研究方法、足够材料的支 撑及严谨的论述分析。“论证”在词频统计中出现了375次， 排在高频词的第5位。“差评”论文论证分析存在的主要问 题包括：
第一，论证方法失当。方法是研究过程中的“利刃”，它 既是逻辑推理的需要，也是结果论证的需要…J。“研究方 法”在词频统计中出现了449次，排在高频词的第2位，“研 究方法失当”共编码141次。“差评”论文方法失当的问题具体包括：一是在文章引言中随意罗列多个研究方法，但文中 并未实际使用；二是不清楚具体研究方法的性质和使用范 围，也不顾论文主题和内容的性质，随意选用研究方法。例 如，某篇差评论文的评阅意见是“采用文献研究法，本论文不 是做文本解读，不可能实际也没有用此方法”；三是论证方法 使用不当，表现在诸多方面，如测量指标不合适、模型构建不 合理、问卷设计粗糙、信效度问题等，方法使用错误则会导致 文章结论的可信度降低，例如，评阅意见中有“实验方法存在 明显问题，这些问题让人质疑该文中采用方法的可靠性”；四 是论证方法单薄，突出表现为论证方法单一、验证过程缺乏 科学性、方法典型性及综合性不够等。
第二，论证材料贫乏。“论证材料贫乏”共编码35次，具 体表现为论文论证材料太少、缺乏一手数据或者论证材料陈 旧、庞杂适切性不强等。
第三，论述分析浅显。“论述分析浅显”编码102次，表 现为论文的理论分析不深入、未结合相关材料分析、论述偏 离了文章论点以及论述缺乏归纳总结等问题。例如，专家在 评阅某哲学专业论文时指出：“文章找不到几处像样的哲学 论证，更多看到的是资料的堆砌。”
第四，文献综述失范。“文献综述”在词频统计中出现 101次，排在高频词的第14位。“综述缺乏条理性”编码50 次，“文献评述不够”编码22次。文献综述失范具体表现在 四个方面：一是有的论文中没有文献综述内容；二是国外研 究现状综述内容过于简单，应付了事，不能反映现有研究状 况；三是文献综述偏离主题，与论文主题不符，或者把对实践 发展现象的综述作为对现有研究文献的综述；四是有的论文 单纯追求文献资料的堆砌，综述研究内容“多而杂乱”“多而 宽泛”，没有针对性；五是有的文献综述“述多评少”，甚至 “只述不评”。例如，专家评阅某人类学专业文章时指出： “该文章文献综述部分不够扎实，没有很好地总结和梳理，对 文献的评述部分更是薄弱，导致文章的结构较为松散。”
4．结论不实与建议泛化
研究不仅需要发现问题，分析原因，还需要针对问题提 出实际指导性的、落地的建议。差评论文的“对策与建议”在 高频词中排名第8位，共出现了266次，“结论”在词频统计 中出现139次，排在高频词的第10位。在编码分析中“结论 建议不实”共编码60次，包括二级节点“研究结论不实”38 次，“对策建议泛化”22次。“差评”论文的对策建议内容存 在的主要问题有以下两个方面：
第一，论文的研究结论凭空想象，缺乏足够证据，或结论 与文章主题毫无联系，部分论文中摘要所提结论与文中结尾 部分的结论完全不一致。
第二，大部分差评论文的对策建议没有与所论问题及原因形成相应的逻辑匹配，或者所提对策建议泛化，可操作性 不强，没有实际价值。例如，专家评阅某体育教育训练学专 业文章时指出：“研究目的是为了借鉴国外顶级球员战术特 点，启发和促进我国女子优秀球员的水平提升，而作者对建 议部分着力不够，没有提出相应的能够解决问题有价值的建 议。”
5．写作不规范
所有“差评”学位论文都出现了严重的写作不规范问题。 “写作规范”在词频统计中出现520次，排在高频词的第l 位，是专家提及次数最多的词汇。“写作不规范”共编码473 次，是评审专家所提意见最多的问题。这些问题主要表现在 四个方面：
第一，语言表达不规范，编码84次，“语言表达”被评阅 专家提及401次，排在高频词的第3位。表现为文中错别字 太多、语言重复I罗唆、语句不通说法不严谨、部分计算机专业 论文中出现大段代码等。
第二，目录、摘要及关键词等格式不规范。目录不规范 表现为部分论文目录与著作目录混用或与文章标题不一致； 摘要不规范表现为摘要未凝练出文章观点、与研究结论重 复、英文摘要与中文摘要不对应等；关键词不规范表现为关 键词缺失、关键词过长、关键词提取不准确等。
第三，参考文献和引文标注不规范。“引文标注不规范” 编码122次，“参考文献”在词频统计中出现330次，排在高 频词的第6位。有的作者未能区分注释和参考文献，分不清 夹注和脚注，有的文中对引用文献内容引文不做或者只做少 量注释。所有“差评”论文的参考文献的引文注释格式都不 规范。
第四，论文排版不规范，表现为图表编排不规范、表格未 严格按照规定格式进行编排、页面排版不美观、页码混乱或 缺少页码、字体错误、段落缩进错误等。例如，某评阅专家指 出：“建议作者在word中用全选模式，选取全文文字，然后选 择字体格式，把英文字体统一改成Times New Rom卸体，目 前论文的下载版本的英文是宋体格式。”
6．写作态度不端正
写作态度涵盖两个方面：一是科研工作量不足；二是学 术不端。“工作量不足”编码15次，“学术不端”编码8次。 论文“工作量不足”主要表现为文章内容单薄、前期准备 不足及文章硬伤太多等方面。部分学生急于升学就业导致 论文研究时间较短，文章中出现多处知识硬伤，甚至有评阅 专家指出：“建议作者按照学校要求重新学习专业课程。” 论文“学术不端”既是不尊重他人的研究成果，也是对自 身不负责任的表现，具体表现为随意伪造资料、篡改数据、抄 袭同级别论文、抄袭网络原话等。例如，评阅专家提到该文“抄袭嫌疑：论文的访谈设计的文字内容以及课堂观察的文 字几乎完全照抄了xxx的硕士论文第20页的内容，却没有 提及该文献来源。对测试的描述在文字上仍然有xXx的影 子”。又如，某位评阅专家提到：“对于XXX的相关研究具有 抄袭xxx大学硕士生论文《xxx参与程度的影响研究》的 重大嫌疑。”
7．创新性缺乏
当下是“大众创业、万众创新”的时代，研究生学位论文 创新受到了社会各界的关注。“创新”在高频词中排在第17 位，共出现93次；“创新性问题”共编码47次，其中，“内容缺 乏创新”38次，“缺乏创新成果”9次。论文创新性缺乏：一是 内容缺乏新意，包括观点缺乏新意、研究方法缺乏新意。表 现为一味依赖他人的研究思路、模仿他人的研究方法、对研 究主题未形成个人独特的见解等。例如，专家评阅教育学文 章提到：“文章创新不够表现在完全借鉴他人思路和方法，仅 是利用现有的模型和工具对数据进行分析和解释。”二是缺 乏创新成果。表现为工学及艺术学研究生毕业设计作品缺 乏新意、实用价值或艺术价值较低、博士研究生未发表与学 位论文相关的研究成果。例如，专家评阅室内设计相关文章 提到：“对于xx网络咖啡厅设计的研究与提炼很不够，并且 设计的新意不足。”
四、结语
借助P”hon语言及质性研究工具Nvivol0．O分析所得 结果，揭露了“差评”研究生学位论文主要特征。直接指向 “差评”论文具体内容的缺陷，包括论文主题、逻辑结构、论证 分析、结论与建议、写作态度、写作规范、创新性等方面：这些 特征之间是紧密联系并且相互重叠的。通过分析“差评”学 位论文的主要特征，指出其不足，为学位论文过程管理中鉴 别“差评”学位论文提供了参考，依据研究生实际情况“对症 下药”，对于提升研究生学位质量具有重要意义。与此同时， 研究内容也为研究生学位论文质量评审提供了思路和方法 的指引。传统的研究生学位论文评价体系存在诸多的漏洞， 如专家遴选时对如何对专家数量、专家研究方向、专家对评 审论文的熟悉程度、专家主观看法等方面做出判断。以专家 评审意见为基础的评审，专家不仅需要评审论文，还需对本 人做出的评审意见进行评审，这可以在一定程度上避开相关 主观因素的影响。
正如范海思提出的威斯康星精神强调了高等教育的社 会服务职能，认为高等教育的教学与科研活动都应考虑其实 际社会功用。潘懋元先生也提出，在高等教育大众化阶段， 高等教育利益相关者增多，高等教育的目的不应只是高深的 理论，还要求理论应与实际结合，为社会发展所用¨3|。研究 生学位论文作为评判研究生教育培养质量的重要指标，不应只强调其高深的理论价值，学位论文的实用性也应得到关 注。因此，可进一步将七个方面特征归结为对研究生学位论 文学科性、规范性、学理性、实用性、创新性的要求。学科性 是对论文具体选题、框架逻辑和研究方法的要求；规范性是 学位论文质量的基础；学理性是对研究生学位论文理论价值 的要求；实用性是学位论文的最终归宿；创新性是对论文思 路和方法的卓越追求。
在要求研究生学位论文学科性和规范性达标基础上，追 求学理性、实用性和创新性需要研究生和管理者协同努力。 研究生应尽早明确研究方向，端正研究态度，夯实专业基础。 既要考虑论文的学理性，也要关注实用性，做到理论与实践 相结合，以理论指导实践。关注实用性并不意味着一味的重 复研究，创新性应是研究生学位论文的卓越追求。管理者在 实际管理过程中，需要不断审视自身，顺应时代发展潮流。 坚持“以学生为中心”的管理理念，加强国际合作拓展优质的 科研资源，倡导科研与教学融合，优化课程体系和教学内容， 为研究生科研提供物质基础¨4|。与此同时，发挥论文质量 监督者的作用，在优化学位论文评价体系的同时，对违反学 术道德的行为进行严厉处罚，营造良好的学术氛围。

相关文章：基于提升研究生培养质量的学位论文答辩过程管理创新 ——以西南石油大学为例