全面评价研究生培养成效是持续改进培养质量的关键。以布法罗州立学院为例，该校成立了专门机构，从培养成果出发，统筹本科和研究生阶段所有专业或学位项目的成效评价工作。本文介绍该校的做法，为国内高校研究生培养质量管理提供参考。
布法罗州立学院（Buffalo State College）研究生教育开展近80年来，学校目前已经开设了60余项研究生专业或研究生学位学习项目（以下简称“研究生学位项目”），涵盖文理工商等不同领域。在研究生教育方面，学校大力推行小班化教学模式，提升师生交流程度，提供充足的学术和个人发展辅导服务。研究生新生从入学之日起自动成为学校研究生学生协会（Graduate Student Association）成员，该协会致力于帮助学生拓展人脉，提供研究项目和资金支持，支持学生参与学术会议等。
为了全面提升研究生培养质量，该校研究生院院长凯文·J.米勒（Kevin J. Miller）教授强调，“学生学习成效评价方法以及评价结果的运用是关键，以确保学位项目持续提升育人成效。”为此，该校成立了教学成效和规划办公室（Office for Institutional Effectiveness and Planning），为本科专业和研究生学位项目制定了系统的成效评价体系。
多层机构 引领评价
该校发布的《2019—2024学术事务评价计划》显示，教学成效和规划办公室的职责是统领和协调全校范围内的评价工作以及促进持续改进，包括本科专业、研究生、学位项目、专业辅修项目等学术学习项目。在持续改进上，该办公室需要系统收集并分析相关数据，为提升项目教学成效和学生学习体验提供决策建议。
为建立系统化的评价体系，并确保数据安全可靠，学校与第三方机构合作搭建了名为“任务流”（Taskstream）的评价管理系统，以开展评价工作并储存和分析评价数据。教学成效和规划办公室下辖三个特别委员会，均由该办公室负责人、学校协理副校长（Associate Vice President）担任委员会主席，包括：
● 评价咨询委员会（Assessment Advisory Board）：该委员会成员由学校4个二级学院的副院长、各二级学院的2名教师、学校协理教务长和1名研究生院管理层教师组成，主要负责审查各专业、研究生学位项目等开展的评价活动，每年出具学术项目评价活动审查报告（Review of Assessment Activities for Academic Programs），并提出改进建议以进一步提升学习成效。
● 教学成效委员会（Institutional Effectiveness Committee）：该委员会由校内不同利益方，包括财务管理、人力资源管理、学生事务部门、学术事务部门等负责人组成，从学术项目的培养目标、支持手段、培养成果、持续改进等方面对各专业、研究生学位项目等开展评价，除了用于提升培养质量外，评价结果主要满足外部评估评价的需求与期待。
● 线上监督与准备委员会（Online Oversight and Readiness Committee）：该委员会负责评价在线教学的开展方法和成效，并提出政策优化、教学方法改善等方面的建议。委员会成员由学校教与学中心的课程设计专家、一线教师以及研究生院院长等人员组成。
同时，学校成立了以教务长为主席的学院规划委员会（College Planning Council），协理副校长为其核心成员之一，该委员会负责审查包括研究生培养在内的所有学术项目，确保其培养过程、成果等与学院战略规划目标相匹配。
综合衡量 量表“说话”
研究生学位项目培养质量的评估或评价是一项综合过程。学校规定，围绕学生学习情况和项目制定的学生学习目标，教学成效和规划办公室组织下辖三个特别委员会与研究生学位项目共同开展年度评价并发布结果报告，研究生院和各项目教职人员都能在“任务流”管理系统中查看报告，从数据结果找出改进教学的方向。
同时，学校要求教学成效和规划办公室每5年对研究生项目进行校内/校外评估。对此，项目需要开展自评并接受校内或校外评估，校外评估通常由学校所属的纽约州立大学系统负责。研究生院院长和被评研究生项目负责人、教学团队等共同分析评估结果和改进建议，共同制定未来的改进计划。
麦可思开发了研究生培养质量监测项目，旨在协助高校构建从生源质量、过程质量到结果质量的研究生教育质量监测与分析报告体系，将以在校生、毕业生、用人单位等相关利益方的视角聚焦研究生培养过程，对研究生的人才培养环节进行分类评价，为学校学科建设与评估、专业学位质量评估、教学与质量管理、招生与就业、质量年报等工作提供数据支撑。
研究生院需要制定每项研究生学位项目的5年或长期评估方案，所涉及的相关资料必须有迹可循、有证可查。例如学位项目制定的学生学习目标需要在网站公布，评估方案和其他包括课程地图在内的相关资料需要上传到“任务流”管理系统中并及时更新。无论具体专业如何，研究生学位项目提供的资料必须包含如下内容：该研究生学位项目制定的学生各阶段的学习目标；该研究生学位项目的课程地图，需要体现课程间的关联关系，特别是课程对学习目标的支撑作用；衡量学生学习目标达成度的判断标准；研究生院或者相关学位项目根据评价结果进行改进的步骤或流程等。
在学位项目的评估过程中，结合上述学位项目提供的资料，教学成效和规划办公室组织的评价专家主要利用评价量表开展评价工作，评价量表包括六个指标：
●学生学习目标，其具体标准为“清晰表述在不同阶段的学生，应当了解的知识，需要具备的能力和技能以及应该产出的学术成果等”。
●课程地图，其具体标准为“证明学生在研究生阶段的学习进程，清晰表述课程对学生学术能力、通识能力等培养的作用”。
●评价方法和标准，即评判学生学习目标达成情况的方法和标准，达成度分为“未满足预期”“接近预期”“满足预期”“超过预期”等四个层次，学校要求研究生院至少采用两项数据证明达成情况，且至少有一项与学习目标直接关联。
●结果与阐述，研究生院需要“清晰记录学生学习评价情况以及具体的支撑指标”，同时，教师需要详细阐述评价结果的内涵，例如体现出学生的优势和短处，并记录在评价报告中。
●改进措施与长远规划，根据年度评价等结果，研究生院和学术项目每年需要制定正式的学术项目改进计划，记录具体采取改进行为以及选用或未选用的理由。同时，研究生院需要持续跟踪改进措施的成效，并详细记录。
●持续评价，从总体来看，各研究生学位项目制定的评价方案可执行，且评价结果与项目改进紧 密相连，以4年为周期，所有教师都需要参与其中，并有机会提出和评价改进意见。
每项指标的评分从“0分”（毫无证据）到“3分”（卓有成效）共分4档。以最后一项“持续评价”为例，0分意味着“没有证据显示评价活动在该学位项目中开展”；1分表示“有证据表明该学位项目开展了评价活动，但不能证明评价结果用于改进决策”；2分代表“评价活动已经成为该学位项目的常规工作，且评价结果会分发到多数教师或教师委员并进行评价和讨论”；4分则是“评价活动是该学位项目常规工作的一部分，评价结果会由全体教师讨论、评价，并在学位项目的进一步改革中起到参考或关键作用”。
此外，学校非常关注学生（包括研究生）的通识能力，从学校实际情况和专业特征出发，制定了通识能力校级学习目标，包括文化交流能力（Cultural Fluency）、现代竞争能力（Urban Engagement）、学术和创新能力（Scholarship and Creative Activity）、伦理道德推论能力（Ethical Reasoning）。学校每年会成立临时性的监督与评价委员会（Oversight and Assessment Committee）评估研究生通用能力的掌握情况，每5年全面评价研究生学位项目的通识能力培养情况。
结语
纵览布法罗州立学院的研究生学位项目评价方案，该校特点在于以学校协理副校长牵头负责，利于调动校内各项资源推动评价活动顺利完成，同时运用评价量表制定了清晰、可衡量的评价标准，利于准确定位确定并确定改进方向。
关注“麦研文选”,获取更多数据——
☞回复“布点专业”，获取近两年高职院校布点数增加较多的专业全名单。
