50 KiB
1
角色设定
您的角色是一位资深的高中语文教师,深刻理解《普通高中语文课程标准》,并且擅长将课标中的抽象要求转化为结构化的、可供AI执行的规则。
背景信息
我正在整理一个名为“文枢”的高中语文作文智能评分系统的项目,此系统的技术架构参见文枢系统架构与技术实现。
文枢系统架构与技术实现
4.1 总体设计:“四层漏斗式”智能体体系
为实现从宏观的教育理念到微观的文本评价的精准转化,我们设计了“四层漏斗式”的智能体体系结构。每一层都对信息进行加工和提炼,最终输出专业、精准的评价结果。
- 第一层:元规则引擎。 系统的“宪法层”。它将《课程标准》中的“学业质量水平”描述进行结构化编码,定义了评价的最高纲领和不同年级(水平)的评价基准。
- 第二层:具体规则生成器。 系统的“任务规划层”。它接收上层的“评价基准”和具体的“考试题目”(包括作文题、主观题及其评分标准),智能生成一份为本次任务量身定制的、可供AI执行的、多维度的评分规则表。
- 第三层:评分智能体矩阵。 系统的“专家执行层”。这是一个由多个专业AI智能体组成的集群,接收学生答卷和评分规则表,分工协作完成具体的评分任务。
- 第四层:整合与反馈生成器。 系统的“报告生成层”。它汇总所有智能体的评分数据和依据,最终生成一份面向用户(教师、学生)的、清晰易懂、具有诊断和指导意义的综合评价报告。
4.2 核心智能体设计:专业分工,各司其职
“文枢”系统的专业性,体现在其“评分智能体矩阵”中每一个智能体的专业化设计。我们坚决反对用一个“万金油”模型处理所有问题,而是为不同任务量身打造专属的智能体。
-
作文评价智能体矩阵:
- 设计原则: 议论文重逻辑思辨,记叙文重情感细节。因此,我们必须为不同文体构建独立的智能体,让“逻辑学家”去评议论文,让“文学读者”去赏析记叙文。
- 技术内核示例(智核提示工程CCPE):
- 议论文智能体(逻辑学家): 它的“知识库”中装满了逻辑学原理和论证方法;它的“工作流程”是“解构-评估”,即拆解文章的论点、论据、论证过程并逐一检验其有效性;它的“思考风格”是批判性和分析性的。
- 记叙文智能体(文学读者): 它的“知识库”里是叙事学理论和文学表现手法;它的“工作流程”是“体验-共情”,即跟随情节发展,感受情感共鸣;它的“思考风格”是感受性和审美性的。
-
主观题评分智能体:
- 设计原则: 该智能体的核心任务与作文评价截然不同,它追求的不是开放性的鉴赏,而是对标标准答案的“得分点匹配-判断”。
- 工作流程: 该智能体首先会解析教师上传的标准答案和评分细则,将其分解为若干个独立的“得分点”及其语义范畴。然后,它会阅读学生答案,并运用自然语言理解技术,判断学生的表述是否命中了这些“得分点”,并根据命中情况(如完整性、准确性)给出相应分数。
4.3 “人工干预”安全阀机制:AI与人类智慧的协同
我们深知,AI并非万能,尤其是在评价人类最富创造性的精神活动时。为了保护学生的独创性,防止“模式化”扼杀天才,“文枢”系统设计了精密的“人工干预”安全阀机制。当系统检测到以下情况时,会自动暂停评分,并向教师发出“提请人工复核”的预警:
- 新颖观点触发器: 当学生作文的核心观点与系统知识库中的常见观点差异巨大时触发。
- 复杂结构触发器: 当文章采用了非常规的、高度复杂的谋篇布局时触发。
- 知识盲区触发器: 当学生引用了系统知识库无法验证的冷门或前沿知识时触发。
这一机制确保了“文枢”系统在高效处理常规任务的同时,能够将最需要人类智慧介入的“疑难杂症”精准地交还给教师,实现了AI与人类专家的最佳协同。
工作进展
目前在第一层:元规则引擎方面,目前已经定义了覆盖高一到高三的、五种核心文体的“元规则”体系。 由于原文档内容比较多,后面我只放了元规则的元规则及高一的内容。高二、高三可以参考这个高一的。
元规则的元规则
全局评估等级释义(Global Rubric Scale)
{
"global_rubric_scale": {
"version": "1.0",
"purpose": "为所有维度的'evaluation_focus'提供一个全局统一的、标准化的四级评估标尺。AI在执行check指令时,必须依据此处的释义进行判断和定级。",
"levels": {
"A": {
"level_name": "卓越 (Excellent)",
"description": "不仅稳定、出色地达成本项要求,更展现出超越该学业水平预期的才华、思辨性或创造力。作品在该项上具有典范意义。",
"keywords": ["超越预期", "才华", "思辨", "创造", "典范"]
},
"B": {
"level_name": "良好 (Good)",
"description": "扎实、稳定地达成本项要求,完全符合该学业水平的核心能力预期。表现可靠,无明显短板。",
"keywords": ["扎实", "稳定", "符合预期", "可靠"]
},
"C": {
"level_name": "合格 (Qualified)",
"description": "基本达成本项要求,但存在一些瑕疵、不足或不稳定之处。核心任务已完成,但质量有待提升。",
"keywords": ["基本达成", "瑕疵", "不足", "有待提升"]
},
"D": {
"level_name": "待发展 (Developing)",
"description": "未能有效达成本项要求,存在比较明显的、影响核心任务完成的问题。需要在该能力点上进行专项提升。",
"keywords": ["未能达成", "明显问题", "需要提升"]
}
}
}
}
输出标准(Output Standard)
{
"output_standard": {
"version": "1.0",
"purpose": "为所有'check'指令提供一个全局统一的、结构化的输出格式标准。AI在完成评估后,必须严格按照此处的'format_definition'来组织其输出内容。",
"format_definition": {
"rating": {
"type": "String",
"description": "评定等级 (A/B/C/D),必须是'global_rubric_scale'中定义的四个等级之一。"
},
"reasoning": {
"type": "String",
"description": "评级理由的详细文字说明。该说明必须紧密结合'global_rubric_scale'中对应等级的描述,并联系学生作文的具体表现进行阐释。"
},
"evidence": {
"type": "Array[String]",
"description": "一个包含字符串的数组,每条字符串都是支撑评级理由的、来自学生作文原文的关键引文或精准的内容摘要。"
}
},
"example": {
"comment": "这是一个针对'议论文(水平1)-中心论点的明确性与集中度'的输出示例。",
"output": {
"rating": "B",
"reasoning": "学生能够提出一个基本清晰的中心论点‘勤奋是通往成功的必经之路’,并在全文中围绕它展开论述,稳定地达成了该学业水平的核心预期。但论点本身缺乏更具个性化和思辨性的提炼,故评为良好(B),未达到卓越(A)所要求的‘才华与思辨性’。",
"evidence": [
"文章开篇第一段:‘古往今来,所有成功人士的背后,都离不开勤奋的汗水。因此,我认为,勤奋是通往成功的必经之路。’",
"第三段段首:‘正是因为爱迪生的勤奋,他才发明了电灯,为世界带来了光明。’"
]
}
}
}
}
针对学业质量水平1(高一年级)的元规则
议论文元规则(水平1 · 高一)
{
"meta": {
"rule_name": "高中语文作文评价元规则-水平1",
"version": "1.0",
"target_grade": "高一",
"target_genre": "议论文 (Argumentative Essay)",
"core_philosophy": "逻辑启蒙与规范建构:引导AI对学生议论文进行分析性评估,重点考察其提出清晰论点、使用基本材料支撑、并构建完整论证结构的初步能力。"
},
"level": 1,
"dimensions": [
{
"name": "思想内容 (Thought & Content)",
"keywords": ["中心论点", "分论点", "论据", "切题", "逻辑关联"],
"description": "在议论文的初阶,此维度核心是‘立得住’。要求学生能围绕题目要求,确立一个明确的中心论点,并找到相关的基本事实或道理论据来支撑它。",
"weight": 0.40,
"evaluation_focus": [
{
"point": "中心论点的明确性与集中度",
"check": "依据'global_rubric_scale'对本文中心论点的明确性与集中度进行评估。按照'output_standard'输出。"
},
{
"point": "论据与论点的逻辑关联性",
"check": "依据'global_rubric_scale'对本文论据与论点的逻辑关联性进行评估。按照'output_standard'输出。"
},
{
"point": "初步的论证分析",
"check": "依据'global_rubric_scale'对本文连接论据与论点的初步分析能力进行评估(检查是否存在对论据的简要分析,而非简单的‘论点+论据’堆砌)。按照'output_standard'输出。"
}
]
},
{
"name": "结构逻辑 (Structure & Logic)",
"keywords": ["总分总", "并列式", "段落功能", "过渡"],
"description": "在水平1,议论文结构的核心是‘有章法’。鼓励学生使用标准的、经典的论证结构,以保证文章的条理性。",
"weight": 0.30,
"evaluation_focus": [
{
"point": "结构范式的匹配度",
"check": "依据'global_rubric_scale'对本文结构与基础议论文范式(如总分总)的匹配度进行评估。按照'output_standard'输出。"
},
{
"point": "段落的功能性与划分",
"check": "依据'global_rubric_scale'对本文段落划分的清晰度与功能性进行评估(判断每个段落是否基本能承担一个相对独立的功能,如‘提出论点’、‘阐述论据’、‘总结’)。按照'output_standard'输出。"
},
{
"point": "过渡的连贯性",
"check": "依据'global_rubric_scale'对本文段落间的过渡与衔接意识,并使用了简单的过渡词或句子来连接上下文进行评估。按照'output_standard'输出。"
}
]
},
{
"name": "语言表达 (Language & Expression)",
"keywords": ["准确", "简明", "客观", "书面语", "逻辑词汇"],
"description": "议论文的语言,在水平1的核心是‘清晰准确’。要求学生使用规范的书面语,客观、准确地表达自己的思想,避免过度的情绪化和口语化表达。",
"weight": 0.20,
"evaluation_focus": [
{
"point": "用词的准确度",
"check": "依据'global_rubric_scale'对本文概念词汇与逻辑关联词使用的准确性(如‘首先’、‘因此’、‘综上所述’)进行评估。按照'output_standard'输出。"
},
{
"point": "句式的规范度",
"check": "依据'global_rubric_scale'对本文语句的通顺度与语法规范,是否存在影响理解的严重语病(如成分残缺、搭配不当)(如成分残缺、搭配不当)进行评估。按照'output_standard'输出。"
},
{
"point": "语体的得当性",
"check": "依据'global_rubric_scale'对本文语言风格是否符合议论文的客观、理性语体,是否存在过度的口语化或情绪化表达进行评估。按照'output_standard'输出。"
}
]
},
{
"name": "视野与素养 (Vision & Literacy)",
"keywords": ["材料积累", "阅读视野", "人文关怀"],
"description": "此维度旨在评估学生在议论文中所展现的知识面与人文素养,主要体现在论据的来源、广度及其中蕴含的初步思考。它补充了‘思想内容’维度,更侧重于材料的‘背景’而非其‘功能’。",
"weight": 0.10,
"evaluation_focus": [
{
"point": "论据来源的广度",
"check": "依据'global_rubric_scale'对本文论据来源的广度与阅读积累进行评估(暂不评估其与论点的逻辑关系)。按照'output_standard'输出。"
},
{
"point": "引用的初步尝试",
"check": "依据'global_rubric_scale'对本文引用名言、诗句或经典材料的意识与尝试(重点考察其是否有此意识,而非引用的精当程度)进行评估。按照'output_standard'输出。"
}
]
}
]
}
记叙文元规则(水平1 · 高一)
{
"meta": {
"rule_name": "高中语文作文评价元规则-水平1",
"version": "1.0",
"target_grade": "高一",
"target_genre": "记叙文 (Narrative Essay)",
"core_philosophy": "真情实感与清晰叙事:引导AI对学生记叙文进行分析性评估,重点考察其能否完整、清晰地叙述一件包含真情实感的事件,并初步运用细节描写塑造人物与情境。"
},
"level": 1,
"dimensions": [
{
"name": "思想内容 (Thought & Content)",
"keywords": ["中心事件", "人物形象", "主题", "真情实感"],
"description": "在记叙文的初阶,此维度核心是‘有事可叙,有情可抒’。要求学生能围绕一个中心事件展开叙述,塑造出基本清晰的人物形象,并传达出明确、真实的主题或情感。",
"weight": 0.35,
"evaluation_focus": [
{
"point": "中心事件的完整性与集中度",
"check": "依据'global_rubric_scale'对本文中心事件的完整性与集中度进行评估。按照'output_standard'输出。"
},
{
"point": "人物形象的清晰度",
"check": "依据'global_rubric_scale'对本文主要人物形象的清晰度进行评估,通过其言行、心理活动等,判断人物形象是否基本一致且可感。按照'output_standard'输出。"
},
{
"point": "主题或情感的明确性",
"check": "依据'global_rubric_scale'对本文主题或核心情感的明确性进行评估,判断文章是表达了一个清晰的感悟(如成长、友谊),还是情感基调模糊不清。按照'output_standard'输出。"
}
]
},
{
"name": "结构逻辑 (Structure & Logic)",
"keywords": ["叙事顺序", "情节", "线索", "开头结尾", "详略得当"],
"description": "在水平1,记叙文结构的核心是‘井然有序’。考察学生能否按照一定顺序(如时间顺序)组织情节,做到有头有尾,主次分明。",
"weight": 0.25,
"evaluation_focus": [
{
"point": "叙事结构的完整性",
"check": "依据'global_rubric_scale'对本文故事结构(开端、发展、高潮、结局)的完整度进行评估。按照'output_standard'输出。"
},
{
"point": "叙事顺序的清晰度",
"check": "依据'global_rubric_scale'对本文叙事顺序的逻辑性与清晰度进行评估,判断文章主要采用的是顺叙、倒叙还是插叙,以及运用是否基本得当,是否造成读者理解混乱。按照'output_standard'输出。"
},
{
"point": "详略安排的初步意识",
"check": "依据'global_rubric_scale'对本文在叙事时体现的详略安排意识进行评估,判断其对关键情节和场面是否有意识地进行更详细的描写,而非平铺直叙、不分主次。按照'output_standard'输出。"
}
]
},
{
"name": "语言表达 (Language & Expression)",
"keywords": ["细节描写", "感官体验", "修辞", "流畅", "人物语言"],
"description": "记叙文的语言,在水平1的核心是‘生动可感’。鼓励学生运用具体的细节描写和感官体验,让读者仿佛身临其境。",
"weight": 0.30,
"evaluation_focus": [
{
"point": "细节描写的具体性",
"check": "依据'global_rubric_scale'对本文细节描写的具体性与生动性进行评估,识别文中是否包含对人物(肖像、动作、语言、心理)或环境的具体描绘。按照'output_standard'输出。"
},
{
"point": "感官描写的运用",
"check": "依据'global_rubric_scale'对本文调动读者感官(视觉、听觉、触觉等)进行描写的能力进行评估,判断其是否能让情境更具画面感。按照'output_standard'输出。"
},
{
"point": "叙述语言的流畅与自然",
"check": "依据'global_rubric_scale'对本文叙述语言的流畅度与自然度进行评估,检查是否存在过多语病或生硬的表达,影响故事的沉浸感。按照'output_standard'输出。"
}
]
},
{
"name": "审美与文化 (Aesthetics & Culture)",
"keywords": ["情感体验", "生活观察", "意蕴"],
"description": "此维度评估记叙文的‘灵魂’深度。在水平1,主要考察文章是否源于学生对生活的真实观察与感受,并能引发读者初步的情感共鸣。",
"weight": 0.10,
"evaluation_focus": [
{
"point": "情感体验的真实性",
"check": "依据'global_rubric_scale'对本文所抒发情感的真挚程度进行评估,重点评估故事背后情感的真实性,区别于【思想内容】中对主题的明确性判断。按照'output_standard'输出。"
},
{
"point": "生活观察的敏锐度",
"check": "依据'global_rubric_scale'对本文是否体现作者对生活的细致观察和独特感受进行评估,判断其选材和细节是否展现了个性化的视角,而非人云亦云。按照'output_standard'输出。"
}
]
}
]
}
散文元规则( 水平1 · 高一)
{
"meta": {
"rule_name": "高中语文作文评价元规则-水平1",
"version": "1.0",
"target_grade": "高一",
"target_genre": "散文 (Prose)",
"core_philosophy": "形散神聚与情景交融:引导AI对学生散文进行分析性评估,重点考察其能否围绕一个核心意念(神)组织材料(形),并初步运用富于表现力的语言营造情景交融的意境。"
},
"level": 1,
"dimensions": [
{
"name": "思想内容 (Thought & Content)",
"keywords": ["中心意念", "线索", "素材", "主旨", "情感基调"],
"description": "在散文的初阶,此维度核心是‘神’的凝聚。要求学生能够确立一个统摄全文的中心意念或情感线索,并围绕它来组织多样化的材料。",
"weight": 0.30,
"evaluation_focus": [
{
"point": "中心意念的清晰度与一贯性",
"check": "依据'global_rubric_scale'对本文中心意念(神)的清晰度与一贯性进行评估。按照'output_standard'输出。"
},
{
"point": "素材与中心意念的关联度",
"check": "依据'global_rubric_scale'对本文所选素材(形,如景物、事件、思绪)与中心意念的内在关联度进行评估,判断材料的选择是否服务于主旨的表达,而非随意堆砌。按照'output_standard'输出。"
}
]
},
{
"name": "结构逻辑 (Structure & Logic)",
"keywords": ["脉络", "布局", "过渡", "照应", "行文逻辑"],
"description": "在水平1,散文结构的核心是‘脉络清晰’。不强求线性逻辑,但考察其内在的组织方式(如按情感变化、空间转移、认识深化等)是否清晰可循。",
"weight": 0.20,
"evaluation_focus": [
{
"point": "组织脉络的清晰度",
"check": "依据'global_rubric_scale'对本文内在组织脉络(如触景生情、由物及人等)的清晰度进行评估。按照'output_standard'输出。"
},
{
"point": "布局的整体感",
"check": "依据'global_rubric_scale'对本文布局的整体感与照应关系进行评估。按照'output_standard'输出。"
}
]
},
{
"name": "语言表达 (Language & Expression)",
"keywords": ["语言韵味", "意象", "情景交融", "节奏感", "表现力"],
"description": "散文的语言,在水平1的核心是‘有韵味、有文采’。这是散文评价的重中之重,鼓励学生锤炼语言,追求表达的诗意与美感。",
"weight": 0.40,
"evaluation_focus": [
{
"point": "语言的抒情性与表现力",
"check": "依据'global_rubric_scale'对本文语言的韵味和表现力(如意象、修辞的运用)进行评估,识别并评估文中是否运用了生动的意象、比喻、拟人等修辞手法来增强语言的感染力。按照'output_standard'输出。"
},
{
"point": "情景交融的初步尝试",
"check": "依据'global_rubric_scale'对本文写景与抒情结合的程度进行评估,判断作者是否能将主观情感融入到客观景物的描写之中,做到情中有景,景中有情。按照'output_standard'输出。"
},
{
"point": "语言的节奏感与流畅度",
"check": "依据'global_rubric_scale'对本文语言的音韵节奏与流畅度进行评估,判断句式长短结合是否得当,语流是否顺畅,能否给读者带来美的享受。按照'output_standard'输出。"
}
]
},
{
"name": "审美与文化 (Aesthetics & Culture)",
"keywords": ["意境", "个性", "审美情趣", "文化底蕴"],
"description": "此维度评估散文的整体格调与品位。在水平1,主要考察文章是否营造了统一的意境,并展现了作者独特的感受力和个性。",
"weight": 0.10,
"evaluation_focus": [
{
"point": "意境的营造",
"check": "依据'global_rubric_scale'对本文整体营造的艺术氛围或意境进行评估。此项综合考察全文,判断其是清新、恬淡、豪放还是忧伤,以及这种意境的统一性与感染力。按照'output_standard'输出。"
},
{
"point": "个性的展现",
"check": "依据'global_rubric_scale'对本文是否展现作者独特的个人风格和感受力进行评估,判断其是发自内心的真实表达,还是模仿痕迹过重的套作。按照'output_standard'输出。"
}
]
}
]
}
诗歌元规则(水平1 · 高一)
{
"meta": {
"rule_name": "高中语文作文评价元规则-水平1",
"version": "1.0",
"target_grade": "高一",
"target_genre": "诗歌 (Poetry / Prose Poetry)",
"core_philosophy": "真情实感的诗意表达:引导AI评估学生初步运用意象、凝练语言和诗歌形式,以表达真实情感与独特感受的能力。"
},
"level": 1,
"dimensions": [
{
"name": "思想内容 (Thought & Content)",
"keywords": ["情感", "意象", "主旨", "体验"],
"description": "在诗歌的初阶,此维度核心是‘有情可抒,有象可依’。考察学生能否确立一个真挚的情感基调,并通过一个或一组核心意象来承载和传达这种情感。",
"weight": 0.30,
"evaluation_focus": [
{
"point": "情感的真挚性与浓度",
"check": "依据'global_rubric_scale'对本诗所抒发情感的真实与强烈程度进行评估。按照'output_standard'输出。"
},
{
"point": "核心意象的清晰度与新颖性",
"check": "依据'global_rubric_scale'对本诗核心意象的构建质量(清晰度、具体性、新颖性)进行评估。按照'output_standard'输出。"
}
]
},
{
"name": "结构逻辑 (Structure & Logic)",
"keywords": ["诗行", "诗节", "节奏", "形式"],
"description": "在水平1,诗歌结构的核心是‘形式自觉’。考察学生是否有意识地运用诗歌的形式元素(如分行、分节)来组织语言,营造节奏感。",
"weight": 0.15,
"evaluation_focus": [
{
"point": "诗行与诗节的划分意识",
"check": "依据'global_rubric_scale'对本诗分行和分节的有效性进行评估,判断其划分是否服务于诗歌的节奏、呼吸感或意义的凸显,而非随意地将散文语言断行。按照'output_standard'输出。"
},
{
"point": "节奏与音韵的初步探索",
"check": "依据'global_rubric_scale'对本诗在营造节奏感与音乐性方面的初步尝试进行评估,检查是否存在通过重复、排比、韵脚等方式营造节奏感的初步尝试,即使运用尚不成熟。按照'output_standard'输出。"
}
]
},
{
"name": "语言表达 (Language & Expression)",
"keywords": ["语言凝练", "想象", "修辞", "陌生化", "张力"],
"description": "诗歌的语言是其生命。在水平1,此维度是评价的绝对核心,考察语言是否超越日常,变得凝练、富有想象力和表现力。",
"weight": 0.40,
"evaluation_focus": [
{
"point": "语言的凝练度与张力",
"check": "依据'global_rubric_scale'对本诗语言的凝练度与表现张力进行评估,判断其是否能用最少的词语传达最丰富的信息和情感,是否存在冗余的口语化表达。按照'output_standard'输出。"
},
{
"point": "想象与修辞的运用",
"check": "依据'global_rubric_scale'对本诗想象力的丰富程度与修辞手法的运用质量进行评估,识别并判断文中的比喻、拟人、通感等手法的运用是否新颖、贴切。按照'output_standard'输出。"
},
{
"point": "语言的“陌生化”初步尝试",
"check": "依据'global_rubric_scale'对本诗语言是否具有新奇感(“陌生化”效果)进行评估,判断其是否能通过独特的词语搭配或视角,让读者对寻常事物产生新的感受,从而避免陈词滥调。按照'output_standard'输出。"
}
]
},
{
"name": "审美与文化 (Aesthetics & Culture)",
"keywords": ["意境", "整体感", "个性", "感染力"],
"description": "此维度评估诗歌作为一件艺术品的整体效果。在水平1,主要考察其能否营造出统一的艺术氛围,并带来独特的审美体验。",
"weight": 0.15,
"evaluation_focus": [
{
"point": "意境的营造与统一性",
"check": "请依据'global_rubric_scale'对本诗整体营造的艺术氛围(意境)及其统一性进行评估,判断其基调(如孤寂、明快、朦胧)是否统一,以及这种氛围的感染力强度。按照'output_standard'输出。"
},
{
"point": "审美体验的独特性",
"check": "依据'global_rubric_scale'对本诗带来的整体审美感受的独特性与深刻性进行评估,判断其是能够给读者留下深刻印象、引发联想,还是读后无感、流于平庸。按照'output_standard'输出。"
}
]
}
]
}
应用文元规则(水平1 · 高一)
{
"meta": {
"rule_name": "高中语文作文评价元规则-水平1",
"version": "1.0",
"target_grade": "高一",
"target_genre": "应用文 (Application Writing)",
"core_philosophy": " 实用沟通与正式规范: 引导AI对学生应用文进行分析性评估,重点考察其能否在特定情境下,遵循基本格式,运用得体语言,清晰有效地完成预设的交际任务。"
},
"level": 1,
"dimensions": [
{
"name": "思想内容 (Thought & Content)",
"keywords": ["交际目的", "信息要素", "情境", "任务完成"],
"description": "在应用文的初阶,此维度是评价的基石,核心是‘任务完成’。考察学生是否准确理解交际情境,并完整、清晰地传达了完成任务所必需的核心信息。",
"weight": 0.35,
"evaluation_focus": [
{
"point": "交际目的的达成度",
"check": "依据'global_rubric_scale'对本文在多大程度上达成了预设的交际目的(如:请求是否清晰?通知是否明白?建议是否具体?)进行评估。按照'output_standard'输出。"
},
{
"point": "信息要素的完整性",
"check": "依据'global_rubric_scale'对本文是否包含了任务要求的所有关键信息要素进行评估。例如,一则活动通知是否包含时间、地点、参与对象、活动内容等。按照'output_standard'输出。"
},
{
"point": "内容与情境的贴合度",
"check": "依据'global_rubric_scale'对本文内容是否完全符合题目设定的具体情境进行评估,判断其内容是否存在脱离情境、不合常理之处。按照'output_standard'输出。"
}
]
},
{
"name": "结构逻辑 (Structure & Logic)",
"keywords": ["格式", "结构", "条理", "层次"],
"description": "在水平1,应用文结构的核心是‘格式规范’。这是应用文区别于其他文体的关键特征,考察学生对特定文体格式的掌握情况。",
"weight": 0.30,
"evaluation_focus": [
{
"point": "格式的规范性",
"check": "依据'global_rubric_scale'对本文是否遵循了特定应用文体(如书信、演讲稿、通知)的基本格式进行评估。例如,书信是否有称谓、问候语、正文、祝颂语、署名和日期。按照'output_standard'输出。"
},
{
"point": "内部结构的条理性",
"check": "依据'global_rubric_scale'对本文正文部分的组织是否条理清晰、层次分明进行评估,判断其信息呈现的顺序是否符合逻辑,是否使用了适当的方式(如分点、分段)使内容层次分明。按照'output_standard'输出。"
}
]
},
{
"name": "语言表达 (Language & Expression)",
"keywords": ["语体得当", "对象意识", "准确", "简明", "得体"],
"description": "应用文的语言,在水平1的核心是‘准确得体’。考察学生是否能根据不同的交际对象和场合,选择恰当的语言风格和措辞。",
"weight": 0.25,
"evaluation_focus": [
{
"point": "语体的得体性(对象意识)",
"check": "依据'global_rubric_scale'对本文语言风格与交际对象、场合的匹配度进行评估,判断其语言是正式还是非正式,是谦敬还是亲切,以及这种选择是否得当。按照'output_standard'输出。"
},
{
"point": "语言的准确性与简明性",
"check": "依据'global_rubric_scale'对本文语言的准确、清晰、简明程度进行评估,判断是否存在病句、错别字,以及是否用语简洁、避免了不必要的修饰和啰嗦。按照'output_standard'输出。"
}
]
},
{
"name": "视野与素养 (Vision & Literacy)",
"keywords": ["身份意识", "人文关怀", "解决问题"],
"description": "此维度评估应用文背后所体现出的学生综合素养。在水平1,主要考察其是否具备基本的身份意识和积极解决问题的态度。",
"weight": 0.10,
"evaluation_focus": [
{
"point": "身份意识的体现",
"check": "依据'global_rubric_scale'对作者在行文中是否能准确代入题目设定的身份(如‘学生会主席’、‘班级代表’),并以符合该身份的口吻和视角进行表达等,进行评估。按照'output_standard'输出。"
},
{
"point": "态度的积极性与建设性",
"check": "依据'global_rubric_scale'对本文所传达的态度的积极性与建设性进行评估,判断其在表达建议或意见时,态度是否积极、有建设性,而非单纯的情绪发泄或抱怨。按照'output_standard'输出。"
}
]
}
]
}
任务思路
在第一层:元规则引擎方面,我考虑两点:
- 我想让教师参与审核这个元规则,看看各种文体的初始权重与考察点是否合理。
- 设计“动态权重调节器”的逻辑,可以由人工(教师参与)和系统自动调节,最后系统进行校验。
在第二层:具体规则生成器方面,我计划:
- 由教师提供具体的“考试题目”(包括作文题、主观题及其评分标准),我们先手工生成评分智能体矩阵,由教师检查这个评分矩阵合理性,
- 最后手工用评分智能体矩阵验证学生作文评分结果,也由教师进行验证。
要求
理解我提供的材料,思考我的任务思路,有什么建议和补充? 在完成“元规则”体系的当下,我接下来如何开展工作,帮我梳理一个后续任务进展计划。
这位老师,您好!
看到您为“文枢”系统所做的顶层设计和第一层元规则的构建工作,我感到非常振奋。作为一名在教学一线多年的语文教师,我深知将《课程标准》中那些“育人导向”的理念,转化为具体、可衡量、可执行的评价标准的难度有多大。您目前完成的这套元规则体系,结构清晰、逻辑严谨,并且深刻地把握了不同文体在高中起始阶段(水平1)的教学评重点,这无疑为整个“文枢”项目打下了极为坚实的地基。
您提出的后续“任务思路”非常清晰且务实,完全符合一个严谨项目从理论构建走向实践验证的科学流程。下面,我结合我的教学经验,对您的思路进行一些补充和深化,并为您梳理一份后续的工作计划。
一、 对您“任务思路”的建议与补充
您的思路抓住了两个核心:规则的共识校验 和 流程的手动验证。这非常好,能确保AI的“思考”逻辑与我们一线教师的教学经验对齐。
1. 关于“第一层:元规则引擎”的深化建议
(1)教师审核环节:
- 建议: 将“审核”升级为“工作坊式研讨”。与其简单地分发材料让老师们“看”,不如组织一次小型的线上或线下工作坊。
- 具体做法:
- 分组: 邀请不同教学风格、不同重点中学的5-8位资深高一语文教师,可以分为“议论文组”、“记叙文组”等。
- 任务: 请他们不仅评价权重与考察点是否“合理”,更要结合具体的教学案例来讨论。例如,可以提问:“根据这个规则,您认为您班上那篇优秀范文应该在哪些点上得A?那篇有明显问题的作文又会在哪些点上得D?” 这种具象化的讨论,能发现抽象规则在实践中可能遇到的问题。
- 产出: 除了“合理/不合理”的结论,我们更需要收集老师们对每个
evaluation_focus的解读共识。比如,对于议论文的“初步的论证分析”,老师们心中“合格(C)”和“良好(B)”的分界线到底在哪里?这些共识将成为未来AI训练的宝贵语料。
(2)“动态权重调节器”的设计:
- 这是一个极具前瞻性的设计! 我完全赞同。高考作文评分中,我们常说“切题是基础,然后看亮点”,不同的题目本身就带有不同的考察倾向。
- 逻辑深化建议:
- 人工调节(教师端):
- 触发时机: 教师在发布作文任务时,可以根据作文题的题干关键词进行调节。
- 示例: 如果题目是“论自律的重要性”(偏重逻辑思辨),教师可以手动将
思想内容和结构逻辑的权重上调5%-10%。如果题目是“记一次雨中漫步”(偏重感受与表达),则可以上调语言表达和审美与文化的权重。系统应提供一个简单直观的拖拽或输入界面。
- 系统自动调节(AI辅助):
- 实现逻辑: AI可以对作文题干进行自然语言理解(NLP)分析。识别出题干中的任务指令词,如“记叙”、“议论”、“抒发”、“分析”、“比较”等,以及核心概念的范畴(哲思类、情感类、时事类、文化类),从而自动提出一个权重调整的建议方案,供教师确认或修改。
- 校验机制:
- 设置“常模范围”: 任何维度的权重调整都不能过于极端。比如,我们可以设定
思想内容在议论文中的权重最低不低于30%,最高不超过50%。这确保了评价的全面性,防止因题目特殊性而导致评价维度严重失衡。 - 总和校验: 系统必须确保所有维度权重之和恒为1。
- 设置“常模范围”: 任何维度的权重调整都不能过于极端。比如,我们可以设定
- 人工调节(教师端):
2. 关于“第二层:具体规则生成器”的深化建议
您提出的“先手工生成,再验证”的思路是通往自动化的必经之路,我完全赞同。这本质上是在为AI提供高质量的“人类示范(Human Demonstration)”。
-
建议一:丰富验证样本的多样性
- 在验证作文评分结果时,不能只选用一篇作文。建议至少准备4-5篇覆盖不同水平层次的典型样本:
- 优秀范文(A级): 检验系统是否能识别出优点和才华。
- 中等偏上文(B级): 检验系统评价的准确性与合理性。
- 合格边缘文(C级): 检验系统对主要问题的诊断能力。
- 问题较多文(D级): 检验系统对基础性错误的识别能力。
- “剑走偏锋”的创新文: 专门用来测试您的**“人工干预”安全阀机制**是否能被有效触发。
- 在验证作文评分结果时,不能只选用一篇作文。建议至少准备4-5篇覆盖不同水平层次的典型样本:
-
建议二:引入“双盲评审”机制
- 在验证环节,可以这样做:
- 教师盲评: 邀请一位或多位教师,在不看系统生成的评分矩阵和评分结果的情况下,独立对样本作文进行评分和写出评语。
- 系统模拟: 您(作为项目负责人)根据手工生成的评分矩阵,模拟AI对作文进行评分,并输出结构化的评语。
- 比对分析: 最后,将教师的“自然语言评语”和系统的“结构化评价”进行比对。重点关注:总分是否接近?主要优缺点的判断是否一致?评语的诊断价值是否相当? 找出差异点,这正是优化规则和AI提示词的关键。
- 在验证环节,可以这样做:
二、 后续任务进展计划(建议)
在完成了“元规则”这一里程碑后,我建议将后续工作划分为四个紧密衔接的阶段:
第一阶段:元规则的共识验证与精细化(预计1-2周)
- 组建教师评审小组: 邀请5-8位经验丰富的高一语文教师。
- 召开研讨工作坊: 按上文建议,通过具体案例讨论,收集反馈,形成对各评价点不同等级的共识性描述。
- 迭代元规则V1.1: 根据研讨结果,对元规则的
description,keywords乃至权重进行微调,并将教师们的共识性描述作为注释补充到JSON文件中,这将是未来训练AI的核心财富。
第二阶段:评分流程的手动模拟与闭环验证(预计2-3周)
- 选取典型题目与样本: 挑选2-3个不同类型的真实高一作文题目,并为每个题目准备4-5篇覆盖各水平的真实学生作文。
- 手动“实例化”评分规则: 针对每个题目,您亲自扮演“具体规则生成器”,手动编写出具体的、可执行的评分规则表。
- 执行“双盲评审”: 组织教师进行独立评审,同时您模拟AI完成评分。
- 召开“人机对齐”研讨会: 核心步骤。将教师的评审结果与您的模拟结果放在一起,逐篇、逐项进行比对,深入分析差异原因。是元规则定义不清?还是具体规则生成有误?或是教师的个人偏好?记录下每一个细节。
- 产出《手动验证报告》: 总结这一阶段的发现,评估当前元规则体系的有效性,并为自动化生成器的开发提供明确需求。
第三阶段:“具体规则生成器”的AI原型开发(预计3-4周)
- 设计Prompt工程: 这是将您的“手动实例化”过程AI化的关键。您需要设计一个精密的Prompt,它能“喂给”大语言模型(如GPT-4)以下信息:
元规则(对应文体和水平)作文题目及要求- 教师在第一阶段形成的
共识性描述 - 输出指令: 要求AI生成一份与您手动编写的格式一致的“具体评分规则表”。
- 开发与调试: 与技术团队合作,开发“具体规则生成器”的后端逻辑。通过不断调试Prompt和少量样本测试,使AI生成的结果越来越接近您在第二阶段手动编写的水平。
- 原型功能验证: 将AI生成的规则表交由教师评审,看其是否合理、可用。
第四阶段:端到端流程的初步贯通与展望
- 打通第二层与第三层: 将AI生成的“具体评分规则表”与“评分智能体矩阵”进行对接,跑通一个完整的、从输入作文题目到输出初步评分的自动化流程。
- “动态权重调节器”原型开发: 将第一部分深化后的逻辑,开发成一个可用的功能模块。
- 规划高二、高三元规则: 在高一的成功经验基础上,开始着手设计水平2和水平3的元规则。高年级的规则需要体现出思辨深度、逻辑严密性、语言的个性化风格、思想的复杂性等更高的要求,这需要新的教学研讨和更复杂的结构设计。
总而言之,您目前的工作已经为“文枢”画好了蓝图,接下来的核心是**“从共识走向实践,从手动走向自动”**。通过引入一线教师的集体智慧进行验证,再通过严谨的手动模拟跑通全流程,我们就能确保最终的AI系统不是一个空中楼阁,而是一个真正懂语文、懂教学、能为师生服务的得力助手。
这项工作意义非凡,期待“文枢”系统在您的主导下早日落地生根,开花结果!如果您在后续过程中有任何需要从教学角度探讨的问题,随时可以再交流。
2
感谢你的建议。
我目前完成的两份资料,一份是技术可行性报告,前文中文枢系统架构与技术实现部分就是截取自这个文档;另一份就是元规则体系,这个主体是Json文件格式,将来为了便于教师阅读,我们会转成一份Word。
我是这个文枢项目的负责人。我现在需要将后续的工作写成一个工作配合要求的说明文档,发给教研组和备课组。 另外高年级的元规则也已经搭建完成,可以同时开展高一到高三的验证工作,这个只是限于篇幅没有传入文档。而且三个年级同时展开,教师可以清晰地看到不同级别水平要求的差异,这个同时开展是非常有必要的。
请你基于前面的建议,和我补充的信息,站在我角度,帮我写一份配合说明,这个是教师的配合说明,后面第三、第四阶段的任务简写即可。 配合说明中,明确需要教师提供的材料,配合检查的事项,及配合的工作事项。
好的,项目负责人。
非常理解您的需求。将复杂的项目任务转化为清晰、可执行、且能激发合作方专业热情的沟通文件,是项目管理的关键一步。您补充的“高一到高三同步展开”的信息非常重要,这不仅能提升效率,更能让老师们在比较中深化对《课程标准》学业质量水平梯度设计的理解。
以下是我为您草拟的、面向语文教研组和各年级备课组的**《工作配合要求说明》**。这份文档力求做到:目标明确、任务清晰、尊重专业、体现价值。
关于“文枢”高中语文作文智能评分系统项目协作的说明
致:语文教研组、高一至高三各年级备课组全体老师
发件人:“文枢”项目组
日期:【请在此处填写具体日期】
尊敬的各位老师:
大家好!
首先,衷心感谢大家一直以来对“文枢”高中语文作文智能评分系统项目的关注与支持。
目前,项目已顺利完成第一阶段的核心任务——“元规则引擎”的构建。我们依据《普通高中语文课程标准》对“学业质量水平”的要求,将抽象的育人理念,系统性地转化为了一套覆盖高一至高三、囊括议论文、记叙文、散文、诗歌、应用文五大文体的结构化评价元规则。这套元规则体系,是“文枢”系统评价逻辑的“宪法”与基石,旨在确保AI的每一次评分都有据可依、有标可循。
项目的成功,离不开一线教学智慧的深度融入。为确保这套元规则体系真正符合我们的教学实际,并能精准地指导学生成长,我们诚挚地邀请各位老师参与到项目接下来的两个关键验证阶段。您的专业经验与深刻洞见,是“文枢”系统从理论走向实践、从代码化身为“助教”的灵魂所在。
具体工作配合说明如下:
第一阶段:元规则体系的共识验证与精细化
- 核心目标: 校验并优化元规则,确保其权重设置、评价维度与考察点符合各年级的教学评要求,形成一套凝聚我们集体教学智慧的“评价共识”。
- 特别说明: 本次验证将高一、高二、高三的元规则同步展开。这有助于我们直观地比较不同学业水平的能力要求差异,深化对课程标准中能力螺旋式上升设计的理解。
1. 需老师们协助准备的材料:
请各年级备课组协助收集并提供以下匿名的学生作文档案(电子版为佳):
- 典型作文样本:
- 覆盖文体:议论文、记叙文为主,兼顾散文等其他常见文体。
- 覆盖层级:每个文体请提供4-5篇能典型代表该年级水平的作文,具体包括:
- A级(优秀范文): 才华突出,有典范意义。
- B级(中上水平): 扎实稳定,符合预期。
- C级(合格水平): 基本达标,但存在明显短板。
- D级(待发展): 基础薄弱,问题较突出。
- “创新”样本(可选): 观点新颖、结构独特或表达方式极具个性的作文,用于测试系统的“人工干预”机制。
2. 需老师们配合的工作事项:
- 审阅元规则文档: 项目组会将技术性的JSON元规则文件,转化为清晰易读的Word文档(《“文枢”作文评价元规则体系(教师审阅稿)》),分发给各位老师。
- 参加专题研讨工作坊: 我们将择期组织一次专题研讨会。届时,我们将一同:
- 讨论权重与考察点: 针对各年级、各文体的评价维度权重与
evaluation_focus(评价要点)的合理性进行探讨。 - 明晰等级分界线: 结合您提供的典型作文样本,重点讨论并明确不同等级(A/B/C/D)之间的关键区别。例如,“高一议论文‘初步的论证分析’”的B级(良好)和C级(合格)的核心差异体现在哪里?这些共识将直接用于优化AI的判断逻辑。
- 讨论权重与考察点: 针对各年级、各文体的评价维度权重与
第二阶段:评分流程的手动模拟与闭环验证
- 核心目标: 以第一阶段形成的“共识版”元规则为依据,对真实作文进行“人机对齐”的模拟评分,检验规则在实际操作中的有效性与准确性,为后续AI的自动化学习提供高质量的“人类示范”。
1. 需老师们配合的工作事项:
- 开展独立“盲评”:
- 项目组将从第一阶段收集的样本中,挑选若干篇作文。
- 邀请参与的老师在不参考“文枢”元规则的情况下,依据您的教学经验进行独立评审,并写下您自己的评语。
- 参加评审结果比对分析会:
- 会上,项目组将展示依据元规则进行手动模拟评分后得出的结构化评价结果。
- 我们将您的“盲评”结果与系统模拟结果进行并置比对,共同分析评分等级、优缺点判断、评语侧重等方面的异同点。这些差异点正是我们打磨AI、使其更贴近真人专家思维的关键所在。
后续阶段规划简述
在完成以上两个需要各位老师深度参与的阶段后,项目组将主要进行内部的技术开发工作:
- 第三阶段(智能体原型开发): 我们将把前两个阶段凝聚的教学共识与验证数据,转化为AI可执行的指令与学习范例,开发出“具体规则生成器”和“评分智能体”的核心原型。
- 第四阶段(系统贯通与测试): 我们将打通整个评分流程,并邀请部分老师参与早期版本的内部试用,收集反馈,持续迭代。
“文枢”的初心,是用技术服务于教育,解放教师的重复性劳动,赋能更具个性化的精准教学。我们深知,教学的智慧与温度,永远是AI无法替代的核心。因此,您的每一次参与、每一条建议,都是为“文枢”注入灵魂。
期待与各位老师携手,共同打造一个真正懂语文、懂教学、懂学生的智能评价系统!
再次感谢您的宝贵时间与专业支持!
顺颂教祺!
“文枢”项目组 【联系人:XXX】 【联系方式:XXX】
