qwen3.8-flash 在「多重约束」的评测结果
这是该 AI 模型在此测试用例上的详细评测结果。
基本信息
- 模型名称:qwen3.8-flash
- 用例名称:多重约束
- 测试类型:文本生成
- 评测维度:指令遵循
系统提示词(System Prompt)
这是给 AI 模型的背景设定和角色指令:
你是一名专业的文字创作助手,擅长在特定约束条件下进行精准的文本生成。 回答要求: 1. 在生成文本前,先在内部逐字检查是否包含违禁字,确认无误后再输出。 2. 输出内容须为一段完整、通顺、有意义的话,不得出现乱码或无意义堆砌。 3. 严格遵守所有明确列出的负向约束(违禁字/词),这是最高优先级要求。 4. 输出内容应语义连贯,符合日常表达习惯。
用户提示词(User Prompt)
这是用户给 AI 模型的具体任务要求:
请写一段介绍「春天」的话(60字左右),但全文中不能出现以下两个字: 【违禁字】:美、花 要求: - 内容主题为「春天」,需描述春天的某些特征或感受。 - 全文任意位置(包括标点之间)均不得出现「美」字或「花」字。 - 字数控制在50~70字之间。 - 语句通顺,表达自然。
任务要求
AI 模型需要满足以下要求:
- 【核心约束】全文不得出现「美」字,违反此条直接判定为不合格。
- 【核心约束】全文不得出现「花」字,违反此条直接判定为不合格。
- 【字数要求】正文字数(不含标点)在50~70字之间,超出或不足均视为部分失分。
- 【主题相关性】内容须围绕「春天」展开,能体现春天的至少一个具体特征(如气温、植物、天气、动物等)。
- 【语义连贯性】句子通顺自然,无明显语病或逻辑断裂。
评测结果
综合得分
该模型在此用例的得分为:96.2 分(满分 100 分),已通过
基础难度评测结果
- 得分:96.2 分
- 通过状态:已通过
模型生成产物
以下是该模型针对此任务的实际生成内容:
春天来了,风变暖,柳芽初绿,溪水轻响。燕子归来,田野铺上新衣。阳光温柔,草木萌发,万物舒展。人们带着希望出门,感受季节的清新、生机与暖意。
AI 评审点评
以下是 AI 评审对该模型输出的点评:
【CLAUDE】候选输出在三个核心维度上均表现优秀:严格规避了两个违禁字、字数符合规定区间;行文流畅自然、逻辑层次分明;内容涵盖春天多种典型特征,画面生动。整体是一段质量较高、约束遵循完整的春天描写短文,达到并超出及格线,属于优质输出。 【GEMINI】该生成结果表现完美。在严格遵守两个高频违禁字(美、花)的前提下,字数控制精准,且写出了一段意境优美、细节丰富、通顺自然的春天介绍,非常优秀。 【KIMI】该候选输出严格满足所有硬性约束,未出现违禁字且字数合规。文本语义连贯,表达自然,通过多个春天意象构建了较为丰富的春日图景。在内容丰富度上虽有多元素覆盖,但具体细节的生动性略逊于参考范例,整体属于高质量完成。
进阶难度评测结果
- 得分:87.1 分
- 通过状态:已通过
模型生成产物
以下是该模型针对此任务的实际生成内容:
中国古代有四项影响深远的成果:造纸以植物纤维制成轻便纸张,便于书写、保存与流传;印刷由雕版发展到活字,提高了书籍复制效率,扩大知识传播;火药源于炼丹实践,后用于采矿、筑路及军事,改变工程与战争形态;指南针利用磁针定向,助力航海、测量与地理探索。这些成果多由工匠、学者在长期实践中总结而成,并随交流传入各地,对世界文明进程产生深远影响。它们也促进了教育普及与跨地域往来。从记录到出行,社会面貌因此更新。
AI 评审点评
以下是 AI 评审对该模型输出的点评:
【CLAUDE】候选输出成功规避全部违禁词,四项内容全覆盖,约束遵循表现良好,是本次评测的主要亮点。字数略低于180字下限(约差1字),处于临界状态。行文较为流畅,但采用长句分号并列的结构显得有些单调,结尾两句语义偏空泛,拉低了整体的逻辑表达质量。内容准确但历史细节(如关键人物、具体朝代)较为缺失,与参考答案的信息深度仍有差距。整体属于完成度较高、但精细度有限的中等水平输出。 【GEMINI】这是一份极高质量的回答。模型在面对严格的词汇限制和字数限制时,展现了极强的文本控制力与写作水平。不仅完美避开了所有违禁词,字数恰好控制在200字,而且行文流畅、逻辑严密、信息丰富,是一次非常成功的受限文本生成。 【KIMI】该输出在约束遵循方面表现优异,零违禁词、全覆盖、字数达标三项硬性要求全部通过。语义层面基本连贯,但为回避禁词而产生的替代表达略显迂回,末段收束稍显仓促。内容层面准确但单薄,缺乏具体朝代、人物与世界历史影响的纵深展开,知识性弱于参考标准。整体为合格偏上的应试型输出,约束驾驭能力强,但内容打磨空间较大。
困难难度评测结果
- 得分:73.3 分
- 通过状态:已通过
模型生成产物
以下是该模型针对此任务的实际生成内容:
她三月推门进。他抬眼三秒。两人目光相遇。一笑化解千愁。她递来两枚糖。他接住七分甜。夜半共撑一伞。雨点敲三下窗。她低声数三息。他伸手理三折。三句约定成立。五更同赴长路。她鞋沾两寸泥。他袖藏一枚花。十指相扣不松。百年只此一人。她煮一碗热粥。他留一盏清茶。两杯碰出轻响。三秋盼一次归。她信里写四字。他读千遍不腻。九转街角重逢。她发梢带二寸风。他肩落七片叶。十步内同避雨。一伞遮两身。三盏灯候归人。五更鸡催晨。两人共炊烟。十指抚旧痕。百夜守一灯。千里寄一书。八行字最重。一生只一人。两鬓共晨露。十载同风雨。九死亦无悔。一诺抵千言。两人共一灯。三杯暖寒夜。四季同檐下。五更听雨眠。六桥共步长。七弦和一声。八荒同归路。九曲绕村行。十里荷风来。百步回头望。千言落一吻。万夜守一窗。一灯照两人。三秋共一舟。五更候一归。九死换一笑。百折仍并肩。千里亦同行。一诺重如山。两肩共风雨。十指绕三圈。
AI 评审点评
以下是 AI 评审对该模型输出的点评:
【CLAUDE】该候选输出在约束遵循方面表现优异,四项硬性约束(禁用词、问号、数字覆盖、句长)均近乎零违规,字数也达标,展示了在极端限制下逐条遵从规则的能力。然而,语义连贯性和内容丰富度明显受损——尤其是后半段演变为机械的数字递增填充,大量句子意义空洞、语义生硬,与爱情主题的关联流于表面。整体而言,这是一篇「规则达标但文学价值有限」的作品,在约束服从上值得肯定,在文学质量上仍有较大提升空间。 【GEMINI】这是一篇在极端严苛约束下完成的高质量汉语短文。模型展现了极其出色的约束控制能力,在违禁词、数字覆盖、句长限制和总字数上均做到了零违规。虽然受限于“每句必带数字且字数极短”的限制,后半部分行文呈现出一定的碎片化和意象重复,但整体依然成功营造了温婉、坚贞的爱情意境,是一次非常成功的受限写作生成。 【KIMI】该候选输出采取了极端策略应对约束:全部使用5-7字短句、全部以句号分隔、高频复用意象和数字,以此在技术上满足'句长≤15字''每句含数字''无违禁词'等硬性指标。然而,这种策略导致文章严重碎片化,语义断裂,内容空洞重复,完全丧失了短文应有的连贯性和文学性。虽然硬性约束的违规较少(仅'息''愁''悔'含'心'部存在争议),但作者明显以'最小代价'规避约束,而非在约束内创作优质内容。参考答案展示了如何在同样约束下写出连贯、有层次、有细节的短文(分场景叙事:初遇、相处、深夜、分离、重逢、升华),而该候选输出与之差距巨大。整体而言,这是一次'合规但失败'的创作:技术指标勉强达标,艺术价值和阅读体验极差。
相关链接
您可以通过以下链接查看更多相关内容: