doubao-seed-2-0-mini 在「项目成果案例展示画廊页」的评测结果

这是该 AI 模型在此测试用例上的详细评测结果。

基本信息

  • 模型名称:doubao-seed-2-0-mini
  • 用例名称:项目成果案例展示画廊页
  • 测试类型:网页生成
  • 评测维度:AI 生成单页 PPT

系统提示词(System Prompt)

这是给 AI 模型的背景设定和角色指令:

你是一名前端开发工程师。 代码要求: 1. 生成完整的单页 HTML 应用 2. CSS 和 JavaScript 内联在 HTML 文件中 3. 代码结构清晰,有适当注释

用户提示词(User Prompt)

这是用户给 AI 模型的具体任务要求:

创建一个项目成果案例展示卡片页面。 布局要求: - 采用「左图右文」的水平布局 - 左侧展示一张大尺寸项目实景图,图片带圆角样式 - 右侧展示项目的文字信息,包含以下四项内容: - 项目名称(标题) - 挑战(Challenge) - 解决方案(Solution) - 最终成果(Result) - 右下角放置一个醒目的「Success Case」标签 内容要求: - 使用一个虚构的建筑/工程类项目作为示例内容 - 图片可使用占位图(如 picsum.photos 或纯色背景) - 页面整体简洁清晰即可

任务要求

AI 模型需要满足以下要求:

  1. 页面采用左图右文的水平布局,结构正确
  2. 左侧图片有圆角样式,尺寸较大
  3. 右侧包含项目名称、挑战、解决方案、最终成果四项文字内容
  4. 右下角有「Success Case」标签且视觉醒目
  5. 代码在单个 HTML 文件中,可正常渲染

评测结果

综合得分

该模型在此用例的得分为:1.2 分(满分 100 分),未通过

基础难度评测结果

  • 得分:1.2 分
  • 通过状态:未通过

模型生成产物

以下是该模型针对此任务的实际生成内容:

系统报错(阶段=模型生成; 模块=app.services.inference.call_text_model; provider=volcengine; model=doubao-seed-2-0-mini-260215):[app.services.inference.call_text_model][provider=volcengine][model=doubao-seed-2-0-mini-260215] 流式调用超时: 超过 120.0s 没有收到新数据

AI 评审点评

以下是 AI 评审对该模型输出的点评:

【CLAUDE】模型在生成阶段发生超时错误(超过120秒未收到新数据),未能产出任何有效的HTML代码或页面内容。所有评分维度均为0分,属于完全失败的生成结果。 【GEMINI】由于模型在生成过程中发生流式调用超时错误,未能提供任何代码输出,导致所有评估维度均无法达成,评测结果为零分。 【KIMI】本次评测中,模型在生成阶段出现严重的技术故障——流式调用超时(超过120秒无响应),导致完全未输出任何HTML代码。这是一个基础设施层面的失败,而非内容质量层面的不足。从评测角度,所有功能要求、内容要求和视觉要求均未满足,因此各维度均计0分。建议排查模型服务稳定性或网络连接问题后重新进行测试。

进阶难度评测结果

  • 得分:1.2 分
  • 通过状态:未通过

模型生成产物

以下是该模型针对此任务的实际生成内容:

系统报错(阶段=模型生成; 模块=app.services.inference.call_text_model; provider=volcengine; model=doubao-seed-2-0-mini-260215):[app.services.inference.call_text_model][provider=volcengine][model=doubao-seed-2-0-mini-260215] 流式调用超时: 超过 120.0s 没有收到新数据

AI 评审点评

以下是 AI 评审对该模型输出的点评:

【CLAUDE】本次评测中,模型因流式调用超时(超过120秒未收到新数据)导致系统报错,未能生成任何有效的HTML代码输出。所有评分维度均为0分,属于完全失败的生成结果,与任务要求完全不符。 【GEMINI】由于模型在生成过程中发生流式调用超时错误,未能提供任何有效的代码输出,导致所有评测维度均无法达成,评分为 0 分。 【KIMI】本次评测中,模型(doubao-seed-2-0-mini-260215)在生成过程中发生流式调用超时错误,超过120秒未收到新数据,导致未输出任何有效HTML代码。所有评分维度均得0分,任务完全失败。这是一个基础设施/服务层面的故障,而非生成质量不足的问题。

困难难度评测结果

  • 得分:1.2 分
  • 通过状态:未通过

模型生成产物

以下是该模型针对此任务的实际生成内容:

系统报错(阶段=模型生成; 模块=app.services.inference.call_text_model; provider=volcengine; model=doubao-seed-2-0-mini-260215):[app.services.inference.call_text_model][provider=volcengine][model=doubao-seed-2-0-mini-260215] 流式调用超时: 超过 120.0s 没有收到新数据

AI 评审点评

以下是 AI 评审对该模型输出的点评:

【CLAUDE】本次评测中,模型因流式调用超时(超过120秒未收到新数据)未能生成任何有效输出,候选结果仅为系统错误信息。所有评分维度均为0分,任务完全未完成。 【GEMINI】由于模型在生成过程中发生流式调用超时错误,未能提供任何 HTML/CSS/JS 代码,导致所有评估维度均无法实现,评测结果为 0 分。 【KIMI】本次评测中,模型(doubao-seed-2-0-mini-260215)在生成过程中出现流式调用超时错误,未能在120秒内完成响应,导致未输出任何有效的HTML/CSS/JavaScript代码。因此,所有评分维度均无法获得分数,整体任务完全失败。该错误属于模型推理层面的技术故障,而非生成内容质量问题,但在评测框架下只能按零分处理。

相关链接

您可以通过以下链接查看更多相关内容:

加载中...