# 评测报告及指标说明

评测报告围绕服务交付、交互体验、场景覆盖、性能质量四个关键指标展开，帮助开发者掌握当前小程序 AI 开发模式的质量表现。报告包含基础信息、评测结果、指标详情三大模块。

## 一、基础信息

评测报告的基础信息包含小程序 AppID、任务 ID、任务名称、评测时间、评测版本、评测模型以及用例覆盖情况。

![](https://res8.wxqcloud.qq.com.cn/wxdoc/a7bce64b-8b7e-42d7-8dd8-cdc141c215c9.png)

## 二、评测结果

### 2.1 评测结果包含两部分

| 分类 | 内容说明 |
| :--- | :--- |
| 四项关键指标 | 1. 服务交付：评测 AI 开发模式是否满足了用户需求，指标包含文字有效性、页面有效性
2. 交互体验：评测用户通过 AI 访问和操作小程序的页面流畅度
3. 性能质量：评测访问和操作小程序的 AI 相关接口质量和文档质量
4. 场景覆盖：评测 AI 开发模式在小程序核心功能 Top 1 和 Top 2 的覆盖率情况
说明：首次提交微信团队评测时，四项关键指标均需达到分数要求（服务交付 ≥ 80 分、交互体验 ≥ 80 分、性能质量 ≥ 80 分、场景覆盖 ≥ 60 分），才会被微信 AI 调用 |
| 综合评分 | 基于四项关键指标的分数加权得出
说明：综合评分的分数不作为首次提交微信团队评测时「是否通过」的依据，但该分数的高低会影响微信 AI 调用效果 |

### 2.2 评级说明

不同评测方式对应的指标评级说明如下：

（1）微信首次评测

| 评级 | 对应指标及分数区间 |
| :--- | :--- |
| 通过 | 服务交付 ≥ 80 分、交互体验 ≥ 80 分、性能质量 ≥ 80 分、场景覆盖 ≥ 60 分 |
| 不通过 | 任意一项未达到上述要求 |

（2）开发者自测或微信非首次评测

| 评级 | 对应指标及分数区间 |
| :--- | :--- |
| 表现较优 | 服务交付 ≥ 95 分、交互体验 ≥ 95 分、性能质量 ≥ 95 分、场景覆盖 ≥ 90 分 |
| 需要优化 | 80 ≤ 服务交付  开发者自测时，如未选择全部 SKILL 评测，则「场景覆盖」指标不具备参考意义。建议选择全部 SKILL 后看「场景覆盖」指标的表现。

| 指标说明 | 评测范围 |
| :--- | :--- |
| 核心场景覆盖率：评测 AI 开发模式在小程序核心功能 Top 1 和 Top 2 的覆盖率是否 ≥ 60% | 针对评测的全部 SKILL |

**计分方式**

场景覆盖得分 =（Top 1 覆盖率 × 100）×（Top 1 权重 /（Top 1 + Top 2 权重））+（Top 2 覆盖率 × 100）×（Top 2 权重 /（Top 1 + Top 2 权重））

示例：Top 1 覆盖率 90%，权重为 0.32，Top 2 覆盖率 85%，权重为 0.25，场景覆盖得分 = 90% × 100 ×（0.32/0.57）+ 85% × 100 ×（0.25/0.57）= 88.2 分

说明：微信通过分析开发者小程序现有功能，获得当前小程序核心功能 Top 1 和 Top 2（如咖啡点单、订单查询），再扫描开发者的 SKILL，获得开发者 SKILL 占小程序核心功能 Top 1 和 Top 2 的覆盖率比重。（非 Top 1 和 Top 2 的功能暂时不会参与计分，此项指标是希望开发者优先将小程序内用户高频使用的功能 AI 化）

## 四、关于评测报告的阅读与复核建议

开发者查看评测报告时，可参考以下建议：

### 4.1 阅读顺序

建议先看「评测结果」中四项关键指标（服务交付、交互体验、场景覆盖、性能质量）的表现，再看详情

- 如四项关键指标中有低于平台要求分数的，则需要重点关注该指标项，并查看对应的「指标详情」问题

- 如四项关键指标均高于平台要求分数，则查看对应的「指标详情」问题，逐步提升分数至 95 分以上

- 分数的高低会直接影响微信 AI 调用效果

### 4.2 复核建议

四项关键指标中，服务交付指标最为重要，决定了开发者提供的 AI 功能用户是否可用。建议开发者逐一查看出现问题的条目，并检查对应的运行轨迹，核对输入同样的 Query 下，真机、微信开发者工具对话调试是否有对应的问题复现：

- 如问题可在真机、微信开发者工具对话调试中复现，建议快速优化问题后重新评测

- 如相关 Query 在真机、微信开发者工具对话调试中表现正常，可前往 [微信开放社区 - 小程序 AI 能力专区](https://developers.weixin.qq.com/community/develop/mixflow) 反馈