# 冻结特征是否编码「提问问的是哪个属性」? 属性数 24(随机基线 4.17%);训练查询 1200 条,评测查询 300 条(**同为这些属性的不同改写,训练时从未见过**)。 | 指标 | 值 | |---|---:| | 训练集准确率 | 83.42% | | **评测集准确率(未见改写)** | **83.33%** | | 评测集·仅可回答子集 | 100.00% | | 随机基线 | 4.17% | ## 结构化拒答规则(判属性 → 查是否在库里) 规则:predict the asked-about attribute; refuse when the candidate set lacks it。 | 指标 | 值 | |---|---:| | 可回答 episode 中「预测属性在候选集内」 | **100.00%**(250 条) | | 未知 episode 中「预测属性在候选集内」 | **0.00%**(50 条) | | 未知拒答率(规则命中) | **100.00%** | | 已知问题被误拒率 | **0.00%** | | 混淆计数 | tp=50 fn=0 fp=0 tn=250 | ## 按属性(评测集可回答) | 属性 | 评测问法数 | 正确率 | |---|---:|---:| | 主管姓名 | 12 | 100.00% | | 入职年份 | 11 | 100.00% | | 出生城市 | 9 | 100.00% | | 办公城市 | 9 | 100.00% | | 午餐偏好 | 12 | 100.00% | | 咖啡口味 | 19 | 100.00% | | 团队名称 | 10 | 100.00% | | 客户名称 | 12 | 100.00% | | 宿舍楼号 | 14 | 100.00% | | 工位楼层 | 6 | 100.00% | | 常住城市 | 13 | 100.00% | | 常用编辑器 | 6 | 100.00% | | 手机尾号 | 11 | 100.00% | | 档案标识 | 16 | 100.00% | | 紧急联系人姓氏 | 7 | 100.00% | | 设备型号 | 7 | 100.00% | | 课程名称 | 12 | 100.00% | | 起床时间 | 12 | 100.00% | | 运动习惯 | 6 | 100.00% | | 通勤方式 | 8 | 100.00% | | 邮箱域名 | 7 | 100.00% | | 阅读工具 | 7 | 100.00% | | 项目代号 | 12 | 100.00% | | 默认语言 | 12 | 100.00% |