上海交通大学智能座舱记忆数据集问卷
本研究用于评价智能座舱车机的长短期记忆能力:车机能否结合当前车辆状态、当前对话和过去形成的记忆,做出自然、正确且安全的车辆操作。
隐私与科研用途
问卷仅用于科研分析和数据集质量评估,不收集姓名、手机号等直接身份信息;基础信息和评分结果将以匿名方式保存和分析。
本次需要评价 3 个随机用户,共 33 条事件。
每次只评价当前这一条,提交后进入下一条。
每一道题,只需要看四件事
1
看车辆状态先判断道路、车速、天气和当前设备状态是否合理。
2
看当前对话确认用户想做什么,以及助手回复是否自然、正确。
3
看历史记忆不需要记忆就直接执行;需要时检查系统到底调用了哪条记忆。
4
看最终车辆操作判断实际执行的操作是否正确、安全。
查看更详细的评分说明
记忆判断:如果此前没有相关记忆,或者当前指令已经足够,就应直接执行;如果存在相关偏好、地点或习惯,则检查是否调用正确。
记忆维护:首次明确长期偏好可以形成新记忆;改变偏好时应更新旧记忆;取消长期需求时应删除对应记忆。
评分:1 分表示明显错误,5 分表示完全合理。普通事件不涉及危险行为时,无需评价危险行为处理。