P202210012-KHP221122111.3YS-陈杰.一种问答对话模型效果评估方法-发明人确认稿-221027

本发明提供一种模型评估方法、装置、设备及介质，可以获得待用于评估问答对话模型的问答数据集；其中，问答数据集中包括至少一类问题对应的问答数据子集，各问答数据子集均包括相应类别问题下的至少一个问答对，各问答对均包括相对应的问题和标准答案；基于各问答数据子集，评估问答对话模型对各类别问题的回答效果。本发明可以有效评估问答对话模型对于不同类别问题的回答效果，从而有效评估问答对话模型的问题回答效果，定向优化问答对话模型对相应类别问题的处理性能，提高模型优化效率，减少相关训练资源的消耗。