语义理解模型的鲁棒性评估方法、装置及计算机设备

摘要

本申请涉及一种语义理解模型的鲁棒性评估方法、装置及计算机设备。方法包括：基于至少一种预设方式，对原始测试集作语义一致变换，得到每种预设方式对应的增强测试集；基于每种预设方式对应的增强测试集对语义理解模型进行测试，得到每种预设方式对应的测试结果，基于原始测试集对语义理解模型进行测试，得到原始测试集对应的测试结果；基于原始测试集对应的测试结果及每种预设方式对应的测试结果，评估语义理解模型的鲁棒性。由于在生成增强数据时，可通过维持语义一致性以贴合口语化信息的特征，从而使得生成的增强数据不会改变语义，进而不会影响到对语义理解模型的鲁棒性评估。因此，可以保证语义理解模型鲁棒性评估结果的准确性。