首页> 中国专利> 一种用于低资源黏着性语言文本分类的语言模型微调方法

一种用于低资源黏着性语言文本分类的语言模型微调方法

页面导航

摘要
著录项
法律信息
相似文献

摘要

本发明公开了一种用于低资源黏着性语言文本分类的语言模型微调方法，涉及语言处理技术领域，通过形态学分析和词干提取构建低噪声微调数据集，在该数据集上对跨语言预训练模型进行微调，为下游文本分类任务提供有意义且易于使用的特征提取器，从预先训练的语言模型中更好地选择相关的语义和句法信息，并将这些特征用于下游文本分类任务。

著录项

公开/公告号CN113032559A

专利类型发明专利
公开/公告日2021-06-25

原文格式PDF
申请/专利权人新疆大学;
展开▼

申请/专利号CN202110277553.1
发明设计人柯尊旺;李哲;蔡茂昌;曹如鹏;
展开▼

申请日2021-03-15
分类号G06F16/35(20190101);G06F40/211(20200101);G06F40/284(20200101);G06F40/30(20200101);G06N3/04(20060101);G06N3/08(20060101);
代理机构61223 西安铭泽知识产权代理事务所(普通合伙);
代理人王力文
地址 830008 新疆维吾尔自治区乌鲁木齐市沙依巴克区西北路499号新大北校区
入库时间 2023-06-19 11:35:49

法律信息

法律状态公告日

法律状态信息

法律状态
2023-04-28

授权

发明专利权授予

相似文献

专利
中文文献
外文文献

1. 一种用于低资源黏着性语言文本分类的语言模型微调方法 [P] . 中国专利： CN113032559A . 2021-06-25
2. 一种面向多任务语言模型的元-知识微调方法及平台 [P] . 中国专利： CN112100383B . 2021.02.19
3. Language model compression device, language model access device, language model compression method, language model access method, language model compression program, language model access program [P] . 日本专利： JP5349193B2 . 2013-11-20

机译：语言模型压缩装置，语言模型访问装置，语言模型压缩方法，语言模型访问方法，语言模型压缩程序，语言模型访问程序
4. LANGUAGE MODEL COMPRESSION DEVICE, ACCESS DEVICE OF LANGUAGE MODEL, LANGUAGE MODEL COMPRESSION METHOD, ACCESS METHOD OF LANGUAGE MODEL, LANGUAGE MODEL COMPRESSION PROGRAM, AND ACCESS PROGRAM OF LANGUAGE MODEL [P] . 日本专利： JP2011033806A . 2011-02-17

机译：语言模型压缩装置，语言模型的访问装置，语言模型压缩方法，语言模型的访问方法，语言模型压缩程序和语言模型的访问程序
5. LANGUAGE MODEL LEARNING METHOD, DEVICE, AND PROGRAM, AND RECORDING MEDIUM FOR THE LANGUAGE MODEL LEARNING PROGRAM, AND SPEECH RECOGNITION METHOD, DEVICE AND PROGRAM USING LANGUAGE MODEL LEARNING, AND RECORDING MEDIUM FOR THE SPEECH RECOGNITION PROGRAM [P] . 日本专利： JP2003263187A . 2003-09-19

机译：语言模型学习方法，装置和程序，以及用于语言模型学习程序的记录介质，以及使用语言模型学习的语音识别方法，设备和程序，以及用于语音识别程序的记录介质