关键词
基于BERT和知识蒸馏的航空维修领域命名实体识别
作者: 顾佼佼   翟一琛   姬嗣愚   宗富强   来源: 电子测量技术 年份: 2023 文献类型 : 期刊 关键词: 知识蒸馏   词向量增强   伪标签增强   航空维修文本   命名实体识别   BERT  
描述: 向量表示,连接CRF模型得到序列的全局最优结果,在自建数据集上进行实验,F1值达到0.861。为压缩模型参数,使用训练好的BERT-CRF模型生成伪标签数据,结合知识蒸馏技术指导参数量较少的学生模型
基于BERT和知识蒸馏的航空维修领域命名实体识别
作者: 顾佼佼   翟一琛   姬嗣愚   宗富强   来源: 电子测量技术 年份: 2023 文献类型 : 期刊 关键词: 知识蒸馏   词向量增强   伪标签增强   航空维修文本   命名实体识别   BERT  
描述: 向量表示,连接CRF模型得到序列的全局最优结果,在自建数据集上进行实验,F1值达到0.861。为压缩模型参数,使用训练好的BERT-CRF模型生成伪标签数据,结合知识蒸馏技术指导参数量较少的学生模型
< 1
Rss订阅