首页 > TAG信息列表 > SpanBERT
SpanBERT
目录1. 前言2. BERT预训练任务回顾2.1 Masking Language Model (MLM)2.2 Next Word Prediction (NSP)3. SpanBERT的预训练任务3.1 Span Masking3.2 Span Boundary Object (SBO)3.3 MLM与SBO融合计算3.4 去掉NSP任务4. 相关资料 1. 前言 SpanBERT，见论文《SpanBERT: Improving Pre-t