其乐融融 发布于 2023/10/28 02:22:23

近些年来，出现了以 BERT 为代表的预训练语言模型，将自然语言处理带入了一个新纪元：预训练语言模型 + 特定任务精调。本文试图梳理自然语言预训练技术的演进之路，以期和大家相互交流学习，不足、谬误之处望批评指正。

阅读(598)评论(0)赞 (16)标签：BERT / 语言模型 / 自然语言

其乐融融 发布于 2023/06/24 05:10:24

近些年来，出现了以 BERT 为代表的预训练语言模型，将自然语言处理带入了一个新纪元：预训练语言模型 + 特定任务精调。本文试图梳理自然语言预训练技术的演进之路，以期和大家相互交流学习，不足、谬误之处望批评指正。

阅读(682)评论(0)赞 (11)标签：BERT / 语言模型 / 自然语言