理解语言模型计算序列概率与逐词生成文本的机制、贪婪策略的陷阱与 Beam Search 的改进,以及 Top-k、Top-p、Temperature 三种随机生成策略
标签:语言模型
共 2 篇相关内容,按发布时间排列。
梳理六类 NLP 任务(文本分类/回归、命名实体识别、翻译摘要、文本蕴含、语言模型)的输入输出形式、特点与难点,以及 n-gram 语言模型和大模型统一 NLP 的原理
共 2 篇相关内容,按发布时间排列。
理解语言模型计算序列概率与逐词生成文本的机制、贪婪策略的陷阱与 Beam Search 的改进,以及 Top-k、Top-p、Temperature 三种随机生成策略
梳理六类 NLP 任务(文本分类/回归、命名实体识别、翻译摘要、文本蕴含、语言模型)的输入输出形式、特点与难点,以及 n-gram 语言模型和大模型统一 NLP 的原理