← 全部标签

标签:实验验证

共 1 篇相关内容,按发布时间排列。

LLaMA(11):用代码验证 RoPE 的远程衰减

修正并扩展 ROPE.ipynb 的实验,用位置核曲线、平移不变测试和距离分桶统计理解 RoPE 的振荡与远程衰减倾向。