归档
时光荏苒,文字留痕
共 51 篇文章
转码学习day8
暂无摘要...
转码学习day7
暂无摘要...
转码学习day6
暂无摘要...
Have a little break
暂无摘要...
转码学习day4
今天依旧中午起,背单词,吃午饭,2点开始学习。 lc:2、226、22、74、55、45 继续学习RoPE,昨天提到分组依旧是两两分组,延续了SinPE的做法 对向量 q的维度进行分组操作, 相邻的两个维度作为一组, 一共可以分成d/2组, 每组旋转m*θi度。$\theta_i=10000^{-2
转码学习day3
今天睡了9个小时起床,吃了个饭下午两点开始学习。 把昨天transformer最后组装的一点代码看完,开始刷力扣。 lc:21、104(lfs) 、75、46 、78 晚上尝试从数学上推导了一下RoPE和Sin PE。 Sin PE低维捕捉长距离的相对位置,高维捕捉临近位置,因为分母大小不同,这是直
转码学习day2
暂无摘要...
转码学习day1
暂无摘要...
期末考后的荒芜假期
暂无摘要...
强化学习经典算法可视化
暂无摘要...