打破黑盒:无需训练复制特定层,24B模型逻辑推理能力暴涨245%
Hacker News热门项目显示,通过复制Transformer中的特定“推理电路”层,可在无需任何训练的情况下显著提升模型智商。在Devstral-24B模型上复制第12-14层,其逻辑推理得分从0.22跃升至0.76。该工具利用AMD...
标签索引
这个标签下有 1 篇文章。按时间回看相关判断与实践记录。
标签精选
Hacker News热门项目显示,通过复制Transformer中的特定“推理电路”层,可在无需任何训练的情况下显著提升模型智商。在Devstral-24B模型上复制第12-14层,其逻辑推理得分从0.22跃升至0.76。该工具利用AMD...