subcircuit

本文在Llama-3.1-70B-Instruct中识别出一个'倒数子电路'，使模型能够跨各种任务追踪剩余令牌，并证明该子电路在不同上下文甚至不同模型中被复用。