recurrent-gpt

RecurrentGPT引入了一种递归深度Transformer，它使用门控调制来迭代重用共享层，与标准Transformer相比，以更少的参数实现了竞争性的准确性并提高了内存效率。