训练时随着epoch的增加，占用的内存越来越多，直到报错

[xinwaha]

首先感谢您出色的工作和分享，
我在使用单张3090显卡训练时，随着训练时随着epoch的增加，占用的内存越来越多，直到占用到32G，发生了报错，我尝试了去掉lib\core\function.pydef，validate中的绘图和不保存Tensorboard日志，但是仍然没有解决问题，
请问在您了解这个问题可能出现在哪吗？
非常感谢您能回复。