当我使用OFA文生图模型使用CPU时,模型写出速度非常缓慢,当我更新torch为GPU版本后,会报错torch.cuda.OutOfMemoryError: CUDA out of memory 显存的内存空间不够的问题,请问这种问题如何去解决? GPU至少需要多大的内存空间
我的torch版本为1.13.0 torch.cuda.is_available() # TRUE 显卡为GTX1060 6G版本
您好,目前CPU版本确实非常慢,GPU需要16G以上显存才能得到一个相对较好的效果。这主要是因为图片本身相当于极长的序列,生成长序列需要很大的显存。