Это очень странное поведение. Не сталкивался с таким. А объема VRam хватает? Если памяти мало, могут происходить всякие чудеса в теории, но чаще оно просто вылетает.
Если памяти сопля в соплю, то возможно перезапуск будет единственным вариантом без замены видяхи.