Сбрасывается интерактив просто при перемещение курсора

При каждом движении интерактив заново пересчитывается. Нормально рендерит только, если не убирать курсив с окна рендера. Очень бесит, легче уже  по обычному рендерить, без интерактива

А вы на что рассчитывали? Что один раз посчитает и можно двигаться?

Хм, просто на движение курсора мышиного не должно реагировать - изменений в сцену это не вносит.

Бесит - не юзайте интерактив. Берегите нервы.