как минимум, при переходе с 3 вирея на next,если открывать старую сцену сделанную в 3 вирее - нужно обязательно перезапустить вирей со сбросом настроек.
и попробовать рендерить не irradiance map+light cache, а brute force+light cache. В next переписали код брут форса и теперь он не только не уступает иррадианс мапу, но во многом обгоняет по соотношению скорости и качества без всяких этих косяков с пятнами на карнизах и лепнине.