Странно, не замечал такого. Дропы в некоторых сценах - да, но чтоб фпс планомерно снижался...
Хотя судя по комментам у игры в принципе утечки памяти бывают. Возможно, где-то в rt они есть.

так трассировка от SSR тем и отличается, что лучи считаются не только в экранном пространстве, поэтому от направления взгляда и не должно зависеть
а что проседает со временем, мб дело в смене времени суток?