Проблема с fps

Такая проблема, процессор Ryzen 5 2600, видюха RX 6600 XT, огромная разница в FPS, когда сморишь в сторону противника, даже если я его не вижу, просто смотрю в его сторону просадка со 160 fps падает до 78-120, а если отворачиваюсь то сразу возрастает, не пойму в чём причина.