CPU com picos de MS

Desde o lançamento da liga venho tendo problemas com picos de de ms por parte da cpu segundo o jogo, o ms que está em média de 8 ou 10 salta pra 300 enquanto se movimenta ou aparece npc, isso constantemente independente dos gráficos, já tentei de tudo porém nada resolve e dando uma leve pesquisada vi que outros players estão com mesmo problema, ao ligar a opção engine multitheading desativando ela os travamentos param porém o fps não fica legal, o computador de capacidade de rodar o jogo tranquilamente e isso só me acontece com o POE .
PC:XEON 2650
16GB DE RAM
RX 580 8GB
SSD SÓ PRA O POE.