j'avais ce soucis aussi il ya quelque jours, alors pour baisser la latence tu peux faire une manip dans le registre qui te ferras baisser le ping de 200 ms en moyenne ( une recherche google sur la modification de registre pour la latence et tu trouveras plein de tuto)
Sinon ca peut venir de ton routeur, tu es chez quel fournisseur internet?