Ping variando drasticamente(40ms a 700ms) a cada 5 segundos

Alguém me da uma solução doq fazer? Já falei com meu provedor e segundo ele, já trocou tanto o servidor (Ele pega internet de 3, wordnet, gpom e alguma outra aí) quanto o IP e mesmo assim continua horrível. Primeiro começou a ter problema de portas uns meses atrás e tive que usar VPN pra conseguir acessar e logar em algumas coisas, até aí tudo bem, mas há 2 semanas atrás começaram uma manutenção e meu ping não melhora desde então, meu provedor disse que já fez tudo que pudia e insiste no problema ser aqui(o que eu duvido mas quero tentar fazer oq eu puder antes de ter a dor de cabeça de trocar de provedor), alguma dica?