Olha, a internet é um negócio complicado.
Quando funciona bem é ótimo, quando começa a dar esses problemas é um ódio.
Apesar de ocorrer algumas instabilidades no servidor são alguns DCs pontuais e algumas rotas específicas.
Nada que chegue nesse nível que você está descrevendo no tópico.
No caso, você está usando Claro/NET/Virtua?
Já tentou verificar se você está usando CGNAT?
A maneira mais simples que eu sei que você poderia identificar isso seria:
1. Acessar algum site que retorne o seu ip público (Por exemplo:
https://api.ipify.org/)
2. Acessar o seu modem/roteador e verificar se o IP da conexão WAN é igual ao ip público acima ou se ele começa com 100.x.x.x
Acho que essa é uma informação interessante para tentarmos diagnosticar esse problema.
PS: Nas rotas com IPv6 você também fica tomando DC ou apenas o ping está alto?
[]'s