Проблема, возможно, кроется в вашем провайдере и в том, каким образом он раздаёт интернет вам и вашим соседям. Т.е. сделано какое-то подобие ВПН и вы, ваши соседи, ваш дом и окрестности все пользуетесь одним узким каналом, вот пинг и падает.
Ещё проблема может быть в вашем тарифном плане и ограничениях, накладываемых этим планом на подключение.