Нет. Вообще пофиг будет. Вот если перестать пить чай с сахаром, то можно получить некоторый эффект, если есть избыток углеводов в рационе или хочется похудеть.
Мне в свое время отказ от двух ложек сахара в чае и кофе помогли сбросить довольно много лишних килограммов.
Добавилось про сахар, пока писал ответ. Лучше, действительно, сократить потребление обычного сахара, чем менять тип чая