Зависит от того, понимаете ли Вы субтитры. Если субтитры ничего не меняют, значит есть пробел в словарном запасе. Если с субтитрами все понятно, а на слух сложнее, тогда ничего страшного. Понимание придет со временем.
Даже если просто тупо смотреть, то понимание речи увеличится?