Вы собираетесь работать с машинным обучением - физика Вам пригодится, начиная от того, чтобы понимать как работает компьютер на самом низком уровне, заканчивая различными формулами, расчетами, статистиками, которые необходимы в коде программы. Ну и конечно же, программист - техническая профессия, любая техническая профессия требует физику, уж так устоялось.
Работать планирую с машинным обучением. Отчисление меня не беспокоит