Стоит не уходить, а перевестись из одного ВУЗа в другой сдав разницу предметов.
Если такой возможности нет, то пока молод и есть желание получить другую профессию, нужно пользоваться. Дальше будет сложнее.
Надо понимать что этот переход действительно улучшить качество образования и будущую жизнь. Бегать из ВУЗа в ВУЗ в поисках себя , проблему не решит.
Уйти после второго курса ещё точно не поздно! Очень важно заниматься в жизни тем, что будет вам по душе, а не тратить время зря на то, что не приносит удовольствия. Мы живём только раз, вы вправе сделать так, чтобы это было интересно. :)