Имхо, лучше всего либо сразу учиться на конкретную специальность, либо иметь работу, которая сможет вас обеспечить, пока вы учитесь на желанную профессию.
В защиту вашей идеи скажу, что на факультетах графического дизайна порой обучают и анимации, и свою первую покадровую анимацию я нарисовал именно для курсового проекта.
Плюс графический дизайнер может работать на фрилансе удалённо и получать довольно приличные деньги (особенно для небольшого города), но фриланс - очень трудозатратная тема, требующая много времени и сил. В сравнении с обыкновенной офисной работой 5/2.