Дело не в вас, а в том, что у вас с молодым человеком разное чувство юмора. И это совершенно нормально. Но если его шутки вас обижают, то об этом непременно следует поговорить.
Конечно не в тебе. У каждого человека разное понимание юмора. Я думаю тебе стоит поговорить с ним тет а тет и объяснить, что его юмор тебе непонятен ( может даже неприятен?)