Он что-то думает про Вас. Либо это его собственные умозаключения либо ему кто-то что-то сказал и он боится сказать Вам в лицо то о чем думает. Могу предположить, что у вас был секс с кем-то и ему об этом рассказали. В его мировоззрении тот поступок, который он связывает с вами не может совершить его девушка (девушка мечты).
Для Вас его поведение неприятно и я понимаю это. И еще я знаю, что это его проблема. Вашей вины в его поведении нет. Просто пожалейте его мысленно, не злитесь на него. Со временем он будет это вспоминать и сожалеть. Ему будет стыдно вспоминать своё поведение по отношению к Вам.