Постепенно, чтобы не обидеть. Вероятно, то, что связывало вашу дружбу, больше не выполняет свою функцию, и это нормально. Интересы меняются.
Если нет предмета конфликта, в связи с чем хотите прекратить контакт, можете сказать, что будете уделять больше времени новому интересу, например, и видеться станете меньше. Так человек не будет думать, что есть какая-то дополнительная причина, обида или ещё что-то, что разводит вас в стороны.
Будьте честны.
Потихоньку, не спеша. Вести к тому, что вам больше не о чем говорить, у вас нет общих тем. Я думаю он сам вскоре это поймёт, и перестанет общаться. И в итоге, вы разойдётесь нормально.