Как минимум это будет не очень грамотно с точки зрения правил русского языка, так как глупым может быть человек, а по отношению к неодушевленным предметам корректно говорить "глупость".
Касаемо самого заявления, о том, что чьё-то мнение является глупостью, попробуйте поставить себя на место человека, которому так говорят, особенно в компании. Услышать такое не очень приятно.
Я щас не рассматриваю диалогов происходящих между двумя закадычными друзьями, у которых может быть нормой и не такие выражения использовать в отношении друг друга.
Так что в приличном обществе так говорить не принято. Воспитанный человек скажет, что он не согласен и обьяснит - почему.
Предлагаю сначала ответить на вопрос-почему мы противоречим сами себе.Говорим,что обмениваемся мнениями,но,при этом даем отрицательную оценку мнению оппонента.Это не будет конструктивным диалогом