Потому что мат — это не синоним свободы.
Нецензурная лексика, в большинстве случаев (оставим вопросы, связанные с этимологией/морфологией/ etc.), легко заменяется другими словами. То есть на свободу слова никак не влияет.
А вот на культурный уровень влияет.