Всё дело в привычке. Слышащий человек привыкает к звукам, для него они тождественны течению жизни. Полнейшая тишина с ним происходит слишком редко, это непривычное состояние. Для глухого же человека отсутствие звуков – не мучение, а данность, обычный мир с детства. Поэтому угнетающего контраста не создаётся, это очевидно.