Ничего страшного не произойдет, но не желательно. Наши органы чувств "отключаются", но слух всегда работает. В этом можно убедиться, например, поставив будильник :)
И лишний поток информации во время отдыха может нарушать ваш сон. Не гвооря уже о гигиенических аспектах закупореных ушей на 8 часов.