Ох. Вы видимо невнимательно читали книжку, сейчас все объясню, но сначала замечу, что 4 измерение в нашей вселенной общепринято считается временем. 1,2,3-высота, ширина, глубина, 4-время.
Итак, начнём. Дело в том, что здания, строения магов теоретически недоступны для маглов. Они не могут в них попасть по причине отсутствия в себе "гена магии" или если быть точным - магических способностей. Маг может пройти на платформу 9 и 3/4, т.к. стена пропускает его. Магл же не сможет. Он увидит проходящего в стену человека, но сам пройти не сможет. Человек без магических способностей/магл будет идти по большому пустырю, хотя на самом деле там стоит Хогвартс. Вообще в книгах этого не упоминается, но практически все волшебные изделия невидимы для маглов. Вспомним тот же самый автобус, который плющило. Маглы это видели? Нет. Маглы так же не могут видеть волшебных существ типа единорогов или дементоров. Хотя если маг позволит, магл сможет попасть в "закрытый" магический мир.
Прошу заметить что маглы все-таки могут видеть здание Хогвартса, но в их глазах оно исказится и станет для них заброшенным