Что значит огромная? Наше Солнце в черную дыру сколлапсировать не может. Массы для этого не хватает. Но тем не менее удерживает планеты и иные тела, включая облако Оорта своим притяжением. А само составляет, если мне не изменяет память, порядка 98% массы всей солнечной системы. Но звезда в несколько десятков солнечных масс уже запросто может стать черной дырой на определенном этапе своего существования. По сравнению с этим мне даже сложно представить размеры дыры, находящейся в центре нашей галактики. Ведь она своим притяжением удерживает сотни тысяч звезд вокруг, аналогичные Солнцу. Это огромная? А есть галактики на много больше нашей.
Тем не менее бесконечный рост черных дыр практически невозможен. В конце концов все вещество, находящееся в относительной близости от дыры падает на неё. И рост прекращается. Более дальние объекты удерживаются на своих орбитах благодаря центробежным силам. Влияния на соседние галактики практически отсутствует из-за расстояния. Плюс из-за расширения вселенной большинство галактик со временем удаляются друг от друга.
Получается, что огромной черной дыры не может быть из за того что галактики находятся слишком далеко друг от друга?