Фокус в том, что вся Вселенная - это и есть та точка, которая когда-то была очень маленькой, а потом расширилась. Мы внутри этой "точки". А если учесть, что Вселенная расширяется не равномерно, то, даже найдя её центр, нельзя будет сказать, что она расширялась из этого центра, т.к. при неравномерном расширении центр смещался неоднократно.