В ней увеличиваются все расстояния
Вселенная безгранична, но она необязательно бесконечна. У воздушного шарика, например, нет краев (границ), но площадь его конечна. Когда шарик надувают, растут и его площадь, и размеры всех рисунков на его поверхности.
Так и Вселенная может быть конечного объема, но не иметь границ. Тогда при расширении растут ее объем и все расстояния внутри. Но расширяться может и бесконечная Вселенная, в таком случае за счет изменения свойств пространства увеличиваются расстояния между галактиками.