Uno de los problemas en esta discusión es que no existe una única definición de infinito. En matemática, según cual sea el contexto, se utiliza el nombre infinito para referirse a distintas cosas.
Se han mencionado, y creo que son el tema fudamental de esta cadena, los cardinales infinitos, que se utilizan en teoría de conjuntos. Y como bien dijo antes, las dimensiones infinitas de espacios vectoriales corresponden al mismo concepto.
También se mencionó la idea de infinito que usualmente llamamos "orden de magnitud", con sus aplicaciones en cálculo. Esta noción no se relaciona con la anterior.
Por otro lado tenemos las ideas de infinito provenientes de geometría o topología. Por ejemplo, cuando al plano le agregamos "el punto del infinito" queda algo que topológicamente es equivalente a la superficie de una esfera. O en el plano proyectivo tenemos una colección de puntos del infinito que se corresponden con las direcciones.
Creo haber mencionado la construcción de números surreales de Conway (hay un articulo al respecto en wikipedia). Esta construcción contiene una idea de infinito que tampoco es compatible con las anteriores (no conozco si tiene o no alguna aplicación práctica, se nota claramente que la idea es diferente a las anteriores porque con ella se cumple que \( \infty + 1 > \infty \), cosa que no ocurre con los cardinales de Cantor si identificamos la suma con unión disjunta).
También está el "inifinito" que se corresponde con medida infinita.
En fin, existen diferentes definiciones, no compatibles entre sí, a las cuales podemos calificar de infinito. Quien las utiliza con cierta frecuencia, llega a considerarlas casi naturales. Pero hay que tener cuidado al mirar levemente sobre ellas, porque al mezclarlas se suele arribar a cosas contradictorias.
En general es un buen comienzo manejar matemática en forma intuitiva, pero tarde o temprano es necesario formalizar los conceptos para identificar las ideas que podrían fallar.