No es infinito porque se llenará la pila de llamadas y el sistema operativo terminará el proceso. O si en cada iteración se reserva memoria, también es posible que la memoria se termine antes (y entonces dependiendo del sistema, la máquina se peta o el proceso se termina). O si en cada iteración se llama al mismo programa otra vez, desembocamos en una fork bomb que, al menos en Linux, te peta el sistema.