Una de las posibles razones, es que intentaste conectarte muchas veces desde el mismo equipo, dejando sesiones SSH sin finalizar y por lo tanto, agotaste las conexiones con tu IP.
¿Cómo solucionarlo? Entrando al servidor SSH y cerrando todas las conexiones.
COMO CERRAR CONEXIONES DE SSH
Es por eso de la importancia
en tu caso específico que no vas a interactuar físicamente con el equipo que instalaste como servidor, el uso de webmin para administrarlo por web y entres a los servicios para hacer esta labor.