podrias dejar a un computador como servidor, y conectar el otro a el y configurar una conexion de red...
Pero seria mucho mas facil y mas rapida la conexion conectandolo a un router el cual se compra... con el router puedes tener una conexion a internet, sin que el servidor este prendido, ya que con router no se necesita un computador servidor
...
Suerte... Si no sabes hacer conexiones pidelas aqui...:)