si que puedes, puedes conectar todos los que quieras en una red, siempre que no tengan la misma ip.
Cabia solo el ultimo numero de la ip del equipo, y el resto lo dejas igual. mascara de subred, puerta de enlace, dns etc. (bueno dns puedes poner otras pero paque
)