Conectar dos equipos

Buenas tardes.
Tengo dos equipos informáticos, uno con windows xp y otro con windows vista. Tengo el router de telefónica de cuatro salidas, para conexión a internet . Me han dicho que puedo tener los dos equipos en red con este router configurando los dos equipos. Mi consulta esto lo puedo conectar, si es así, me gustaría saber como lo puedo hacer. Y otra duda que tengo si conecto los dos equipos en red, pueden entrar desde la calle a mis equipos.
Gracias de antemano.