Como puedo conectasr 2 pc a mi router

Tengo dos pcs un portátil con windows xp y un sobremesa con win98se y quería conectar los dos a mi router para tener acceso simultaneo a internet.
He configurado mi router en modo multipuesto con ip estática. En principio funciona la conexión en cada uno de ellos individualmente (como si fuera multipuesto, pero nunca a la vez).
Gracias y si puedes contestame desde lo más básico