Prueba a hacer ping, para que lo hagas es muy simple.
inicio ejecutar
escribes cmd
te aparecera la consola de msdos
y escribes ping la ip del otro ordenador
Si te responde es que hay conexion entre los dos ordenadores, de todas formas hazlo en los dos ordenadores.
Windows xp tiene un asistente para configurar la red, ( cuando lo mire te digo donde). Si lo ves tienes que dar a configurar la red. Pero elije la opcio de tu equipo esta directamente conectado a internet. Eso es lo que hice yo, teniendo dos equipos conectados por un switch. Y de momento no tengo queja.
Haga clic en Inicio y vaya hacia Programas. Después haga clic en Accesorios, Comunicaciones, y entonces Asistente para configuración de red.
P.D. me lei mas o menos lo del tema, pero no me entere bien del problema.