Te aparecerán quizás por la wifi.

Prueba a desconectar la wifi de ambos pc para forzar a que coja Ethernet. Mira también en propiedades de red si te esta dando dns y resto de parámetros.

Prueba a meterlos a mano siguiendo los datos que te de la wifi. Tambien puedes asignar una ip estatica a cada equipo dentro del rango de tu red incluso asignandola en el router.