Hola,
Supongo que debes tener IP dinámica.
Te dejo un link de un tutorial para configurar el router con IP dinamica
http://www.adslzone.net/tutorial-35.7.html
Es para multipuesto q supongo que es lo que necesitas.
Si no conectas a internet es posible que hayas de cambiar las DNS. A mi las que me daban los de telefonica no me iban, así que use otras
http://www.adslayuda.com/modulo-FSDns.html
aquí estan las diferentes DNS que usan las operadoras. El caso de Telef. puedes usar las de telef. de españa o las de telef data.
Saludos