Claro, es quitar ese segundo router y poner el switch que te mostré días atrás de 5 bocas.
La wifi para los moviles la tomas del router del operador y todo lo que no sea móviles por cable a una boca libre de esas 4.

Si el de 5 es justo, por muy poco mas lo hay de 8, a 22 €

https://amzn.eu/d/06DcZITH

Quitas el empalme, metes el cable que viene de arriba a la boca 1, y las sobrantes cada aparato que tenga Ethernet.

Ya no precisas empalmador ya que esa caja hace lo mismo. Entra 1GB y da 1GB a cada boca.