Hola, me pasaba mas o menos lo mismo y lo solucioné de la manera más económica posible:
Conecto los cascos a la toma para cascos de la tv y conecto el euroconector al amplificador stereo (o al 2.1 guarro que todos tenemos para el ordenador), lo bueno es que el volumen que sale del euroconector es único y no se ve afectado si se sube o baja el volumen desde mando de la tv, controlo el volumen independientemente con el amplificador y la persona que usa los cascos lo controla con el mando de tv.