Yo el central lo dejaria al mismo nivel, y los graves por debajo de 80 hz los mandaria solo al subwoofer ya que es el que mejor los reproducirá. Procura cortar todos los altavoces a 80hz y sobretodo manda esas frecuencias unicamente al sub.
Mientras el subwoofer no distorsione es correcto a ese nivel. Lo ideal es que con el sonómetro compruebes que todos los canales suenan coherentemente.

En absoluto es una molestia.

Saludos cordiales