Si no tienes control independiente de cada uno es imposible: puedes elegir una distancia "media" para que el delay sea el menor posible en el peor de los casos, pero no te preocupes mucho por el delay en sí (ya has visto las propias cajas el lío que tienen en sus propios crossovers incluso en las de "supuesta gama muy alta"... y además en frecuencias a la que somos muchísimo más sensibles al delay que en 80-90hz).
Recordar que las distancias se miden desde el centro de los drivers (no desde el amortiguador)
Un saludete