Si tienes clipping protection activado y el volúmen al máximo vas a perder dinámica, si no lo tienes activadio riesgo de clipping. Si reduces el volúmen del reproductor no le estás mandando el 100 por 100 al DAC.
Si la grabación es buena y no tienes la necesidad de que todas las canciones suenen al mismo nivel no usaría el ReplayGain.