No es normal tener ruido de fondo. Pon el volumen al máximo y trata de identificar el ruido, ver si es un sonido eléctrico (60 Hz) o es ruido del computador, lo que sería mucho más raro.

Prueba a mover los cables, alejarlos de otros cables, sobre todo de los cables de poder, o cambia los cables por unos de mejor calidad. Es mucho más frecuente tener ruido captado por los cables que por otros problemas.

Si el ruido sigue empieza a desconectar cosas, deja solo el amplificador y los parlantes, sin conexión al computador, y así puedes seguir para identificar el origen del ruido de fondo, que no creo sea de la tarjeta ya que esa es una muy buena tarjeta.