Bueno, hay grabaciones que pueden tener más ruido que otras...

Pero en principio la salida RCA debería ser la salida "de más calidad"; respecto a conectar los altavoces "directamente", no puedes si no son auto amplificados (activos).