Las ultimas Ati a partir de la serie HD 2000( he tenido la HD2600XT agp8x) y ya han pasado por la HD3000 , HD4000 y estan para salir las HD5000, manejan audio( las integradas no lo se) y necesitas instalar sus drivers de audio para que funcione.
Las Nvidia solo algunas llevan ese conector en la placa para el audio, y creo que mas bien son las menos, incluso algunas que llevan ese conector no terminan de ir bien o directamente no funciona(hay algun caso por este foro), yo tengo en el ordenador del cuarto una Nvidia Geforce 8800 GTS 512(gama media-alta hace un par de años) y aunque va impreso en la placa de la grafica, no lleva el conector necesario para poder utilizarlo, pero si acelera video HD.

Sobre CUDA y la correspondiente de Ati (Ati Stream) mete en el google "CUDA vs Ati stream" y sale bastante informacion y comparativas, piensa que son compañias rivales y en cuanto una saca una novedad la otra saca su contrapartida, es una guerra continua en todos los frentes posibles(incluso en la Xbox y playstation llevan tecnologia de estas compañias)

Saludos..