I test de audio digital: WAV vs OGG ¿qué nos estamos perdiendo?

Para mí criterio (no quiero generalizar) lo único que le hace perder una "total validez" si nos ponemos objetivamente meticulosos es que con 5 muestras con posibilidad AB o BA (si no he entendido mal la comparativa) no se elimina por completo el factor azar... es decir, puedes acertar el resultado de las 5 pistas sin necesidad siquiera de escucharlas según estadísticas (aunque también sería tener cierto nivel "de suerte", o "más suerte" que si el número de muestras a probar fueran menores y también acertáramos todas)... ya que para eliminar totalmente el azar se necesita al menos un acierto mínimo de 9 en 10 intentos (que no tiene equivalencia o comparación alguna con acertar 5 de 5, 4 de 4, 3 de 3, o un número menor de muestras). Aquí dejo también el offtopic por mi parte sobre la validez o no de la prueba.

Aún así, acertar 5 de 5 ya tendría "cierta relevancia".


Por supuesto, mi admiración a pablopi por la iniciativa y el tiempo que se por experiencia requieren estos tipos de pruebas (pocos hemos planteado pruebas similares y creo sinceramente que a parte de la trabajera son interesantísimas).


Un saludete

Iniciado por pablopi

Así es, Sanco. Pero como algunos usuarios ya desde el principio del hilo lo han hecho he preferido no decir nada al respecto y sutilmente recordar que hay un formulario disponible.

Si quieres que elimine mis respuestas públicas solo tiene que decirmelo; no tengo problema alguno en hacerlo (si has apuntado o guardardo un pantallazo de las mismas).


Un saludete

Bueno, primero que nada gracias a todos por vuestros comentarios, me lo apunto todo.

Comento algunas cosillas acerca del planteamiento, la intencionalidad y el análisis posterior.

De entrada la prueba era incluso más sencilla. El objetivo siempre ha sido facilitar al máximo la participación, aún en detrimento de la rigurosidad del protocolo de prueba. El simple hecho de que se puedan descargar los archivos ya impide tenerlo todo controlado, dado que aunque he tomado medidas para que no se puedan distinguir simplemente comparando tamaños, otro tipo de análisis más sofisticado podría ayudar. Por otro lado, forzar la escucha desde el navegador no me ha parecido aceptable puesto que nos obliga a utilizar el PC (con el audio saliendo además a través del mezclador del sistema) e impediría el uso en muchos casos del equipo principal.

Teniendo eso perdido de antemano hay que confiar en la honestidad de los probadores, no hay otra, y tomarse esto como lo que es, una prueba de aficionados en la que solo pretendo pasar un buen rato con todo esto comentando los resultados con otros foreros, ver si podemos llegar a alguna conclusión interesante y afinar el protocolo para futuros experimentos. Y hacerlo todo del modo más transparente posible.

Contestando a acting, cuando se cierre el test publicaré todos los datos recogidos (sin direcciones de email) en formato de hoja de cálculo para que cada cual los analice del derecho y del revés. Este es un test open source .

Mi intención, además, es verificar si una determinada característica del probador y su equipo (altavoces / auriculares, edad, perfil, nivel del equipo, uso de EQ o acondicionamiento pasivo, etc.) por las que se pregunta en las secciones 2 y 3 del cuestionario resulta significativa en los porcentajes de acierto, tanto globales como por par de pistas. Esto llevará un poco más de curro, pero espero que aquí precisamente esté el meollo del asunto. Soy consciente de que, realmente, de un test como este jamás se podría concluir un rotundo y general "no hay diferencias". Para ello habría que probar todas las pistas del mundo en todos los equipos. Pero del cruce de variables, efectuado pista a pista, probablemente obtengamos conclusiones, menos generales, pero en cualquier caso espero que valiosas.

Con respecto al sesgo que supone la publicación de los resultados de cada uno (o las impresiones personales), le doy la razón a Sanco en que lo ideal sería que desaparecieran, aunque espero que el (previsible) elevado número de participantes compense esto. Por el momento he preferido mantenerme al margen de eso y dejar que el hilo fluyera dado que ha habido comentarios interesantes, más allá de las respuestas específicas al test.

En cualquier caso, si los que las habéis publicado editáis los mensajes y borráis las respuestas explícitas mejor que mejor.

Nuevamente, gracias a todos.

Iniciado por atcing

Si quieres que elimine mis respuestas públicas solo tiene que decirmelo; no tengo problema alguno en hacerlo (si has apuntado o guardardo un pantallazo de las mismas).

Las tengo, las tengo. Disculpa, se me pasó decírtelo cuando me indicaste las características del equipo unos cuantos mensajes atrás.

Puede usted proceder a borrarlas .

Iniciado por pablopi

Las tengo, las tengo. Disculpa, se me pasó decírtelo cuando me indicaste las características del equipo unos cuantos mensajes atrás.

Puede usted proceder a borrarlas .

Lo acabó de hacer

Por cierto, hay una cita tuya sobre mi respuestas en la primera página que creo también se debería borrar/editar.

Un saludete

Ups, gracias, no me había dado cuenta.

Tranquilo, tus respuestas están guardaditas. Eres el probador nº 26 .

Iniciado por pablopi

Ups, gracias, no me había dado cuenta.

Tranquilo, tus respuestas están guardaditas. Eres el probador nº 26 .

Gracias. Menudo ritmo llevas!

Un saludete

Al hilo de lo que comentabais acerca de acertar de chiripa...

La probabilidad de que un usuario identifique correctamente las 5 pistas WAV es:

p = Casos favorables / Casos posibles (puesto que se trata de sucesos independientes)

p = 1 / VR(3,5) = 1/3⁵ (3 respuestas posibles {A,B,=}, en grupos de 5, uno para cada par de pistas de prueba)

Por otro lado, creo que es razonable suponer que si en el experimento participan finalmente M personas, la probabilidad de que N de ellas identifiquen correctamente las 5 pistas (cada ensayo es independiente nuevamente del resto) vendrá determinada por la distribución binomial:

B(M,p)

...que podéis ver calculada en un intervalo en esta tabla. En las filas se encuentran el nº de participantes totales. En las columnas, el nº de participantes cuya probabilidad de acierto total (5/5) deseamos calcular. En la intersección de ambas encontraremos la probabilidad (0..1).



Que 10 personas de 200 participantes acierten de chiripa tiene una probabilidad del 0,00000143%.

Fácil no está, vamos .

Pablopi, no entiendo lo de las tres respuestas. Hay la posibilidad que en cada tema A y B puedan ser el mismo AA o BB?.
Yo entendí que solo había la posibilidad de elegir en cada tema o A o B y había que elegir si los distinguías o no (en primera instancia) en cada muestra pareada. Posteriormente si te suenan diferentes, en una segunda pregunta decir cuál crees es la WAV o la OGG en cada pista (pero eran valoraciones separadas; es decir, eran pruebas complementarias secuenciales).

Si hay la opción de AA o BB y además implica acertar en cada pista cuál es A y cuál es B, y todo lo englobamos en que si no se acierta al completo en cada pista pareada la respuesta no sirve, entonces sí que veo poca posibilidad de azar.

Un saludete

Iniciado por pablopi

forzar la escucha desde el navegador no me ha parecido aceptable puesto que nos obliga a utilizar el PC (con el audio saliendo además a través del mezclador del sistema) e impediría el uso en muchos casos del equipo principal.

Entonces los que lo hemos hecho sin descargar y desde el navegador no lo hemos hecho bien? o hay perdida de calidad por ello? pregunto...

Lo del PC no lo veo porqué a de ser la peor opción que usar un equipo principal (es lo que deduzco de tu mensaje), yo en mi caso seguramente tenga mejor equipo de sonido en mi PC que en mi salón principal, mas bien porque es donde mas horas estoy y porque es donde de momento mejor equipo tengo con tarjeta dedicada.

Todas mis pruebas las hice usando tanto por los altavoces de forma analógica usando la tarjeta de expansión de la Asus Xonar HDAV 1.3 Deluxe que es la H6, como con los auriculares conectados a la Asus Xonar HDAV, a excepción de los cascos Logitech G35 que son USB y han ido directos a la placa que es una Asus Rampage III Extreme, aunque si crees que mis resultados pueden no ser correctos puedes prescindir de ellos sin problemas!

La primera y principal pregunta es "¿Cuál te suena mejor?"



Como ves hay 3 posibles respuestas: A, B o "suenan igual".

La segunda pregunta sirve para que el probador manifieste lo seguro que ha estado de sus 5 elecciones realizadas en la pregunta anterior:



¿Por qué hago esa 2ª pregunta? Porque al realizar el análisis de las respuestas enviadas quiere ver si existe una relación entre el grado de confianza del usuario y el acierto o no que ha tenido. Además, de este modo se puede medir cualitativamente el grado de dificultad que ha entrañado la prueba. En principio si un usuario ha respondido con confianza alta, debería ser porque ha captado diferencias claras (o claramente percibe que no las hay).

¿Aciertan más los usuarios que están seguros de sus respuestas?
¿Da igual lo seguro que uno esté a la hora de acertar?
¿Qué percepción general de la dificultad de la prueba han tenido los usuarios?

Todas estas me han parecido preguntas interesantes a responder.

Esta segunda pregunta, por tanto, complementa a la primera y (espero) me ayude a arrojar un poco más de luz sobre los resultados.

Iniciado por DanielRG

Entonces los que lo hemos hecho sin descargar y desde el navegador no lo hemos hecho bien? o hay perdida de calidad por ello? pregunto...

Todas las pruebas son correctas, Daniel. El test trata de contemplar diferentes configuraciones, equipos, etc. Luego veremos si los usuarios que hacen la prueba descargando las pistas aciertan más que los que lo han hecho escuchando desde el navegador o no.

Como ves hay muchas variables en juego.

Siendo puristas, lo ideal desde el punto de vista de preservar al máximo la fidelidad del audio reproducido es:

1. Descargar las pistas.
2. Reproducirlas empleando un reproductor configurado en modo bitperfect (Foobar, JRiver, Audirvana, MusicBee, etc.), configurado en modo exclusivo (WASAPI o ASIO en Windows, modo exclusivo de Core Audio en OS X, ALSA en Linux, etc.). El audio emitido a través del mezclador de Windows está sujeto a la mezcla con otros flujos de audio del sistema, al remuestreo y a otros procesos digitales que potencialmente podrían comprometer su integridad.

Si quieres puedes repetir la prueba descargando, con auriculares o sin ellos. Simplemente deja constancia de cómo has hecho la prueba contestando a las preguntas correspondientes del test:

Ya veo el test a rellenar; esta más que claro jejej
Gracias por aclararlo

Un saludete

P.D.: sigo dándole vueltas al tema y sigue habiendo una cosa que no me termina de cuadrar; te lo comentaré por privado porque podría influir en las respuestas y chafaría el test

En mi caso particular pablopi, quiero que los datos de mi prueba estén mostrados a todo el mundo, pues pienso que hay que ser transparente y acatar los resultados... y espero/deseo que esa sea la decisión mayoritaria de los participantes (tal y como muchos ya han comentado en mensajes anteriores de éste mismo hilo el sistema que han utilizado) para así poder comentar todo con detalle


Un saludete