Blind Test MP3, différenciables des originaux ?
- 21 réponses
- 7 participants
- 1 773 vues
- 15 followers

xtsea

Suite aux nombreuses pages du topic concernant la qualité des MP3, j'en crée un nouveau ici pour ceux qui veulent bien passer le blind test. 13 pages ça commence à décourrager et il y a eu quelques off topic (rien de méchant, faudrait pas vexer le modérateur )...
L'ancien sujet est consultable ici :
/techniques-du-son/forums/t.245285,pourquoi-tant-de-haine-envers-la-qualite-des-mp3.html
Citation :
Sol Carlus nous a ressorti un test à passer sur une musique classique (cependant un peu brouillon et qui semble bouchée dans les aigues, intéressant quand même) :
"OK, je ressort donc le vieux test qui sevissait sur AF y'a kk années
Voici 4 fichiers
3 mp3 (du 128, du 160 et du 256) et 1 wav
Faut tous les retrouver
J'ai plus les résultats donc y'aura pas de validation officielle.
Y'en a pas mal qui se sont gourré dans le passé, qui peinnaient à reconnaitre le 256 du wav"
Test 1 Classique :
C'est ici : http://b.brette.free.fr/test%20mp3%20yannou/
Quand à moi j'ai fait hier soir une petite composition à l'arrache sur quelque chose de plus electronique et tout aussi dégeulasse, un autre style (Oui, je suis fière d'avoir inventé le concept de junk music) :
Test 2 Electronique :
C'est là : http://putstuff.putfile.com/94409/3205677
Il y a le wave d'origine, des MP3 en 128Kbits, 160, 192 et 256Kbits. Aux plus forts de trouver lequel a tel ou tel débit, lequel est l'original.
R-Omega nous a compressé les applaudissements d'un concert live.
"Allez je balance mon test, afin de voir toujours jusqu'a quel point on peut différencier le mp3 du wav.
Il y a le wav et du mp3 a 128, 160, 192 et 256."
Test 3 Live :
C'est à cette adresse :
Qui reconnait quoi

xtsea

J'ai mis le nombre d'avis par extrait, si quelqu'un trouve uniquement le wave, je rajoute 1 aux autres dans MP3. Si quelqu'un hésite entre deux, je mets les deux +1. Pour l'instant, ça manque de participants pour faire une quelconque analyse...
Test 1, 2 avis
----------|-Original-|----Mp3----|
Extrait 1 |----1-----|-----1------|
Extrait 2 |----1-----|-----1------|
Extrait 3 |----0-----|-----2------|
Extrait 4 |----1-----|-----1------|
Test 2, 3 avis (j'ai inclus le mien, test en aveugle contrôlé par un ami qui a renommé les fichiers)
----------|-Original-|----Mp3----|
Extrait 1 |----------|-----3------|
Extrait 2 |----2-----|-----1------|
Extrait 3 |----2-----|-----1------|
Extrait 4 |----------|-----3------|
Extrait 5 |----------|-----3------|
Test 3, 2 avis
----------|-Original-|----Mp3----|
Extrait 1 |----------|-----2------|
Extrait 2 |----1-----|-----1------|
Extrait 3 |----------|-----2------|
Extrait 4 |----1-----|-----1------|
Extrait 5 |----------|-----2------|
Ne vous laissez pas influencer par les résultats si vous comptez passer le test, oubliez ce que vous avez pu voir, même si c'est tentant quand on hésite...
J'ai également fait passer le test 2 à 5 autres personnes, 1 seule à trouvé le wave à pile ou face après moultes hésitations, 3 ont rapidement repéré le 128Kbits.
Remarque intéressante : beaucoup semblent étonnés pas la bonne qualité de l'encodage, à priori meilleur que ce à quoi ils étaient habitués

J'attends également le classement de Jan.

Anonyme

En fait si j'avais eu le temps j'aurais proposé un bout d'enregistrement moi-même, mais là je suis un peu charette. Mais je vais essayer de suivre ça de loin en loin.
JM

Anonyme

JM

macdriverz


xtsea


Pour les fréquences, hautes comme basses, le fichier d'origine n'est quand même pas en passe haut à 500Hz et passe bas à 15Khz... Ca balaye plus ou moins 50Hz à 20Khz.
Tiens, voilà l'analyse spectrale


Maintenant qu'un ingénieur du son vomisse en entendant ça, tu es pardonné, je ne suis qu'un humble amateur un peu pressé et légèrement brouillon.
Je vais compresser ton wave en MP3, mais première chose que je remarque, c'est que le peak n'est pas à 0dB. Il y a plus de 4dB qui ne sont pas utilisés (ce qui rend cet extrait équivalent à du 15 bits au mieux). Vu q'il s'agit d'un extrait, j'en déduis que d'autres parties du morceau complet ont un niveau plus élevé. Le niveau moyen est à -20db, ce qui laisse une bonne dynamique, ça changera de -10db RMS peak à 0 (volume sonore perçu doublé) et nous verrons comment s'en sort le MP3.
Hors sujet : PS : j'ai maintenant des potes qui utilisent ma compo en sonnerie de portable comme quoi la grosse compression et les sons pourris ne gênent pas toujours. C'est le début de la gloire, un jour tout le monde mixera comme ça, les musiques seront exclusivement distribuées en sonneries mp3 et tu seras un vieux rétrograde

xtsea

M'étant chargé de la compression MP3, j'ai changé les débits initiaux, en écartant le 128Kbits un peu trop faible pour prétendre concurrencer le wave à l'écoute. Utilisation de Lame en version 3.97.
A nouveau 5 fichiers, le wave original, les mp3 à 160,192,256Kbits et -nouveauté- à titre purement expérimental un mp3 encodé en bitrate variable (entre 160 et 320Kbits).
La taille du fichier à bitrate variable (car c'est l'un des aspects recherchés par la compression, en plus de la fidélité) est inférieure à celle du mp3 à 192. Sa qualité devrait théoriquement être proche du MP3 à 256Kbits, dans le meilleur des cas supérieure.
Test 4, médiéval :
Download Medieval.zip

RaphRaymond

Raphaël Raymond, Compositeur, Arrangeur, Guitariste : http://www.raphaelraymond.fr

xtsea


RaphRaymond


Raphaël Raymond, Compositeur, Arrangeur, Guitariste : http://www.raphaelraymond.fr

xtsea

Le meilleur me semble être le 2 ou le 4, le pire le 1.

RaphRaymond

(Ils existent pourtant, j'ai vérifié à petit coup d'oppo de phase entre les extraits)
J'ai l'impression que le wav serait le 3, mais j'en pas sûr du tout...J'y arrive pas, j'entend pas.
Raphaël Raymond, Compositeur, Arrangeur, Guitariste : http://www.raphaelraymond.fr

Sigir

J'ai écouté une fois chaque fichier par extraits, sans chercher à me concentrer plus que ça, pour me mettre dans la peau d'un spectateur averti, mais spectateur quand même (mais averti quand même

Au passage, ce serait bien de dire à quoi correspondent les n° de test.
Test "classique"
4-1-3-2 (Ordre croissant de qualité)
Test "AC/DC"
le meilleur est la 4
Test "médiéval"
le meilleur est le 1 ou le 4
Test "électro"
Je ne sais pas.
C'est quand la soluce ?


xtsea

Citation : Sol Carlus nous a ressorti un test à passer sur une musique classique (cependant un peu brouillon et qui semble bouchée dans les aigues, intéressant quand même) :
"OK, je ressort donc le vieux test qui sevissait sur AF y'a kk années
Voici 4 fichiers
3 mp3 (du 128, du 160 et du 256) et 1 wav
Faut tous les retrouver"
Test 1 Classique : http://b.brette.free.fr/test%20mp3%20yannou/
Quand à moi j'ai fait hier soir une petite composition à l'arrache sur quelque chose de plus electronique et tout aussi dégeulasse, un autre style (Oui, je suis fière d'avoir inventé le concept de junk music) :
Test 2 Electronique : http://putstuff.putfile.com/94409/3205677
Il y a le wave d'origine, des MP3 en 128Kbits, 160, 192 et 256Kbits. Aux plus forts de trouver lequel a tel ou tel débit, lequel est l'original.
R-Omega nous a compressé les applaudissements d'un concert live.
"Allez je balance mon test, afin de voir toujours jusqu'a quel point on peut différencier le mp3 du wav.
Il y a le wav et du mp3 a 128, 160, 192 et 256."
Test 3 Live :
Quatrième test proposé par Jan, ce qui étoffe grandement notre échantillon de styles musicaux.
A nouveau 5 fichiers, le wave original, les mp3 à 160,192,256Kbits et -nouveauté- à titre purement expérimental un mp3 encodé en bitrate variable (entre 160 et 320Kbits).
Test 4 Médiéval : Download Medieval.zip

Sigir

Par ailleurs, je remarque une erreur : le test 1, si c'est le classique n'a toujours qu'un avis pour l'extrait 4 comme étant l'original, même après mon avis qui le dit aussi.

Ryko

Ayant fait le test electro (sampleXTsea), je me suis donc mis à écouter le test 4 (médiéval).
A mes humbles oreilles 1 seul se détache clairement du lot c'est l'extrait no 1, par contre je n'ai pas reussi a differencier le no 2, le no 4 et le no 5

En detail les défauts remarqués et les "endroits" où chercher :
- les sibiliantes (tous les sss), en particulier et surtout quand le mec commence à chanter "c'est dans le vent..."
- Les transitoires bien bouffées sur le "tambour" (désolé, je sais pas comment s'appele cet instrument

- On dirait qu'il y a moins de reverb ou plutôt moins de définition dans la reverb, en tout cas j'ai cette impression.
- Clairement moins d'"air" dans le son. Aigus moins fins.
Donc le classement de la meilleure qualité a la plus mauvaise (grosse reserve: sur 2,4,et 5)
- Extrait 1 : +++++ (original)
- Extrait 2 : ????
- Extrait 4 : ???
- Extrait 5 : ??
- Extrait 3 : +
Curieusement j'ai l'impression que le mp3 convient relativement bien a ce genre de musque. Par contre les morceaux actuel qui sont masterisés avec une forte compression et beaucoup de niveau ne conviennent pas bien avec l'encodage mp3.
Voila, si ca se trouve je me suis completement trompé et mon imagination enclin à la subjectivité aura eu raison de moi !
PS : Les test ont été fait sur des Dynaudio BM6A, interface M-Audio ProjectMix, Cables Monster Cable, Local Home-Studio (semi)traité acoustiquement.
A bientôt les amis !

xtsea

Citation :
J'ai mis le nombre d'avis par extrait, si quelqu'un trouve uniquement le wave, je rajoute 1 aux autres dans MP3. Si quelqu'un hésite entre deux, je mets les deux +1. Pour l'instant, ça manque de participants pour faire une quelconque analyse...
Test 1, 3 avis
----------|-Original-|----Mp3----|
Extrait 1 |----1-----|-----2------|
Extrait 2 |----3-----|-----0------|
Extrait 3 |----0-----|-----3------|
Extrait 4 |----0-----|-----3------|
Test 2, 4 avis + 1 sans entente de différence
----------|-Original-|----Mp3----|
Extrait 1 |----------|-----4------|
Extrait 2 |----2-----|-----2------|
Extrait 3 |----3-----|-----1------|
Extrait 4 |----------|-----4------|
Extrait 5 |----------|-----4------|
Test 3, 4 avis
----------|-Original-|----Mp3----|
Extrait 1 |----------|-----4------|
Extrait 2 |----2-----|-----2------|
Extrait 3 |----------|-----4------|
Extrait 4 |----3-----|-----1------|
Extrait 5 |----------|-----4------|
Test 4, 3 avis + 2 sans entente de différence
----------|-Original-|----Mp3----|
Extrait 1 |----2-----|-----1------|
Extrait 2 |----------|-----3------|
Extrait 3 |----1-----|-----2------|
Extrait 4 |----1-----|-----2------|
Extrait 5 |----------|-----3------|
Ne vous laissez pas influencer par les résultats si vous comptez passer le test, oubliez ce que vous avez pu voir, même si c'est tentant quand on hésite...
Remarque intéressante : beaucoup semblent étonnés pas la bonne qualité de l'encodage, à priori meilleur que ce à quoi ils étaient habitués.
Encore quelques personnes peuvent passer les tests... ce week end si j'ai le temps je peux donner les débits en MP à ceux qui ont déjà répondu s'ils le souhaitent.

Sigir


Quand au style de musique, je ne comprends pas ton argument. Et puis garder une trace des résultats sans savoir à quoi ils correspondent... ça me dubite un peu dans la tête



xtsea

OK je corrige. L'argument est tout simplement que lorsque les gens hésitent, ils ont tendance à regarder l'avis général. Là ils sont moins tentés, c'est plus "anonyme"


Après de brefs calculs statistiques, il sera difficile de tirer une tendance nette de ces résultats, en incluant la part du hasard : sur 5 fichiers, 1 chance sur 5 de trouver le wave, ca fait 20% de chances de tomber au hasard sur le wave, 25% si on considère que le plus bas débit est facilement écarté (il en reste alors 4 à classer). On peut raisonnablement penser qu'il faudrait au moins une dizaine de personnes passant le test pour avoir quelque chose de représentatif. A défaut les 4 ou 5 avis suffiront... De plus le test en aveugle n'est pas vraiment respecté, puisque les gens ont accès aux résultats des tests, peu importe. Ce qui est aussi intéressant dans ce thread c'est de faire écouter aux gens de "bons" encodages MP3, ce à quoi tout le monde ne semblait pas forcément habitué

Encore une fois, les limites de mes oreilles et/ou de mon matériel me font difficilement trouver le 160Kbits, au-delà je suis incapable de faire la différence (avec mes propres encodages, Lame 3.97 paramètre qualité). C'est donc très intéressant d'avoir des testeurs ayant un matériel audio et des conditions d'écoute de qualité.

Anonyme

JM

Terch

Je vous dirais notre classement détaillé des 4 tests (si on a le temps...).


xtsea

- < Liste des sujets
- Charte