etree

À la fin des années 1990, les mécanismes de capture ou de transfert des enregistrements vers le domaine numérique étaient bien développés. Les formats et supports numériques, magnétiques comme la modulation de code d’impulsion (PCM) et la bande audio numérique (DAT), ou optiques comme les disques compacts (CD), et d’autres types de stockage numérique, permettaient aux archivistes d’enregistrer des concerts de manière à réduire ou à éliminer la dégradation du matériel source lorsqu’il était lu ou copié. Il était possible de faire des copies de ces enregistrements qui étaient des copies exactes de l’enregistrement original, et ces copies ne présentaient pas de dégradation comme c’est le cas des bandes audio analogiques. Ainsi, aujourd’hui, les enregistrements numériques sont généralement réalisés sur DAT, disque optique, ou sur des disques durs, mémoire flash, et autres types de stockage numérique.

L’émergence de la capacité de transformer les enregistrements musicaux en fichiers de données informatiques (tels que les fichiers .wav et .aiff, qui sont des conteneurs pour les données PCM) a permis aux collecteurs de vérifier l’identité des copies en double d’un enregistrement numérique, ou analogique numérisé, particulier. Cela se fait généralement en générant une somme de contrôle des données d’un fichier, généralement au format MD5, et en comparant cette somme de contrôle à celle d’un autre fichier, ou à une somme de contrôle connue du fichier original. Si les sommes de contrôle correspondent, les fichiers sont identiques ; dans le cas contraire, les fichiers sont différents. Ces copies correspondantes sont appelées copies « sans perte » (pour les distinguer à la fois des supports dégradables comme les bandes analogiques et des formats de fichiers comme le .mp3, qui suppriment les informations audio afin de réduire la taille des fichiers). Ces copies sont généralement accompagnées d’un fichier texte comprenant des informations sur l’enregistrement telles que la date, le lieu, la setlist, l’équipement d’enregistrement utilisé, etc. qui réduit l’incertitude et l’erreur dans l’établissement de la provenance de l’enregistrement et la comparaison des sources d’enregistrement.

La distribution de données audio sans perte est devenue plus facile avec le développement d’Internet. Historiquement, la distribution de copies de musique en direct aux collectionneurs et aux archivistes se heurtait à un goulot d’étranglement, dans la mesure où les collectionneurs devaient se retrouver et s’arranger pour transférer des copies de supports physiques (disques, bandes, etc.) en personne ou par la poste américaine. Une façon d’accélérer la distribution consistait à créer un « arbre » de personnes, dont le « semeur » faisait des copies d’un enregistrement « maître » et en livrait une copie de faible génération à chaque « branche » de l’arbre, dont les membres transmettaient ensuite le maître de faible génération à chaque « feuille » de la branche de l’arbre, accélérant ainsi grandement la distribution tout en minimisant la perte générationnelle (pour le matériel analogique). Néanmoins, cette méthode était lente et susceptible d’échouer si une seule personne sur la branche de l’arbre ne suivait pas.

L’idée de transférer des fichiers audio de qualité DAT via Internet – c’est-à-dire un « e-tree » – a été discutée pour la première fois en 1996, mais elle n’était pas pratique à l’époque en raison des grandes tailles de fichiers nécessaires pour garder la qualité intacte. Par exemple, un CD de 74 minutes contient environ 640 Mo de données PCM non comprimées, et un concert de deux heures nécessiterait deux CD. Le transfert d’un seul CD de données sur un modem commuté prend environ sept jours.

Plusieurs développements dans la technologie informatique ont rendu possible le quatrième facteur, le transfert de fichiers sans perte sur Internet. Tout d’abord, le format de fichier Shorten (SHN) a été développé par une société appelée SoftSound. Le processus Shorten supprime de manière non destructive les données étrangères dans les fichiers PCM .wav, réduisant leur taille d’environ 45 à 55 % tout en permettant aux fichiers SHN résultants d’être agrandis dans leur forme originale sans perte de données audio. (Le format FLAC, plus récent, a largement remplacé le format SHN et est désormais préféré). Ces fichiers audio numériques, appelés « ensembles de fichiers », sont donc des copies parfaites en termes de bits, identiques à leurs sources originales, et peuvent être lus sur pratiquement n’importe quel ordinateur, convertis au format approprié pour être gravés sur CD afin d’être lus sur des systèmes stéréo domestiques, ou convertis dans d’autres formats pour être utilisés sur des lecteurs de musique portables. Deuxièmement, la croissance explosive d’Internet a permis à beaucoup plus de gens de mettre en place des serveurs FTP (File Transfer Protocol) pour distribuer des copies SHN de leurs enregistrements à grande vitesse aux utilisateurs disposant de connexions Internet à large bande. Troisièmement, les listes de diffusion, le courrier électronique, les listservs, etc. ont permis aux collectionneurs et aux conservateurs de se localiser mutuellement et de localiser plus facilement le matériel qui les intéressait.

Une fois ces événements survenus, la communauté etree a été formée par les membres de deux communautés de commerce de musique en ligne très réputées ; Sugarmegs Audio et PCP (People for a Clearer Phish). Avec 10 personnes au départ, etree.org a connu un taux de croissance stupéfiant. En février 2001, il y avait près de 300 serveurs FTP indépendants fournissant le tronc d’etree.org à plus de 12 000 utilisateurs. Des outils permettant de créer, d’empaqueter, de vérifier et de réparer des ensembles de fichiers sans perte ont été développés, et comprenaient des programmes tels que mkwACT, Shorten, Shntool, et d’autres.

BitTorrent a été écrit avec etree en tête et etree était le seul site de listage bittorrent lié à la FAQ officielle pendant un certain temps. À mesure que BitTorrent gagnait en popularité et que la disponibilité de serveurs FTP gratuits à large bande passante était restreinte par les universités et les entreprises, le nombre de serveurs FTP etree a régulièrement diminué et, en 2004, il en restait peu en service actif. Pourtant, etree.org a continué de croître de manière exponentielle. En juin 2010, il y avait près de 400 000 utilisateurs enregistrés sur db.etree.org qui ont contribué à plus de 480 000 setlists pour 42 000 artistes, et aidé à distribuer plus de 90 000 enregistrements sans perte pour environ 140 artistes, au patrimoine culturel mondial par le biais de bt.etree.org et d’autres communautés en ligne partageant les mêmes idées.