Après l’arrêt par Apple de son application Music Memos, appréciée des musiciens pour développer des idées de chansons, une nouvelle startup appelée Tape It est venue combler le vide avec une application qui s’appuie sur l’IA pour détecter automatiquement l’instrument et annoter l’enregistrement. Aujourd’hui, cette startup franchit une nouvelle étape dans son projet d’amélioration du processus d’enregistrement audio avec l’introduction d’un algorithme de réduction du bruit automatique de qualité studio, également alimenté par l’IA, qui fonctionne sur n’importe quel son, et pas seulement sur la parole.
Le débruiteur d’IA a été livré cette semaine sous la forme d’une application web gratuite, et il est prévu d’accorder des licences d’utilisation de la technologie à des fournisseurs à l’avenir. Il sera également intégré plus tard dans l’application phare de la société, Tape It, selon la société.
Fondée en 2020 par les musiciens et amis Thomas Walther et Jan Nash, Tape It s’est d’abord concentrée sur une application d’enregistrement iOS pour les musiciens. Avant de créer Tape It, Thomas Walther avait passé trois ans et demi chez Spotify, qui avait racheté sa startup de détection audio Sonalytic. Nash, quant à lui, est un chanteur d’opéra de formation classique, qui est également bassiste et ingénieur. Le duo a eu l’idée de créer Tape It parce que c’était quelque chose qu’ils voulaient pour eux-mêmes en tant que membres d’un groupe, qui serait aussi simple à utiliser que Music Memos d’Apple, mais qui serait plus puissant grâce à l’utilisation de l’intelligence artificielle.
La version originale de l’application était capable de détecter automatiquement l’instrument, puis d’annoter l’enregistrement avec une indication visuelle pour faciliter la recherche de ces enregistrements à l’aide de l’icône colorée. Les musiciens pouvaient également ajouter leurs propres marqueurs aux fichiers, ainsi que des notes et des photos à revoir ultérieurement.
L’application a depuis gagné en popularité avec environ 10 000 utilisateurs actifs mensuels, selon la société.
Mais comme Walther l’a dit à TechCrunch au moment des débuts de Tape It en 2021, l’équipe avait pour objectif d’élargir son utilisation de l’IA au fil du temps.
Crédits d’image : Tape It
C’est ainsi qu’est né le dernier développement de la startup, un débruiteur alimenté par l’IA qu’elle a mis au point au cours des deux dernières années. Le problème des enregistrements, explique l’entreprise, c’est le bruit de fond. Afin de réduire les bruits ambiants et les interférences électriques, les musiciens enregistrent dans des studios et utilisent des logiciels complexes. Tape It souhaite proposer une alternative plus abordable en utilisant l’IA. Son logiciel supprime automatiquement les bruits tels que les bourdonnements et les sifflements, et pas seulement les paroles, dans le but de produire des résultats de qualité studio sur les chansons, les pistes d’un seul instrument et les enregistrements sur le terrain.
« Ce que nous avons développé, c’est une version automatique du logiciel de débruitage que l’on trouve dans les studios d’enregistrement professionnels depuis 15 ans », explique Walther.
Pour vérifier ses résultats, Tape It publie une étude académique avec un test d’écoute scientifique qui montre la qualité du logiciel en concurrence avec les principaux logiciels de débruitage de l’industrie.
Dans une vidéo, l’entreprise explique que si les systèmes d’amélioration de la parole ont considérablement progressé, ils ne fonctionnent généralement que pour la parole et déforment ou corrompent les signaux musicaux. Quant aux systèmes de débruitage professionnels, ils nécessitent le contrôle manuel d’un logiciel complexe par des utilisateurs professionnels. La technologie de Tape It consiste à connecter un contrôleur de réseau neuronal à un algorithme de réduction du bruit basé sur le traitement du signal. Cela permet de débruiter automatiquement les signaux audio généraux, y compris la musique. L’entreprise prévoit de présenter ses travaux lors de la conférence de l’AES la semaine prochaine.
« La raison pour laquelle les gens n’ont pas automatisé ces systèmes (professionnels) est qu’il n’est pas possible de les intégrer traditionnellement dans un réseau neuronal… il n’est pas possible d’entraîner un tel système », note M. Walther. « Nous sommes en fait les premiers à former un tel système et c’est pourquoi nous sommes très enthousiastes à propos de ce domaine plus vaste.
Il ajoute que la communauté universitaire sera probablement moins intéressée par le produit de débruitage lui-même que par la manière dont ils ont réussi à le faire fonctionner de cette façon, en raison des implications que cela a pour d’autres applications d’automatisation des logiciels de studio.
Néanmoins, le logiciel de débruitage a déjà quelques clients potentiels intéressés, notamment un grand éditeur de logiciels de studio et un grand fabricant de matériel. Dans ces cas, le logiciel sera proposé à un prix d’entreprise, mais pour les petites entreprises, des plans moins onéreux seront proposés.
« Tout le monde est enthousiaste à l’idée que l’IA puisse être créative », a déclaré M. Walther lors de l’annonce de la nouvelle. « Nous sommes enthousiastes à l’idée que l’IA puisse résoudre des problèmes ennuyeux. Nous nous occupons des bruits de fond, afin que vous puissiez vous concentrer entièrement sur les parties créatives et écrire plus de chansons », a-t-il ajouté.
Les technologies de l’IA ne sont pas seulement utilisées pour réduire les bruits de fond pour les musiciens, bien sûr, d’autres entreprises se tournent également vers l’IA pour créer un son de qualité quasi studio pour les podcasters. Par exemple, Podcastle a lancé ce mois-ci son Magic Dust AI, un outil d’IA générative qui élimine les bruits de fond et améliore la gamme dynamique.
L’équipe de cinq personnes de Tape It est basée à Berlin, Londres, Los Angeles et Stockholm, et comprend le designer et musicien Christian Crusius, qui travaillait auparavant pour le cabinet de conseil en design Fjord, racheté par Accenture. L’essentiel du travail sur le logiciel de débruitage a été réalisé par Christian Steinmetz, chercheur doctorant en IA et en audio.
L’entreprise continue de démarrer, ayant précédemment refusé des offres de financement.
« Il s’agit de recherche fondamentale et nous ne savions pas combien de temps cela prendrait », a expliqué M. Walther pour expliquer pourquoi ils ont choisi cette voie. « Nous pensions qu’il était un peu risqué d’avoir un investisseur qui n’était pas très patient – (il vous pousserait à) simplement prendre un modèle open source et passer à autre chose. Mais nous voulions avoir un avantage technologique plus important », a-t-il ajouté.
L’entreprise envisage maintenant de lever des fonds et mène des discussions à ce sujet, compte tenu de la rapidité du marché de l’IA, mais n’a pas encore pris de décision officielle.