Transformer les vidéos SYNTHESIA en Midi

Bonjour   Un autre programmeur "fou" certainement c'est penché sur le "problème" et au contraire du Russe qui lui avec son logiciel analyse IMAGE par IMAGE et calcule le temps que les touches soient colorées pour en déduire la note jouée et sa hauteur longueur et produire à l'issue un MIDI .

Là, c'est une autre approche en utilisant des modules PYTHON dédiés à la musique ...sauf ..que le programmeur ..certainement pour ne pas inventer la roue ...utilse beaucoup trop de modules Python pour lancer un simple SCRIPT ..qui met tout en oeuvre ...j'ai essayé ...j'ai abandonné .

Son but ..c'es bien d'analyser le contenu d'une vidéo Synthésia et d'en faire un fichier XML directement lu ensuite à la demande dans un éditeur de partition (comme MuseScore)

Que ceux qui testent ou qui auront réussis ..me le disent ..

https://github.com/Miking98/piano-sheet-music

Lionel

Bonjour

Et pour ceux qui auraient encore des doutes sur la possibilité de transformer après analyse une vidéo Synthesia en fichier Midi avec l'application sous Python développée par un Russe ..une video = un midi.

Voici de quoi se faire les oreilles;

https://we.tl/t-rLwdKlVY22

Lionel

merci SUPERLIONEL mise a jour
marc

Bonjour

Tous les fichiers ..sont ici ..https://github.com/svsdval/video2midi/releases/tag/0.4.5.2

et pour l'utilisation suivre pas à pas les captures d'écrans ...pour l'utiliser sous windows ...en mode fenêtre (type DOS) avec ANACONDA et lancer PYTHON.
https://github.com/svsdval/video2midi/wiki/Using-video2midi-from-github-on-Windows

Bonjour

Le concepteur Russe du logiciel qui permet de transformer une vidéo SYNTHESIA en fichier Midi vient encore d'améliorer son produit .

https://www.youtube.com/watch?v=5M-Q62Rhk54

Et je confirme ..c'est de mieux en mieux ....pour ceux qui seraient intéressé par cette méthode ..$
je peux tout ..expliquer par MP ..bien que la vidéo en elle même est assez "parlante" et les liens donnent les fichiers nécessaires ..et il y a un descriptif pour l'installation sous Windows .
Lionel

merci SUPERLIONEL
marc

Bonjour à toutes et à tous

Actuellement il y a deux procédés pour transformer le contenu des vidéos YouTube SYNTHESIA en fichier Midi .

Les vidéos SYNTHESIA sont pour la plupart du temps une performance d'un pianiste jouant des deux mains ...mais c'est un seul
instrument . Les sonorités sont donc l'étendue d'un clavier de piano.

Il y a quelques logiciels qui sont capables d'analyser l'audio de ces vidéos et après analyse d'en produire un fichier Midi

https://www.lunaverus.com/

Les autres pour l'instant ne sont pas encore au point ..même AUDIOSCORE .

L'autre procédé consiste à analyser image par image la position des rectangles de couleur qui descendent vers les touches et le temps qu'ils mettent à la traverser. Cela donne donc la valeur d'une note par sa hauteur et sa durée . Comme tous les mini-clavier de Synthesia ne sont pas tous identiques, il faut procéder par l'application d'une réglette qu'il faut ajuster au touches et ensuite le logiciel sous Python fait l'analyse de chacune des notes main droite main gauche dans 2 canaux Midi ou plus pour produire un fichier Midi . Les résultats ne sont pas si mauvais que cela. Naturellement il faut faire des retouches, mais le plus gros est déjà fait .

Voir les vidéos YouTube https://www.youtube.com/channel/UCvhseY4WE--WAprEgrO9INw

Un nouveau programme vient de voir le jour, mais je vous avoue ne pas avoir le temps ni de le tester, ni de comprendre comment il fonctionne avec de nouveau package Python et autres ...je vous donne le lien ...si quelqu'un si intéresse et comprend ..il peut toujours se mettre en relation avec moi par MP ..merci

https://github.com/alborrajo/sheetesia

Bonne découverte ...

Lionel