Journal
RSS Feed
Tag cloud
The Visual Microphone: Passive Recovery of Sound from Video
Une technique pour reconstruire le son d'une vidéo à partir des vibrations infimes des objets (feuilles des plantes, paquet de chips), qui n'est pas sans rappeler l'utilisation des lasers pour détecter les vibrations d'une vitre.
La solution pour extraire des sons dont la fréquence est supérieure à la fréquence d'enregistrement de la vidéo, est particulièrement intéressante.
J'aimerais cependant connaître les détails exacts de l'expérience, comme la position de l'émetteur du signal sonore par rapport à l'objet observé ainsi que la résolution des vidéos (et pas seulement leur fréquence). D'après ce qui est dit dans la vidéo "les feuilles bougent de moins d'une centaine de pixels", ce qui porterait à croire que la résolution nécessaire est significativement élevée.
EDIT : J'ai pu lire le papier (c'est pratique de travailler dans un centre de recherche) et il s'avère que la source est très proche de l'objet (http://benjaminbillet.fr/media/siggraph2014-fig4-experiment.png). La résolution nécessaire est assez faible mais l'objet doit être filmé de près.
Toutefois, les résultats restent très intéressant, notamment dans le cas où l'acquisition est réalisée avec une caméra classique (une Pentax K-01).
mar. 05 août 2014 12:07:02 CEST -
-
link
- http://people.csail.mit.edu/mrub/VisualMic/
informatique
La solution pour extraire des sons dont la fréquence est supérieure à la fréquence d'enregistrement de la vidéo, est particulièrement intéressante.
J'aimerais cependant connaître les détails exacts de l'expérience, comme la position de l'émetteur du signal sonore par rapport à l'objet observé ainsi que la résolution des vidéos (et pas seulement leur fréquence). D'après ce qui est dit dans la vidéo "les feuilles bougent de moins d'une centaine de pixels", ce qui porterait à croire que la résolution nécessaire est significativement élevée.
EDIT : J'ai pu lire le papier (c'est pratique de travailler dans un centre de recherche) et il s'avère que la source est très proche de l'objet (http://benjaminbillet.fr/media/siggraph2014-fig4-experiment.png). La résolution nécessaire est assez faible mais l'objet doit être filmé de près.
Toutefois, les résultats restent très intéressant, notamment dans le cas où l'acquisition est réalisée avec une caméra classique (une Pentax K-01).
mar. 05 août 2014 12:07:02 CEST -
-
link
- http://people.csail.mit.edu/mrub/VisualMic/
informatique
Ce journal est basé sur Ginger, un gestionnaire de lien minimaliste développé dans le cadre d'un stage de perfectionnement. Pour plus d'informations, consulter le wiki consacré à mes projets personnels.