新的影像分析技術將可讓你透過攝影機「看到聲音」


以往說秘密的時候都得要小心「隔牆有耳」,而從現在開始,你可能要加上一條,「小心窗外有攝影機」了。感覺很奇妙?事實上這的確是個很神奇,因為這個由 Adobe、微軟與 MIT 一同研發的影像分析技術,可以讓攝影機看到聲音。簡單的說,你身邊幾乎所有的物體包括餅乾包裝、植物等,都能成為聆聽周遭聲音的麥克風。其原理是透過每秒可達 6,000 張的超高格數攝影機,來觀察這些物體因為聲音而產生人眼難以察覺的微震,分析並透過演算法來重製原音。

看到必須使用這樣特殊的攝影機,感覺應該不至於會被廣為應用而鬆了一口氣了嗎?很可惜,因為這群聰明的研發人員,還透過利用了一般 DSLR 令人討厭的 Rolling Shutter 效應,來使得一般數位相機也可以用 5 倍的頻率,來從影像上獲得類似的分析素材轉化成音頻。雖說效果似乎比起特殊相機要來的差上一些,但這也表示這項科技的應用彈性比想像中的要高上許多。所以,如果你未來有什麼國家大事要談的話,可能還得要把燈調暗一點說話了(這招應該不錯吧?)。跳轉後可以在影片觀看其原理,並能實際聽聽聲音重現的成果、。

來源: MIT (1), (2)

經由: Engadget