東京藝術大学 大学院 音楽音響創造

要旨

Luiz Fernando Kruszielski
映像の画角と直接音/残響音比率の違いが“距離感”と“ふさわしさ”に与える影響ついて

音響の分野において、空間の知覚に関する研究は多くなされている。視覚は空間を知覚するために重要な情報を持っているが、視覚と聴覚の対応に関する研究は少ない。

本論文では空間の知覚に置ける視覚と聴覚の関係について調査を行なった。実験では、クロマキーを用いて、同じサクソフォン奏者の演奏から3種類の異なる映像(動画)を作成した。また音源からの距離が異なるインパルス応答を録音し、響きの少ない部屋で録音したサクソフォンの演奏を畳み込んだ。

これらの刺激を用いて2つの実験を行なった。最初の実験では被験者は映像を見ながらそれにふさわしい直接音/残響音比率で(D/R)を調節した。2つ目の実験では、3種類のフレームの映像と、音源からの距離の異なる3種類の残響音を組み合わせて一対比較をおこなった。被験者は2つの刺激を比較して「どちらが演奏者との距離感がより遠いか」、また「どちらが映像に対してふさわしいと思うか」を5段階で評価した。

D/R評価実験の結果から全体的な残響音のレベルは被験者の好みによって調節されたが、映像の違いによる残響音のレベルは被験者ごとに同じような傾向がみられ、共通した影響があることが分かった。

また一対比較では、距離感の印象は映像内の演奏者の大きさによって決まることが分かった。またそれぞれの画角において残響音の違いも距離感に影響を及ぼす。また映像内の演奏者の大きさは同じでも、背景の見え方が違うことで被験者により距離感に違いが見られたため、被験者を2つのグループに分けた。その結果、ぞれぞれのグループで近いと感じるフレームに置いて、残響感が遠くなっても、比較的近いと感じることがわかった。これは画角による映像の距離感の印象が残響音の印象に影響を与えたと考えられる。

映像に対する残響音のふさわしさに関しては、映像内の演奏者の大きさが小さい場合は、遠い残響音がふさわしいと感じる。また演奏者が大きい場合は近い残響音がふさわしいと感じる。距離感で見られたような、映像内の演奏者が同じ大きさで背景が異なる場合には、ふさわしさの違いがみられなかった。


Luiz Fernando Kruszielski
The Influence of Camera Angle in the Direct to Reverb Ratio Suitability and Its Effect in the Perception of Distance for a Motion Picture

In the field of study concerning sound, there are several studies about sound-spatial impression of an enclosed space. While vision is a sense that has a strong and dominant influence in the perception of space, there are few studies concerning the relation between both senses.

In this paper, a research concerning auditory and visual perception was conduced. Using chroma key technique, three videos from the same saxophonist performance were created. Stereo impulse responses taken at different distances from the source were used to convolute the sound of the player, which was recorded in a room with small reverberation. Two tests were conducted. In the first test (D/R; direct-to-reverberant test), participants where asked to select the suitable amount of reverb for the presented image. In the second test, the subjects were presented a combination of sounds recorded at different distances and various image-frames as a paired-comparison and were asked to judge the egocentric sense of distance to the player, and also which sound was more suitable for the image.

The results from the D/R test showed that even if the amount of reverberated sound was related to individual preference, there was a pattern on the subjects caused by the influence of the images.

In the paired comparison test, it was observed that the sense of distance was influenced by the size of the player in the image. Also, the differences in the reverberation of the sound had influence in the perception of distance. For the frames that the player had the same size in the screen, the subjects could be split into two groups with different sense of distance for the frames. In both group, for the image perceived to be closer the influence of perception of the distant caused by sound was comparatively smaller. It is suggested that this perception is caused by the influence of the angle of view in the perception of the image.

For the paired comparison concerning suitability of the sound recorded distances for the image, it was observed that as the player presented in the image is small, the sound recorded further away seems to be more suitable. Also, as the player presented in the image bigger, the sound recorded close seems to be more suitable. The differences between subjects observed in the sense of distance were not observed in this task.