search query: @keyword audiovisual integration / total: 4
reference: 2 / 4
Author: | Puharinen, Hanna |
Title: | The effect of sound location on audiovisual speech perception |
Äänen tulosuunnan vaikutus audiovisuaalisen puheen havaitsemiseen | |
Publication type: | Master's thesis |
Publication year: | 2007 |
Pages: | 73 Language: eng |
Department/School: | Sähkö- ja tietoliikennetekniikan osasto |
Main subject: | Laskennallinen tekniikka (S-114) |
Supervisor: | Sams, Mikko |
Instructor: | Tiippana, Kaisa |
OEVS: | Electronic archive copy is available via Aalto Thesis Database.
Instructions Reading digital theses in the closed network of the Aalto University Harald Herlin Learning CentreIn the closed network of Learning Centre you can read digital and digitized theses not available in the open network. The Learning Centre contact details and opening hours: https://learningcentre.aalto.fi/en/harald-herlin-learning-centre/ You can read theses on the Learning Centre customer computers, which are available on all floors.
Logging on to the customer computers
Opening a thesis
Reading the thesis
Printing the thesis
|
Location: | P1 Ark TKK 6632 | Archive |
Keywords: | audiovisual integration speech McGurk effect spatial attention sound location audiovisuaalinen integraatio puhe McGurk-illuusio tarkkaavaisuus äänen tulosuunta |
Abstract (fin): | Puheen havaitseminen on audiovisuaalista; havaitsemme puhetta sekä nähdyn että kuullun aisti-informaation perusteella. Nähty puhe vaikuttaa kuulohavaintoon ja voi ristiriitaisena jopa muuttaa selkeästi kuultua puhehavaintoa. Näin tapahtuu ns. McGurk-illuusiossa. Aistien vaikutus toisiinsa on yleensä suurempi, kun aistiärsykkeet sijaitsevat samassa paikassa. Voisi siis kuvitella, että nähty puhe vaikuttaa kuulohavaintoon enemmän, kun puheärsyke esitetään sieltä, missä kasvot ovat. Aikaisemmat tutkimukset ovat kuitenkin osoittaneet, että äänen tulosuunnalla ei ole vaikutusta McGurk-illuusion voimakkuuteen. Näissä tutkimuksissa tarkkaavaisuuden suuntaa ei kuitenkaan ole kontrolloitu. Oletuksemme oli, että kun kuulotarkkaavaisuus kohdistetaan tiettyyn paikkaan, aistien välinen vuorovaikutus on suurempi tästä paikasta tuleville puheärsykkeille. Aikaisemmissa tutkimuksissa puheärsykkeet on esitetty hitaassa tahdissa, mikä on mahdollistanut laajan tarkkaavaisuuskentän. Tässä tutkimuksessa auditoriset puheärsykkeet esitettiin viidestä eri suunnasta (edestä, 45°/90° vasemmalta/oikealta) nopeassa tahdissa. Visuaaliset ärsykkeet (puhuvat naisen kasvot) esitettiin aina edestä. Muuntelimme kuulotarkkaavaisuuden tilaa esittämällä kuuloärsykkeitä eri todennäköisyyksillä eri suunnista; suurin osa puheärsykkeistä esitettiin yhdestä suunnasta (edestä tai 90° vasemmalta) ja harvoin muista suunnista. Koehenkilöiden tehtävänä oli vastata mahdollisimman nopeasti ja tarkasti mitä he kuulivat, ja olla välittämättä äänen tulosuunnasta. Tuloksemme osoittivat että tilanteessa, jossa ääniä esitettiin yhtä usein kaikista eri suunnista, McGurk-illuusion voimakkuus oli riippumaton äänen tulosuunnasta. Koehenkilöiden kuulotarkkaavaisuuden ollessa kohdistettuna suoraan eteen, McGurk-illuusio vahvistui edestä tuleville puheärsykkeille. Kun kuulotarkkaavaisuus oli kohdistettu 90° vasemmalle, McGurk-illuusio oli edelleen voimakkain edestä tuleville puheärsykkeille. Illuusio oli kuitenkin hieman voimakkaampi vasemmalta, kuin oikealta tuleville ärsykkeille. Tulokset osoittavat ensimmäistä kertaa, että äänen tulosuunta voi vaikuttaa audiovisuaaliseen integraatioon riippuen siitä, miten tarkkaavaisuutta suunnataan tilassa. |
ED: | 2007-06-13 |
INSSI record number: 34076
+ add basket
INSSI