第十三講：Speech Perception

出自KMU Wiki

目錄 1 何時開始？ 1.1 人類演化 2 語言特殊性 3 發聲器官 3.1 發聲器官運動與聲音變化 3.2 呼吸與吞嚥 3.3 Sound spectrogram 3.4 phonemes 3.4.1 子音 3.5 Sound spectrogram（音譜儀） 3.6 語音的分析 3.7 Formant transition 4 Speech categorization（語音分類） 4.1 Voice Onset Time 4.2 VOT實驗 4.3 Voice onset time 4.4 Voice onset time （實際） 5 Information Provided by Face 5.1 Information from Sentence Context 5.2 sound of the WORD 5.3 Saffran et al. (1996) 5.4 top-down / bottom-up 5.5 cortical location 5.6 duel-stream model 5.7 Reconstructed spectrogram 5.8 每日一字 5.9 利用TMS實驗 6 Infant speech perception 6.1 Think about

何時開始？

• 語言
  • 智人（Homo sapiens）之前

• 多久之前？
  • 演化的想法
• 音樂
  • 歌唱
  • 樂器

人類演化

• 演化可能時程

語言特殊性

• 語言是人特有的嗎？
  • 語言的定義？
    • 創造性
    • 可塑性
    • 自發性
    • .....
  • 其他動物的溝通方法

• duplex theory （雙重論） —Liberman(1982)

發聲器官

• 參照第318頁 figure 13.1

• 語音的產生是由肺呼出空氣，空氣經由聲帶（vocal cords）震動、經過不同發聲器官（articulators），包括軟顎（soft palate）、硬顎（hard palate）、舌頭（tongue）、牙齒（teeth）、嘴唇（lips）的加壓或阻斷，而產生不同的語音

發聲器官運動與聲音變化

• 參照第319頁 figure 13.3

呼吸與吞嚥

• 呼吸與吞嚥是不能兼顧的

• 吃飯時不要講話！

• 聲帶

Sound spectrogram

• 音譜儀

• formants
• 參照第320頁 figure 13.4

phonemes

• 音素（音位）
• 母音vowel
• 子音consonant
• 每一種語言不同

DEMO"最近連不上（如果有人找到請告知）"

• 有關鍵期
• 子音/母音

• 參照第320頁 table 13.1

子音

• Articulation（發音）
  • place of articulation （發音部位）
    • Bilabial （雙唇）
    • labio-dental（唇齒）
    • Dental（齒）
    • Alveolar（齒槽）
    • .......place of articulation
  • manner of articulation（發音方法）
    • Stop（停止音）
    • fricative（摩擦音）
    • affricate（氣音）
    • Nasals（鼻音）
    • ......manner of articulation

Sound spectrogram（音譜儀）

• 畫出聲音

• 三個向度

• Bird song

• Software : Raven

說明與下載

語音的分析

• 聽覺系統

• （真實情況）
  • 我唸的 Here we go again.

• formant / formant transition（共振峰/共振峰過渡）
• 參照第321頁 figure 13.5

• formant / formant transition（實際）

• 參照第322頁 figure 13.6

Formant transition

• 不同子音

Speech categorization（語音分類）

• VOT

Voice Onset Time

VOT實驗

Voice onset time

以上請先閉眼來聽

• demo for VOT
  • Bilabial negative
  • Bilabial positive

Voice onset time （實際）

• 我唸da ta

Information Provided by Face

• McGurk effect

McGurk effect 請先閉眼來聽 接著再看著聽 WIKI

Information from Sentence Context

• Perceiving word in sentence
  • M*R* H*D * L*TTL* L*MB I*S FL**C* W*S WH*T* *S SN*W
    • Mary had a little lamb, Its fleece was white as snow.

• technique of shadowing

• Speech Segmentation

sound of the WORD

• transitional probabilities 轉移機率
• statistical learning

• Saffran et al. (1996)的實驗
  • 利用infants
  • nonsense word 2 minutes
    • 如 bidaku, padoti, ...
  • 後出現a. whole-word b. part-word

Saffran et al. (1996)

top-down / bottom-up

cortical location

duel-stream model

Reconstructed spectrogram

• Pasley et. al. (2012)
• speech sound VS reconstructed spectrogram

每日一字

• 卵怎麼注音？
  • ㄖㄨㄢˇorㄌㄨㄢˇ
    • motor theory of speech recognition（語音辨識的運動理論）

利用TMS實驗

D'Ausilio et. al. (2012)

Infant speech perception

• categorical perception

Think about

• 語音辨識系統
  • Apple iPhone 4S siri
    • 官方廣告
    • 日本人使用

• 語音？聲音？空間辨識
  • sound spectrogram vOICe系統
    • 永
    • Obama

返回知覺心理學