第十三講：Speech Perception

出自KMU Wiki

目錄 1 何時開始？ 2 人類演化 3 語言特殊性 4 發聲器官 5 呼吸與吞嚥 6 Sound spectrogram 7 phonemes 7.1 子音 8 Sound spectrogram（音譜儀） 9 語音的分析 10 Formant transition 11 Speech categorization（語音分類） 12 Voice Onset Time 13 VOT實驗 14 Voice onset time 15 Voice onset time （實際） 16 Information Provided by Face 17 Information from Sentence Context 18 sound of the WORD 19 Saffran et al. (1996) 20 top-down / bottom-up 21 cortical location 22 duel-stream model 23 每日一字 24 motor theory of speech perception 25 Think about

何時開始？

• 語言
  • 智人（Homo sapiens）之前

• 多久之前？
  • 演化的想法

• 音樂
  • 歌唱
  • 樂器

人類演化

• 演化可能時程

語言特殊性

• 語言是人特有的嗎？
  • 語言的定義？
    • 創造性
    • 可塑性
    • 自發性
    • .....
  • 其他動物的溝通方法

• duplex theory （雙重論） —Liberman(1982)

發聲器官

• 語音的產生是由肺呼出空氣，空氣經由聲帶（vocal cords）震動、經過不同發聲器官（articulators），包括軟顎（soft palate）、硬顎（hard palate）、舌頭（tongue）、牙齒（teeth）、嘴唇（lips）的加壓或阻斷，而產生不同的語音

呼吸與吞嚥

• 呼吸與吞嚥是不能兼顧的

• 吃飯時不要講話！

• 聲帶

Sound spectrogram

• 音譜儀

• formants

phonemes

• 音素（音位）
• 母音vowel
• 子音consonant
• 每一種語言不同

DEMO"最近連不上（如果有人找到請告知）"

• 有關鍵期

• 子音/母音

子音

• Articulation（發音）
  • place of articulation （發音部位）
    • Bilabial （雙唇）
    • labio-dental（唇齒）
    • Dental（齒）
    • Alveolar（齒槽）
    • .......place of articulation
  • manner of articulation（發音方法）
    • Stop（停止音）
    • fricative（摩擦音）
    • affricate（氣音）
    • Nasals（鼻音）
    • ......manner of articulation

Sound spectrogram（音譜儀）

• 畫出聲音

• 三個向度

• Bird song

• Software : Raven

說明與下載

語音的分析

• 聽覺系統

• （真實情況）
  • 我唸的 Here we go again.

• formant / formant transition（共振峰/共振峰過渡）

• formant / formant transition（實際）

Formant transition

• 不同子音

Speech categorization（語音分類）

• VOT

Voice Onset Time

VOT實驗

Voice onset time

以上請先閉眼來聽

• demo for VOT
  • Bilabial negative
  • Bilabial positive

Voice onset time （實際）

• 我唸da ta

Information Provided by Face

McGurk effect 請先閉眼來聽 接著再看著聽 WIKI

Information from Sentence Context

• Perceiving word in sentence
  • M*R* H*D * L*TTL* L*MB I*S FL**C* W*S WH*T* *S SN*W
    • Mary had a little lamb, Its fleece was white as snow.

• technique of shadowing

• Speech Segmentation

sound of the WORD

• transitional probabilities 轉移機率
• statistical learning

• Saffran et al. (1996)的實驗
  • 利用infants
  • nonsense word 2 minutes
    • 如 bidaku, padoti, ...
  • 後出現a. whole-word b. part-word

Saffran et al. (1996)

top-down / bottom-up

cortical location

duel-stream model

每日一字

• 卵怎麼注音？
  • ㄖㄨㄢˇorㄌㄨㄢˇ
    • motor theory of speech recognition（語音辨識的運動理論）

motor theory of speech perception

Think about

• 語音辨識系統
  • Apple iPhone 4S siri
    • 官方廣告
    • 日本人使用

• 語音？聲音？空間辨識
  • sound spectrogram
    • 永
    • Obama