第十三講:Speech Perception

出自KMU Wiki

在2011年12月18日 (日) 00:01由98007013 (對話 | 貢獻)所做的修訂版本
跳轉到: 導航, 搜索

目錄

何時開始?

  • 語言
    • 智人(Homo sapiens)之前
  • 多久之前?
    • 演化的想法
  • 音樂
    • 歌唱
    • 樂器

人類演化

  • 演化可能時程

Image:13.01.jpg

語言特殊性

  • 語言是人特有的嗎?
    • 語言的定義?
      • 創造性
      • 可塑性
      • 自發性
      • .....
    • 其他動物的溝通方法
  • duplex theory (雙重論) —Liberman(1982)

Image:13.02.jpg

發聲器官

Image:13.03.jpg

  • 語音的產生是由肺呼出空氣,空氣經由聲帶(vocal cords)震動、經過不同發聲器官(articulators),包括軟顎(soft palate)、硬顎(hard palate)、舌頭(tongue)、牙齒(teeth)、嘴唇(lips)的加壓或阻斷,而產生不同的語音

Image:13.04.jpg

呼吸與吞嚥

  • 呼吸與吞嚥是不能兼顧的

Image:13.05.png

  • 吃飯時不要講話!
  • 聲帶

Image:13.06.png

Image:13.071.pngImage:13.072.pngImage:13.073.png

Sound spectrogram

  • 音譜儀

Image:13.08.jpg

  • formants

Image:13.09.jpg

phonemes

  • 音素(音位)
  • 母音vowel
  • 子音consonant
  • 每一種語言不同

DEMO"最近連不上(如果有人找到請告知)"

  • 有關鍵期
  • 子音/母音

Image:13.10.jpg

子音

  • Articulation(發音)
    • place of articulation (發音部位)
      • Bilabial (雙唇)
      • labio-dental(唇齒)
      • Dental(齒)
      • Alveolar(齒槽)
      • .......place of articulation
    • manner of articulation(發音方法)
      • Stop(停止音)
      • fricative(摩擦音)
      • affricate(氣音)
      • Nasals(鼻音)
      • ......manner of articulation

Sound spectrogram(音譜儀)

  • 畫出聲音

Image:13.11.jpg

  • 三個向度

Image:13.12.jpg

Image:13.13.png Image:13.14.png

  • Software : Raven

說明與下載

Image:13.15.png

語音的分析

  • 聽覺系統

Image:13.16.jpg

  • (真實情況)
    • 我唸的 Here we go again.

Image:13.17.png

  • formant / formant transition(共振峰/共振峰過渡)

Image:13.18.jpg

  • formant / formant transition(實際)

Image:13.19.png

Formant transition

  • 不同子音

Image:13.20.jpg

Speech categorization(語音分類)

  • VOT

Image:13.21.jpg

Voice Onset Time

Image:13.22.jpg

VOT實驗

Image:13.23.jpg

Voice onset time

以上請先閉眼來聽

Image:13.24.png

Voice onset time (實際)

  • 我唸da ta

Image:13.25.png

Information Provided by Face

Image:13.26.jpg

  • McGurk effect

McGurk effect 請先閉眼來聽 接著再看著聽 WIKI

Information from Sentence Context

  • Perceiving word in sentence
    • M*R* H*D * L*TTL* L*MB I*S FL**C* W*S WH*T* *S SN*W
      • Mary had a little lamb, Its fleece was white as snow.
  • technique of shadowing
  • Speech Segmentation

Image:13.27.jpg

sound of the WORD

  • transitional probabilities 轉移機率
  • statistical learning
  • Saffran et al. (1996)的實驗
    • 利用infants
    • nonsense word 2 minutes
      • 如 bidaku, padoti, ...
    • 後出現a. whole-word b. part-word

Saffran et al. (1996)

Image:13.28.jpg

top-down / bottom-up

Image:13.29.jpg

cortical location

Image:13.30.jpg

duel-stream model

Image:13.31.jpg

每日一字

  • 卵怎麼注音?
    • ㄖㄨㄢˇorㄌㄨㄢˇ
      • motor theory of speech recognition(語音辨識的運動理論)

motor theory of speech perception

Image:13.32.jpg

Think about

  • 語音?聲音?空間辨識
    • sound spectrogram
      • Obama