第十三講:Speech Perception

出自KMU Wiki

(修訂版本間差異)
跳轉到: 導航, 搜索
在2014年1月15日 (三) 00:18所做的修訂版本 (編輯)
Woody (對話 | 貢獻)
(何時開始?)
←上一個
在2014年1月15日 (三) 00:46所做的修訂版本 (編輯) (撤銷)
Woody (對話 | 貢獻)
(何時開始?)
下一個→
第5行: 第5行:
*多久之前? *多久之前?
**演化的想法 **演化的想法
- 
*音樂 *音樂
**歌唱 **歌唱
第15行: 第14行:
[[Image:13.01.jpg]] [[Image:13.01.jpg]]
-===語言特殊性===+==語言特殊性==
*語言是人特有的嗎? *語言是人特有的嗎?
**語言的定義? **語言的定義?
第27行: 第26行:
[[Image:13.02.jpg]] [[Image:13.02.jpg]]
-===發聲器官===+==發聲器官==
[[Image:13.03.jpg]] [[Image:13.03.jpg]]
第60行: 第59行:
[http://ling.yale.edu/Ling120/Index.html DEMO"最近連不上(如果有人找到請告知)"] [http://ling.yale.edu/Ling120/Index.html DEMO"最近連不上(如果有人找到請告知)"]
*有關鍵期 *有關鍵期
- 
*子音/母音 *子音/母音
第120行: 第118行:
[[Image:13.20.jpg]] [[Image:13.20.jpg]]
-===Speech categorization(語音分類)===+==Speech categorization(語音分類)==
*VOT *VOT
[[Image:13.21.jpg]] [[Image:13.21.jpg]]
第142行: 第140行:
[[Image:13.25.png]] [[Image:13.25.png]]
-===Information Provided by Face===+==Information Provided by Face==
[[Image:13.26.jpg]] [[Image:13.26.jpg]]
第183行: 第181行:
===duel-stream model=== ===duel-stream model===
[[Image:13.31.jpg]] [[Image:13.31.jpg]]
 +
 +===Reconstructed spectrogram===
 +*Pasley et. al. (2012)
 +*speech sound VS reconstructed spectrogram
===每日一字=== ===每日一字===
第188行: 第190行:
**ㄖㄨㄢˇorㄌㄨㄢˇ **ㄖㄨㄢˇorㄌㄨㄢˇ
***motor theory of speech recognition(語音辨識的運動理論) ***motor theory of speech recognition(語音辨識的運動理論)
- +===利用TMS實驗===
-===motor theory of speech perception===+D'Ausilio et. al. (2012)
-[[Image:13.32.jpg]]+==Infant speech perception==
 +*categorical perception
===Think about=== ===Think about===
第205行: 第208行:
-[[知覺心理學| 回上頁]]+返回[[知覺心理學]]

在2014年1月15日 (三) 00:46所做的修訂版本

目錄

何時開始?

  • 語言
    • 智人(Homo sapiens)之前
  • 多久之前?
    • 演化的想法
  • 音樂
    • 歌唱
    • 樂器

人類演化

  • 演化可能時程

Image:13.01.jpg

語言特殊性

  • 語言是人特有的嗎?
    • 語言的定義?
      • 創造性
      • 可塑性
      • 自發性
      • .....
    • 其他動物的溝通方法
  • duplex theory (雙重論) —Liberman(1982)

Image:13.02.jpg

發聲器官

Image:13.03.jpg

  • 語音的產生是由肺呼出空氣,空氣經由聲帶(vocal cords)震動、經過不同發聲器官(articulators),包括軟顎(soft palate)、硬顎(hard palate)、舌頭(tongue)、牙齒(teeth)、嘴唇(lips)的加壓或阻斷,而產生不同的語音

Image:13.04.jpg

呼吸與吞嚥

  • 呼吸與吞嚥是不能兼顧的

Image:13.05.png

  • 吃飯時不要講話!
  • 聲帶

Image:13.06.png

Image:13.071.pngImage:13.072.pngImage:13.073.png

Sound spectrogram

  • 音譜儀

Image:13.08.jpg

  • formants

Image:13.09.jpg

phonemes

  • 音素(音位)
  • 母音vowel
  • 子音consonant
  • 每一種語言不同

DEMO"最近連不上(如果有人找到請告知)"

  • 有關鍵期
  • 子音/母音

Image:13.10.jpg

子音

  • Articulation(發音)
    • place of articulation (發音部位)
      • Bilabial (雙唇)
      • labio-dental(唇齒)
      • Dental(齒)
      • Alveolar(齒槽)
      • .......place of articulation
    • manner of articulation(發音方法)
      • Stop(停止音)
      • fricative(摩擦音)
      • affricate(氣音)
      • Nasals(鼻音)
      • ......manner of articulation

Sound spectrogram(音譜儀)

  • 畫出聲音

Image:13.11.jpg

  • 三個向度

Image:13.12.jpg

Image:13.13.png Image:13.14.png

  • Software : Raven

說明與下載

Image:13.15.png

語音的分析

  • 聽覺系統

Image:13.16.jpg

  • (真實情況)
    • 我唸的 Here we go again.

Image:13.17.png

  • formant / formant transition(共振峰/共振峰過渡)

Image:13.18.jpg

  • formant / formant transition(實際)

Image:13.19.png

Formant transition

  • 不同子音

Image:13.20.jpg

Speech categorization(語音分類)

  • VOT

Image:13.21.jpg

Voice Onset Time

Image:13.22.jpg

VOT實驗

Image:13.23.jpg

Voice onset time

以上請先閉眼來聽

Image:13.24.png

Voice onset time (實際)

  • 我唸da ta

Image:13.25.png

Information Provided by Face

Image:13.26.jpg

  • McGurk effect

McGurk effect 請先閉眼來聽 接著再看著聽 WIKI

Information from Sentence Context

  • Perceiving word in sentence
    • M*R* H*D * L*TTL* L*MB I*S FL**C* W*S WH*T* *S SN*W
      • Mary had a little lamb, Its fleece was white as snow.
  • technique of shadowing
  • Speech Segmentation

Image:13.27.jpg

sound of the WORD

  • transitional probabilities 轉移機率
  • statistical learning
  • Saffran et al. (1996)的實驗
    • 利用infants
    • nonsense word 2 minutes
      • 如 bidaku, padoti, ...
    • 後出現a. whole-word b. part-word

Saffran et al. (1996)

Image:13.28.jpg

top-down / bottom-up

Image:13.29.jpg

cortical location

Image:13.30.jpg

duel-stream model

Image:13.31.jpg

Reconstructed spectrogram

  • Pasley et. al. (2012)
  • speech sound VS reconstructed spectrogram

每日一字

  • 卵怎麼注音?
    • ㄖㄨㄢˇorㄌㄨㄢˇ
      • motor theory of speech recognition(語音辨識的運動理論)

利用TMS實驗

D'Ausilio et. al. (2012)

Infant speech perception

  • categorical perception

Think about

  • 語音?聲音?空間辨識


返回知覺心理學