第十三講：Speech Perception

出自KMU Wiki

(修訂版本間差異)

跳轉到: 導航, 搜索

當前修訂版本

[編輯] 何時開始？

語言
- 智人（Homo sapiens）之前

多久之前？
- 演化的想法
音樂
- 歌唱
- 樂器

[編輯] 人類演化

演化可能時程

[編輯] 語言特殊性

語言是人特有的嗎？
- 語言的定義？
  - 創造性
  - 可塑性
  - 自發性
  - .....
- 其他動物的溝通方法

duplex theory （雙重論） —Liberman(1982)

[編輯] 發聲器官

參照第318頁 figure 13.1

語音的產生是由肺呼出空氣，空氣經由聲帶（vocal cords）震動、經過不同發聲器官（articulators），包括軟顎（soft palate）、硬顎（hard palate）、舌頭（tongue）、牙齒（teeth）、嘴唇（lips）的加壓或阻斷，而產生不同的語音

[編輯] 發聲器官運動與聲音變化

參照第319頁 figure 13.3

[編輯] 呼吸與吞嚥

呼吸與吞嚥是不能兼顧的

吃飯時不要講話！

聲帶

[編輯] Sound spectrogram

音譜儀

formants
參照第320頁 figure 13.4

[編輯] phonemes

音素（音位）
母音vowel
子音consonant
每一種語言不同

DEMO"最近連不上（如果有人找到請告知）"

有關鍵期
子音/母音

參照第320頁 table 13.1

[編輯] 子音

Articulation（發音）
- place of articulation （發音部位）
  - Bilabial （雙唇）
  - labio-dental（唇齒）
  - Dental（齒）
  - Alveolar（齒槽）
  - .......place of articulation
- manner of articulation（發音方法）
  - Stop（停止音）
  - fricative（摩擦音）
  - affricate（氣音）
  - Nasals（鼻音）
  - ......manner of articulation

[編輯] Sound spectrogram（音譜儀）

畫出聲音

三個向度

Bird song

Software : Raven

說明與下載

[編輯] 語音的分析

聽覺系統

（真實情況）
- 我唸的 Here we go again.

formant / formant transition（共振峰/共振峰過渡）
參照第321頁 figure 13.5

formant / formant transition（實際）

參照第322頁 figure 13.6

[編輯] Formant transition

不同子音

[編輯] Speech categorization（語音分類）

參照第323頁 figure 13.8

[編輯] Voice Onset Time

參照第323頁 figure 13.9

[編輯] VOT實驗

參照第323頁 figure 13.10

[編輯] Voice onset time

以上請先閉眼來聽

demo for VOT
- Bilabial negative
- Bilabial positive

[編輯] Voice onset time （實際）

我唸da ta

[編輯] Information Provided by Face

參照第324頁 figure 13.11

McGurk effect

McGurk effect 請先閉眼來聽接著再看著聽 WIKI

[編輯] Information from Sentence Context

Perceiving word in sentence
- M*R* H*D * L*TTL* L*MB I*S FL**C* W*S WH*T* *S SN*W
  - Mary had a little lamb, Its fleece was white as snow.

technique of shadowing

Speech Segmentation

參照第326頁 figure 13.12

[編輯] sound of the WORD

transitional probabilities 轉移機率
statistical learning

Saffran et al. (1996)的實驗
- 利用infants
- nonsense word 2 minutes
  - 如 bidaku, padoti, ...
- 後出現a. whole-word b. part-word

[編輯] Saffran et al. (1996)

參照第327頁 figure 13.13

[編輯] top-down / bottom-up

參照第328頁 figure 13.14

[編輯] cortical location

參照第329頁 figure 13.15

[編輯] duel-stream model

參照第329頁 figure 13.16

[編輯] Reconstructed spectrogram

參照第330頁 figure 13.17
Pasley et. al. (2012)
speech sound VS reconstructed spectrogram
參照第330頁 figure 13.18

[編輯] 每日一字

卵怎麼注音？
- ㄖㄨㄢˇorㄌㄨㄢˇ
  - motor theory of speech recognition（語音辨識的運動理論）

[編輯] 利用TMS實驗

D'Ausilio et. al. (2012)
參照第331頁 figure 13.19

[編輯] Infant speech perception

categorical perception
參照第332頁 figure 13.20

[編輯] Think about

語音辨識系統
- Apple iPhone 4S siri
  - 官方廣告
  - 日本人使用

語音？聲音？空間辨識
- sound spectrogram vOICe系統
  - 永
  - Obama

返回知覺心理學

取自"http://wiki.kmu.edu.tw/index.php/%E7%AC%AC%E5%8D%81%E4%B8%89%E8%AC%9B%EF%BC%9ASpeech_Perception"

-===何時開始？===
+==何時開始？==
 *語言
 **智人（Homo sapiens）之前
 *多久之前？
 **演化的想法
 *音樂
 **歌唱
 [[Image:13.01.jpg]]
-===語言特殊性===
+==語言特殊性==
 *語言是人特有的嗎？
 **語言的定義？
 [[Image:13.02.jpg]]
-===發聲器官===
+==發聲器官==
-[[Image:13.03.jpg]]
+*參照第318頁 figure 13.1
 *語音的產生是由肺呼出空氣，空氣經由聲帶（vocal cords）震動、經過不同發聲器官（articulators），包括軟顎（soft palate）、硬顎（hard palate）、舌頭（tongue）、牙齒（teeth）、嘴唇（lips）的加壓或阻斷，而產生不同的語音
+===發聲器官運動與聲音變化===
-[[Image:13.04.jpg]]
+*參照第319頁 figure 13.3
 ===呼吸與吞嚥===
 *聲帶
 [[Image:13.06.png]]
 [[Image:13.071.png]][[Image:13.072.png]][[Image:13.073.png]]
 ===Sound spectrogram===
 *音譜儀
+[[Image:13.08.jpg]]
 *formants
+*參照第320頁 figure 13.4
 ===phonemes===
 [http://ling.yale.edu/Ling120/Index.html DEMO"最近連不上（如果有人找到請告知）"]
 *有關鍵期
 *子音/母音
+*參照第320頁 table 13.1
 ====子音====
 ***Nasals（鼻音）
 ***......[http://home.cc.umanitoba.ca/~krussll/138/sec3/moa.htm manner of articulation]
 ===Sound spectrogram（音譜儀）===
 *畫出聲音
+[[Image:13.11.jpg]]
 *三個向度
+[[Image:13.12.jpg]]
 *[http://web2.uwindsor.ca/courses/biology/dmennill/CostaRica/CRSongs.html Bird song]
+[[Image:13.13.png]] [[Image:13.14.png]]
 *Software : Raven
 [http://www.birds.cornell.edu/brp/raven/RavenOverview.html 說明與下載]
+[[Image:13.15.png]]
 ===語音的分析===
 *聽覺系統
+[[Image:13.16.jpg]]
 *（真實情況）
 **我唸的 Here we go again.
+[[Image:13.17.png]]
 *formant / formant transition（共振峰/共振峰過渡）
+*參照第321頁 figure 13.5
 *formant / formant transition（實際）
+*參照第322頁 figure 13.6
 ===Formant transition===
 *不同子音
+[[Image:13.20.jpg]]
-===Speech categorization（語音分類）===
+==Speech categorization（語音分類）==
 *VOT
+*參照第323頁 figure 13.8
 ===Voice Onset Time===
+*參照第323頁 figure 13.9
 ===VOT實驗===
+*參照第323頁 figure 13.10
 ===Voice onset time===
 **Bilabial negative
 **Bilabial positive
+[[Image:13.24.png]]
 ===Voice onset time （實際）===
 *我唸da ta
+[[Image:13.25.png]]
-===Information Provided by Face===
+==Information Provided by Face==
+*參照第324頁 figure 13.11
+*McGurk effect
 [http://www.youtube.com/watch?v=jtsfidRq2tw&NR=1 McGurk effect]
 請先閉眼來聽
 接著再看著聽
 [http://en.wikipedia.org/wiki/McGurk_effect WIKI]
 ===Information from Sentence Context===
 *Speech Segmentation
+*參照第326頁 figure 13.12
 ===sound of the WORD===
 ===Saffran et al. (1996)===
+*參照第327頁 figure 13.13
 ===top-down / bottom-up===
+*參照第328頁 figure 13.14
 ===cortical location===
+*參照第329頁 figure 13.15
 ===duel-stream model===
+*參照第329頁 figure 13.16
+===Reconstructed spectrogram===
+*參照第330頁 figure 13.17
+*Pasley et. al. (2012)
+*speech sound VS reconstructed spectrogram
+*參照第330頁 figure 13.18
 ===每日一字===
 *卵怎麼注音？
 **ㄖㄨㄢˇorㄌㄨㄢˇ
 ***motor theory of speech recognition（語音辨識的運動理論）
+===利用TMS實驗===
+*D'Ausilio et. al. (2012)
+*參照第331頁 figure 13.19
-===motor theory of speech perception===
+==Infant speech perception==
+*categorical perception
+*參照第332頁 figure 13.20
 ===Think about===
 **Apple iPhone 4S siri
 ***[http://www.youtube.com/watch?v=COLvS68ceQ4 官方廣告]
-***[http://www.youtube.com/watch?v=dutcfDk_SQo 日本人使用]
+***[http://www.youtube.com/watch?v=Qh-kutOUmSs 日本人使用]
 *語音？聲音？空間辨識
-**sound spectrogram
+**sound spectrogram [http://www.seeingwithsound.com/javoice.htm vOICe系統]
 ***永
 ***Obama
+返回[[知覺心理學]]

第十三講：Speech Perception

出自KMU Wiki

當前修訂版本

目錄

[編輯] 何時開始？

[編輯] 人類演化

[編輯] 語言特殊性

[編輯] 發聲器官

[編輯] 發聲器官運動與聲音變化

[編輯] 呼吸與吞嚥

[編輯] Sound spectrogram

[編輯] phonemes

[編輯] 子音

[編輯] Sound spectrogram（音譜儀）

[編輯] 語音的分析

[編輯] Formant transition

[編輯] Speech categorization（語音分類）

[編輯] Voice Onset Time

[編輯] VOT實驗

[編輯] Voice onset time

[編輯] Voice onset time （實際）

[編輯] Information Provided by Face

[編輯] Information from Sentence Context

[編輯] sound of the WORD

[編輯] Saffran et al. (1996)

[編輯] top-down / bottom-up

[編輯] cortical location

[編輯] duel-stream model

[編輯] Reconstructed spectrogram

[編輯] 每日一字

[編輯] 利用TMS實驗

[編輯] Infant speech perception

[編輯] Think about

檢視

個人工具

導航

搜索

工具箱