말소리 지각의 모호 논리 모형

운동 이론에 대한 보다 직접적인 반대는 범주적 지각이 아니라 말소리 처리에만 특수한 단원이 있음을 시사하는 것이 아니라고 주장하는 연구자가 나왔다. 특히 운동 이론에서 말소리는 특수하다고 하는 가정에 대한 도전은 지각의 모호 논리 모형(FLMP)이다. 이 모형에 따르면 다른 수많은 말소리 지각 현상과 마찬가지로 범주 지각도 청각 형태의 특징들을 분류하는 문제의 하나로 이해될 수 있다. 지각의 모호 논리 모형의 핵심 가정은 말소리 처리에서의 범주화는 다른 지각 상황에서 우리가 사용하는 것과 같은 종류의 범주화 과정에 근거한다.

모든 종류의 대상을 범주화하는 데 사용하는 개념은 경계의 모호함이다. 우리는 울새는 새인가라는 질문과 펭귄은 새인가라는 질문에 대해서 모두 그렇다고 답한다. 그러나 우리는 울새에 대한 질문에 대해서 훨씬 더 빨리 답한다. 울새가 생각하는 전형적인 새이기 때문이다. 펭귄에 대해서 판단이 늦은 이유는 새의 범주의 대표적인 것이 아니기 때문이다. 우리가 어떤 것은 그 범주의 강력한 범주 구성원이고 다른 어떤 것은 약한 구성원이다. 약하다고 생각하는 간주하는 그 경계가 모호한 것이다

FLMP에 의하면 같은 종류의 범주 판단이 말소리 처리에서도 일어난다. ba 같은 특정 음절의 정확한 물리적 형태가 맥락이나 말하는 사람에 따라 다르더라도 각기 소리들을 ba범주의 구성원으로 분류할 유사성이 있다 Massaro(1987)는 범주화 과정은 다음 3단계를 거친다고 한다

평가(evaluation): 청각 신호의 특징이 분석된다. 청각 체계는 그 포만트 변이와 정지 상태 VOT와 아직 밝혀지지 않은 또 다른 기본 특징들에 따라서 각 음절을 처리한다
통합(integration): 주어진 청각 신호의 특징들이 기억 속에 저장되어 있는 전형성의 특징과 비교된다. 원형은 우리가 재인할 수 있는 각 음절의 특징들로 이루어져 있다. 우리는 주어진 청각 신호의 특징을 원형의 특징과 맞춰보고 어떤 원형이 그 신호의 특징들을 가장 잘 통합하는 가를 결정짓고자 한다
판단(decision): 소리는 제시된 자극의 특징과 가장 잘 들어맞는 형태로 분류된다

FLMP에 따르면 우리는 다른 청각 신호를 분석하는 것과 똑같은 방식으로 말소리를 분석한다. 말소리 지각이 범주적으로 보이는 것은 이 형태를 아주 빠르게 자동적으로 분류할 수 있는 우리의 능력 때문이다. Massaro(1987)는 고전적인 범주 지각 실험을 반복하여 이 모형을 검증했다. 그러나 그는 자극의 인식과 변별 자료만 측정한 것이 아니라 자극 분류 판단에 사용된 반응시간까지 조사했다. 주어진 자극을 ba, pa라고 하는지 측정했을 뿐 아니라 판단하는 데 걸리는 시간도 조사했다. 주어진 범주 내에서 가장 이상적인 소리는 ba, pa소리에서 멀어지면 멀어질수록 반응시간이 더 증가했다. 이 결과는 우리가 소리를 범주로 분류하는 것은 다른 자극을 분류하는 것과 같은 방식으로 이루어진다는 사실을 암시한다. 원형에 특징들을 맞추어 보는 작업에 근거한다. 원형과 유사성이 낮으면 낮을수록 분류에 시간이 더 걸린다. 반면 운동 이론으로는 이런 음절 범주 내에서 반응시간 차이를 쉽게 설명할 수 없다

시각과 소리의 통합: 영화가 전문적인 더빙되어 있더라도 목소리가 이상하게 들리고 말하는 사람의 입과 시간상 맞지 않아 보인다. 그래도 영화가 원래 더빙된 말과 비슷한 단어를 사용한 것이면 그 단어는 정상적으로 들리고 입모양과 정확하게 맞아떨어진 것처럼 보인다. 일종에 착히다. 말하는 사람의 입 운동과 들리는 소리는 잘 맞는다. 하지만 시각과 소리가 상응하지 않으면 그 말소리는 이상하고 어긋나 보인다. 눈을 감고 대화를 들을 때 말소리 지각에는 시각과 청각 정보를 통합하는 노력을 한다.

McGurk효과는 말소리에 대한 지각이 산출되는 말소리의 시각적 모습에 영향을 받을 때 일어난다. 만일 말하는 사람이 ga라고 말하는 모습을 보는데 동시에 들리는 소리는 ba라고 하면 그 소리가 da라고 들릴 것이다. 지각되는 소리는 시각으로 받는 정보와 귀에 들어오는 소리 형태 사이에서 가장 맞는 타협이다.

말소리 지각에서 시각 효과가 어떤 의미인지 운동 이론과 FLMP의 입장에서 생각해보자 운동이론에 따르면 McGurk 효과는 운동 형태가 말소리 지각과 관련이 있음을 보여준다. FLMP이론에 따르면 시각 정보와 청각 정보가 따로 분석되고 이들이 통합되어 말소리에 결과한 것이다.

운동 이론이다 FLMP 중 어느것도 청각적 단어 재인에서 어떤 단위가 사용되는지 완벽한 답은 없다. 사람은 말소리 지각 과정에서 말하는 이의 다양성, 분절, 불변성의 결여 등에서 나오는 문제점들을 극복한다. 듣는 이가 우리의 말소리를 다르게 변별하기 위해 시간에 따라 변하는 포만트를 사용할 수 있고 여러 맥락에서 다른 특징들을 사용할 수 있는 점에서 모두 합의한다. 그래도 말소리 재인의 특징을 분석은 많이 남아있다

운동 이론과 FLMP에서 취하는 기본 입장을 대조하는 것은 유용하다. 가장 기본적인 문제는 말소리는 특수한 것인가라는 질문이다. 두 이론이 아주 입장이 다르다. 운동은 그렇다고 말하지만 FLMP는 아니다고 한다. 그러나 두 이론을 검증할 결정적인 검사는 없다. 이론들은 몇 가지 서로 다른 연구 문제를 통괄하는 증거에 가중치를 주느냐에 따라 평가가 변한다.

운동 이론이나 FLMP가 모두 전체 단어보다는 기본 말소리의 처리를 소개하고 있다. 그러나 두 이론은 다른 것을 시사한다. 운동 이론은 단어 재인에서 단원적이다. 그리고 상향적인 접근을 예측해준다. FLMP는 단어가 생기는 맥락이 단어 재인의 어떤 측면에 영향을 미칠 수 있다는 생각과 일치한다.