누군가가 당신에게 새를 뒤집었을 때를 기억하십니까? 그 단일 손가락이 말한 외설물을 동반했는지 여부에 관계없이 그 의미가 무엇인지 정확히 알았습니다.
움직임에서 의미로의 전환은 매끄럽고 직접적입니다. 우리는 말을 듣지 않고 말하고 이해하지 않고 말할 수있는 능력이 부여되기 때문입니다. 우리는 포인팅을 통해 직접주의를 기울이고, 흉내내어 이야기를 향상시키고, 리듬 스트로크로 강조하고, 단순한 손가락의 조합으로 전체 반응을 전달할 수 있습니다.
.전달의 뉘앙스는 약간 다르지만 움직임과의 의사 소통을 보충하는 경향은 보편적입니다. 예를 들어 파푸아 뉴기니에서 사람들은 코와 머리를 가리키고 라오스에서는 때때로 입술을 사용합니다. 가나에서는 왼손잡이 가리키는 것이 금기 일 수 있으며, 그리스 나 터키에서는 모든 것이 당신의 지수 손가락과 엄지 손가락으로 반지를 형성하여 모든 것이 당신을 곤경에 빠뜨릴 수 있음을 나타냅니다.
다양성에도 불구하고 제스처는 메시지를 반복하거나 강조하는 데 사용되는 움직임으로 느슨하게 정의 될 수 있습니다. 그 메시지가 명시 적으로 말하든 아니든 말더라. 제스처는“행동을 나타내는”운동이지만 추상적 또는 은유 적 정보를 전달할 수도 있습니다. 출생이 아닌 아주 어린 나이부터 우리가 가지고 다니는 도구입니다. 선천적으로 눈을 멀게하는 어린이조차도 자연스럽게 말하는 동안 자연스럽게 몸짓을합니다. 모두가 그렇게합니다. 그럼에도 불구하고, 우리 중 소수만은 현상, 즉 신경 생물학, 발전, 그리고 다른 사람들의 행동을 이해하는 데 도움이되는 역할을 현상으로 생각하기를 많이 생각하지 않았습니다. 연구자들이 우리의 신경 배선에 더 깊이 파고 들면서, 인식이 우리의 행동을 안내하는 것처럼 제스처가 우리의 인식을 안내한다는 것이 점점 더 분명 해지고 있습니다.
.제스처를위한 타고난 경향
Susan Goldin-Meadow는 제스처 분야에서 타이탄으로 간주됩니다. 그러나 그녀가 1970 년대에 제스처에 처음 관심을 갖게되었을 때“분야는 전혀 없었습니다.” 소수의 다른 사람들은 제스처에서 일했지만 거의 전적으로 비언어적 행동 연구의 파생물로 일했습니다. 그녀는 이후 청각 어린이들이 수화에 노출되지 않을 때 만들어내는 제스처 시스템을 포함하여 학습 및 언어 창조에서 제스처의 역할을 연구하는 경력을 쌓았습니다. (수화는 완전히 발달 된 언어 시스템을 구성하기 때문에 제스처와는 다릅니다.) 시카고 대학교에서 교수 인 그녀는 제스처 생산과 인식을 조사하는 가장 유명한 실험실 중 하나를 운영하고 있습니다.
."그것은 무언의 생각에 대한 멋진 창이며, 무언의 생각은 종종 가장 흥미 롭습니다."그녀는 자신의 몸짓으로 많은 몸짓으로 말했다.
.Goldin-Meadow와 함께 훈련 한 많은 연구자들은 현재 시카고 대학교 밖에서 비슷한 질문을 추구하고 있습니다. Miriam Novack은 2016 년 Goldin-Meadow에서 박사 학위를 수료했으며 Northwestern University의 박사후과로서 그녀는 평생 동안 제스처가 어떻게 발전하는지 조사했습니다.
.Novack은 대부분의 보고서에 따르면 침팬지 나 유인원조차도 사람들에 의해 자랐지 않는 한 다른 종 지점은 없다고 설명했다. 대조적으로 인간 아기는 종종 말하기 전에 지적하며, 상징적 인 움직임을 생성하고 이해하는 능력은 언어와 함께 계속 발전하고 있습니다. 제스처는 또한 교실에서 귀중한 도구로, 어린 아이들이 동사를 새로운 맥락으로 일반화하거나 수학 방정식을 해결하는 데 도움이 될 수 있습니다. 그녀는“그러나 아이들이 우리의 손 움직임이 의사 소통이라는 것을 이해하기 시작할 때 반드시 명확하지는 않습니다. 메시지의 일부라는 것은 반드시 명확하지 않습니다.”
.아이들이 자신을 표현할 단어를 찾을 수 없을 때, 그들은 손이 말을하도록했습니다. 18 개월의 어린 영아를 공부 한 Novack은 나이가 들어감에 따라 운동으로부터 의미를 도출 할 수있는 능력이 어떻게 증가하는지 보았습니다. 성인은 자연스럽게 그렇게합니다. 손 모양과 궤적에 의미를 매핑하는 것은 작은 위업이 아니라는 것을 잊기 쉽습니다.
제스처는 단순한 행동 일 수 있지만 분리되지는 않습니다. 연구에 따르면 제스처는 언어를 늘릴뿐만 아니라 인수에 도움이된다고합니다. 실제로, 두 사람은 동일한 신경 시스템을 공유 할 수 있습니다. 평생 동안 제스처 경험을 습득하면 다른 사람들의 움직임으로부터의 의미를 직관하는 데 도움이 될 수 있습니다. 그러나 개별 세포 또는 전체 신경망이 다른 사람의 행동을 해독하는 능력을 중재하는지 여부는 여전히 논쟁의 여지가 있습니다.
구체화 된 인식
언어학 및인지 과학 분야의 우뚝 솟은 인물 인 Noam Chomsky의 작업에서 영감을 얻은 일부 연구자들은 언어와 감각 운동 시스템이 상징적 사고를 전달하고 해석하는 수단이더라도 임신 커뮤니케이션에서 함께 작동 할 필요가없는 모듈을 오랫동안 유지해 왔습니다. 연구자들은 뇌 내에서 언어가 어떻게 구성되는지 또는 어떤 신경 회로가 제스처에서 의미를 이끌어내는 지 아직 완전히 이해하지 못하기 때문에 문제는 불안정합니다. 그러나 플로리다 국제 대학의 부교수 인 앤서니 딕 (Anthony Dick)과 같은 많은 과학자들은이 두 기능이 동일한 뇌 구조에 의존한다고 이론화합니다.
뇌 활동의 기능적 자기 공명 영상 (FMRI) 스캔을 사용하여 Dick과 동료들은“공동 연설”제스처의 해석이 일관되게 언어 처리 센터를 모집한다는 것을 보여주었습니다. 관련된 특정 영역과 활성화 정도는 연령에 따라 다릅니다. 이는 젊은 뇌가 여전히 제스처 음성 통합 기술과 지역 간의 정제 연결을 연마하고 있음을 시사합니다. Dick의 말에 따르면,“제스처는 본질적으로 더 넓은 언어 시스템에서 하나의 첨탑입니다.”는 의미 론적 처리 영역과 감각 운동 영역을 모두 통합합니다. 그러나 언어 자체에 대한 인식은 감각 운동 경험, 감각적 인상과 움직임에 의존하는 세상에 대한 학습 방법은 어느 정도입니까?
Manuela Macedonia는 Johannes Kepler University Linz (JKU)에서 이탈리아어를 가르치고있는 학생들 사이에서 반복적 인 패턴을 발견했을 때 최근에 언어학 석사 학위를 마쳤습니다. 같은 말을 몇 번이나 반복하더라도 여전히 거친 문장을 밟을 수 없었습니다. 인쇄 문구 광고 구역도 도움이되지 않았습니다. "그들은 매우 좋은 청취자가되었습니다. 그러나 그들은 말할 수 없었습니다."
.그녀는이 책으로 가르치고있었습니다. 그녀는 학생들에게 듣고, 쓰고, 연습하고, 반복하도록했지만 충분하지 않았습니다. 뭔가 빠졌습니다.
오늘날, JKU의 정보 공학 연구소의 선임 과학자로서, 라이프 치히의 Max Planck 인간인지 및 뇌 과학 연구소의 연구원으로서, 마케도니아는 Dick과 비슷한 소리가 들리는 가설에 더 가까워지고 있습니다. 언어는 모듈이 아닙니다.
.아이들이 모국어를 배우고있을 때 마케도니아는 자신의 몸 전체와 정보를 흡수한다고 주장합니다. 예를 들어,“양파”와 같은 단어는 다섯 가지 감각 모두와 밀접하게 연결되어 있습니다. 양파는 얇게 썬 때 쓴 탕 및 눈물을 유발하는 냄새가 나는 구근 모양, 종이 피부, 삐걱 거리는 냄새가납니다. “기쁨”과 같은 추상적 인 개념조차도 웃음, 웃음, 기쁨을위한 점프와 같은 다중 감각 구성 요소가 있습니다. 어느 정도는 인식이“구체화”됩니다. 뇌의 활동은 신체의 행동과 경험에 의해 수정 될 수 있으며 그 반대도 마찬가지입니다. 그러므로 언어 적 경험이 감각적 인 연관성을 제거하기 때문에 학생들이 듣고, 글을 쓰고, 연습하고 반복하는 경우 외국어가 고집되지 않는다는 것은 놀라운 일이 아닙니다.
마케도니아는 의미 적으로 관련된 제스처를 수행하여 새로운 단어를 강화하는 학습자들이 자동차 지역에 참여하고 리콜을 향상 시킨다는 것을 발견했습니다. 단순히“Bridge”라는 단어를 반복하지 마십시오. 암송 할 때 손으로 아치를 만드십시오. 그 여행 가방을 들으십시오. 그렇게하면 단어는 평생 동안 얻은 경험의 클러스터에 대한 라벨이기 때문에 뇌를 유지합니다.
다 감각 학습을 통해“양파”와 같은 단어는 뇌의 한 곳 이상에서 살 수 있습니다. 전체 네트워크에 배포됩니다. 방치로 인해 하나의 노드가 붕괴되면 다른 활성 노드가 모두 연결되어 있기 때문에 복원 할 수 있습니다. Macedonia는“모든 노드는 다른 노드가 알고있는 것을 알고 있습니다.
경험에 의해 유선
언어를 풍요롭게하는 제스처의 힘은 제스처가 감각적 경험과 통합되는 한 가지 방법을 나타낼 수 있습니다. 점점 더 많은 작업은 언어와 제스처가 밀접하게 얽혀있는 것처럼 모터 생산과 인식도 마찬가지입니다. 구체적으로, 제스처 관찰과 이해의 기초가되는 신경 시스템은 엘리자베스 웨이크 필드 (Elizabeth Wakefield)에 따르면 동일한 운동을 생성하는 과거의 경험에 영향을받습니다.
.또 다른 Goldin-Meadow Protégé 인 Wakefield는 Loyola University Chicago의 조교수로서 자신의 실험실을 지휘하여 일상적인 행동이 학습에 도움이되고인지에 영향을 미치는 방식을 연구합니다. 그러나 그녀는 이러한 질문을 심층적으로 조사하기 전에 제스처 처리가 어떻게 발전하는지 이해해야했습니다. 2013 년 Indiana University의 신경 과학자 Karin James와 함께 일하는 대학원생으로서, 그녀는 어린이와 성인 모두에서 제스처 인식을 최초로 조사한 FMRI 연구를 수행했습니다.
참가자들이 말하면서 몸짓을 한 여배우의 비디오를 보았을 때, 시각적 및 언어 처리 지역만이 해고되는 유일한 지역은 아닙니다. 참가자가 여전히 스캐너에 누워 있더라도 운동 경험과 관련된 뇌 영역도 활성화되었습니다. 성인은 어린이들 보다이 지역에서 더 많은 활동을 보였지만 Wakefield는 성인이 비슷한 움직임을하는 데 더 많은 경험을 가지고 있었기 때문에 (아이들은 말할 때 제스처를 줄이는 경향이 있기 때문입니다.
.Wakefield는“제가 아는 한, 우리는 개발 전반에 걸쳐 제스처 처리를보고있는 최초의 사람들이었습니다. "제스처가 발달 적으로 처리되는 방법에 대한 작은 문헌은 제스처 형성 학습에 대해 어떻게 생각하는지에 중요한 영향을 미칩니다."
.Wakefield의 연구가 제스처 인식과 의도적 인 행동이 동일한 신경 기초에 서 있다는 유일한 증거는 아닙니다. 수많은 실험은 발레, 농구, 기타 연주, 매듭을 묶고 음악을 읽는 것과 관련된 행동에 대한 유사한 모터 "미러링"현상을 보여주었습니다. 각각의 경우, 숙련 된 개인이 다른 사람들이 자신의 공예를 수행하는 것을 관찰했을 때, 감각 운동 영역은 전문 지식이 적은 참가자의 해당 영역보다 더 활동적이었습니다.
(역설적으로, 일부 실험은 정확히 반대의 효과를 관찰했습니다. 전문가의 뇌는 자신의 기술을 가진 사람을 보았을 때 비전거의 뇌보다 적은 반응을 보였습니다. 그러나 연구자들은 그 경우 경험이 그 경험을 처리하는 데 뇌가 더 효율적으로 만들어 졌다고 이론화했습니다.)
.Gallaudet University의 조교수 인 Lorna Quandt는 청각 장애인과 청각 장애인들 사이에서 이러한 현상을 공부하는 것은 세밀한 접근 방식을 취합니다. 그녀는 뇌파 검사 (EEG)를 사용하여 감각 운동 구성 요소로 제스처를 분해하여 특정 행동을하는 것에 대한 기억이 우리가 다른 사람들의 제스처를 예측하고 인식하는 방법을 변화 시킨다는 것을 보여줍니다.
.한 연구에서, 그녀와 그녀의 동료들은 성인 참가자의 EEG 패턴을 녹화하면서 다양한 색상과 무게의 대상을 처리 한 다음 비디오에서 남자가 동일한 항목과 상호 작용하는 것을 보았습니다. 그 사람이 단순히 물건 주위의 행동을 흉내 내거나 접촉하지 않고 그들을 가리키는 경우에도 참가자의 뇌는 마치 기사 스스로 조작하는 것처럼 반응했습니다. 더욱이, 그들의 신경 활동은 그들 자신의 경험을 반영했다.
“제스처를 수행하는 것을 볼 때, 나는 내가보고있는 일을 처리하는 것이 아닙니다. 다음에 할 것이라고 생각하는 일을 처리하고 있습니다.”라고 Quandt는 말했습니다. "그리고 그것은 행동 인식을 볼 수있는 정말 강력한 렌즈입니다." 내 뇌는 밀리 초만 만 감각 운동 경험을 기대합니다.
정확히 얼마나 많은 모터 경험이 필요합니까? Quandt의 실험에 따르면, 컬러 체중 협회에서 더 전문가가되는 간단한 작업에 따르면, 서면 정보를 읽는 것이 좋지는 않지만 단 하나의 촉각 시험만으로 충분합니다.
Dick에 따르면, 인간이 움직이지 않을 때에도 뇌 운동 영역이 활성화되지만 다른 사람들의 움직임 (“관찰 실행 일치”로 알려진 현상)은 일반적으로 잘 확립되어 있다는 개념입니다. 논란의 여지가있는 것은이 같은 지역이 다른 지역의 행동에서 의미를 추출하는 정도입니다. 더 논쟁의 여지가 있지만 감각 운동 활성화를 통해 이해력을 높이기위한 기초가되는 메커니즘이 무엇인지입니다. 그것은 여러 뇌 영역에서 조정 된 활동입니까, 아니면 개별 세포의 활동으로 끓을 수 있습니까?
거울 뉴런 또는 네트워크?
심리학자 인 월터 진부 버리 (Walter Pillsbury)는 한 세기 전 전 이렇게 썼다. 이 개념은 미러 뉴런 이론에서 현대적인 화신을 가지고 있으며, 이는 제스처와 음성으로부터 의미를 얻는 능력이 주요 뇌 영역에서 단일 세포의 활성화에 의해 설명 될 수 있다고 주장한다. 그러나 일상적인 행동에서 미러 뉴런의 역할에 관한 이용 가능한 증거가 과매도가 높고 과도하게 해석되었을 수 있다는 것이 점점 더 분명 해지고 있습니다.
Mirror Neuron 이론은 1990 년대에 시작된 원숭이를 연구하는 연구원 그룹이 열등한 프리 모터 피질의 특정 뉴런이 동물이 파악과 같은 목표 지향적 움직임을 만들었을 때 반응했음을 발견했을 때 시작되었습니다. 과학자들은 원숭이들이 수동적으로 실험자가 비슷한 움직임을하는 것을 관찰했을 때 동일한 세포가 발사되었다는 사실에 놀랐다. 관찰 실행의 명확한 사례처럼 보였지만 단일 세포 수준에서.
연구원들은 몇 가지 가능한 설명을 생각해 냈습니다. 아마도 이러한 "거울 뉴런"은 원숭이가 적절한 운동 반응을 선택하는 데 도움이되는 행동에 대한 정보를 단순히 전달하고 있었을 것입니다. 예를 들어, 내가 악수를 시작하기 위해 당신을 향해 내 손을 내밀면, 당신의 자연스러운 반응은 아마도 나를 반영하고 똑같이하는 것입니다.
또는 이러한 단일 세포는 다른 사람의 움직임에서 의미를 해석하는 방식 인“행동 이해”의 기초를 형성 할 수 있습니다. 이러한 가능성은 원숭이가 자신의 행동을 비교적 적은 정신 계산으로 자신의 행동에 맞게 일치시킬 수 있습니다. 이 아이디어는 궁극적으로 다른 사람의 움직임과 함께 우리가 어떻게 의미를 자극하는지 설명하는 아름답고 간단한 방법이기 때문에 다른 사람을 빼앗아갔습니다.
몇 년이 지났을 때, 인간의 유사한 메커니즘에 대한 증거가 쏟아졌으며, 거울 뉴런은 공감, 모방, 이타주의 및 자폐 스펙트럼 장애를 포함한 긴 현상 목록에 연루되었습니다. 그리고 제스처 관찰 및 언어 인식 동안 관련 뇌 영역에서의 미러링 활동에 대한보고 후, 미러 뉴런은 언어 및 제스처와도 관련이있게되었습니다.
캘리포니아 대학교, 어바인 대학교의인지 및 언어 과학 교수 인 그레고리 히크 (Gregory Hickok)와 거울 뉴런 비평가는 수십 년 전 미러 뉴런 이론의 창시자들이 잘못된 설명 뒤에 몸무게를 던 졌다고 주장했다. 그의 관점에서, 미러 뉴런은 철저히 조사 할 가치가 있지만, 언어 및 행동 이해에서 그들의 역할에 초점을 맞추면 연구 진보가 방해가되었습니다. 관찰-실행 일치는 이해하는 것보다 운동 계획에 관여 할 가능성이 더 높다고 그는 주장했다.
.네덜란드 신경 과학 연구소의 사회적 두뇌 실험실을 이끌고 암스테르담 대학교 (University of Amsterdam)의 부교수 인 Valeria Gazzola에 따르면, 행동 이론 이해 이론을 계속지지하는 사람들조차도 브레이크를 펌핑하기 시작했다. 그녀는 미러 뉴런 이론을 옹호하지만, Gazzola는 실제로 행동을 이해하는 것이 실제로 무엇을 의미하는지에 대한 합의가 없다는 것을 인정했다. 그녀는“여전히 약간의 다양성과 오해가있다”고 말했다. 거울 뉴런은 인식의 중요한 구성 요소 역할을하지만“전체 이야기를 설명하든 아마도 사실이 아니라고 말할 것입니다.”
.처음에, 인간에서의 미러링에 대한 대부분의 증거는 FMRI, EEG, Magnetoencephalography 및 경 두개 자기 자극과 같은 기술을 사용하여 수백만 개의 뉴런의 활성을 동시에 조사한 연구에서 유래되었습니다. 연구원들은 이후 FMRI 적응과 같은 기술을 실험하기 시작했으며, 특정 대뇌 피질 영역에서 세포의 소집단을 분석하는 데 사용할 수 있습니다. 그러나 그들은 인간 뇌의 개별 세포에서 직접 측정 할 기회가 거의 없으며, 이는 거울 뉴런 활동의 가장 직접적인 증거를 제공 할 것입니다.
.Hickok은“거울 뉴런이 존재한다는 것은 의심의 여지가 없지만 뇌 영상과 뇌 활성화 연구는 모두 상관 관계가 있습니다. 그들은 원인에 대해 아무것도 말하지 않습니다.”
더욱이, 심한 형태의 뇌성 마비와 같은 운동 장애로 인해 움직이거나 말할 수없는 사람들은 대부분의 경우 여전히 언어와 몸짓을 인식 할 수 있습니다. 느슨하게 정의 된 행동 이해가 필요한 작업을 수행하기 위해 모터 시스템 (및 미러 뉴런)이 완전히 작동 할 필요가 없습니다. Hickok은 원숭이에서도 거울 뉴런에 대한 손상이 행동 관찰에 적자를 일으킨다는 증거는 없다고 말했다.
개별 세포에 대한 주장은 경험적으로 확증하기가 어렵 기 때문에 오늘날 대부분의 조사관은 신중하게 단어를 선택합니다. 원숭이는 "거울 뉴런"을 가질 수 있지만 인간은 "미러링 시스템", "신경 미러링"또는 "액션 관찰 네트워크"를 가지고 있습니다. (Hickok에 따르면, 원숭이 연구조차도 네트워크와 시스템의 미러링 효과에 중점을두고 있습니다.)
자신을 거울 뉴런 센트리스트로 생각하는 Quandt는 EEG 실험을 기반으로 다른 경험이 개별 세포의 기능을 어떻게 변화시키는 지에 대해 아무런 주장도하지 않습니다. 즉, 그녀는 인간 감각 운동 시스템의 일부가 다른 사람들의 제스처를 구문 분석하고 처리하는 데 관여하고 있음을“완전히 확신”합니다. "나는 그것이 사실이라고 확신한다"고 그녀는 말했다. "다른 방법으로 설득하는 데 많은 시간이 걸릴 것입니다."
연구원들은 우리가 신체와 의사 소통하고 배우는 데 도움이되는 정확한 세포를 정확히 찾지 못할 수도 있지만, 다 감각 시스템의 겹치는 것은 부인할 수 없습니다. 제스처는 우리 자신을 표현할 수있게 해주 며, 우리가 다른 사람들을 이해하고 해석하는 방식을 형성합니다. Quandt의 논문 중 하나를 인용하자면 :“다른 사람들의 행동은 자아의 렌즈를 통해 인식됩니다.”
따라서 다음에 누군가가 당신에게 한 손가락의 경례를 줄 때, 그 메시지를 크고 명확하게받는 데 필요한 것을 이해하기 위해 잠시 시간을 내십시오. 다른 것이 없다면 찌르기를 조금 줄일 수 있습니다.
2019 년 6 월 27 일에 추가되었습니다 : 언어와 감각 운동 시스템을 별개의 실체로 분리하는 것이 Chomsky가 반드시 Chomsky 자신이 영감을 얻은 일부 연구자들이 보유한 견해임을 명확히하기 위해 문장이 개정되었습니다.
이 기사는 에 재 인쇄되었습니다 wired.com .