Categories: 과학

[책] “시각 언어로서의 만화(The Visual Language of Comics)”

캘리포니아 샌디에고 주립대학의 심리학자 닐 콘은 만화광이자 아마추어 만화가이기도 합니다. 그는 종종 어떻게 우리의 두뇌가 컷과 컷 사이를 메꾸어 하나의 스토리를 완성하는지를 생각했습니다. 그의 새 책 “시각 언어로서의 만화(The Visual Language of Comics)”는 이 질문에 대한 자신의 답입니다. 그는 만화는 자신만의 단어, 문법, 체계를 갖춘 또 다른 형태의 언어이며 만화 역시 언어와 같은 뇌신경 수준에서 해석된다고 말합니다.

“인간이 자신의 생각을 나타내는 방법은 세가지 뿐입니다. 입을 이용한 말, 손과 표정을 이용한 몸짓, 그리고 바로 그림입니다… 내 생각의 핵심은 이러한 의미를 가진 행위들이 규칙적인 순서로 전달될 때 이는 결국 하나의 언어로 작동한다는 것입니다.”

코헨의 이론은 우리 두뇌의 언어능력이 스위스 칼과 같은 다양한 기능을 가지고 있으며, 음악이나 춤의 표현과 이해에도 사용된다는 최신이론에 바탕을 두고 있습니다. 사실 만화는 음악과 달리 각 장면이 보다 분명한 의미를 가지고 있으며, 동굴벽화에서 알 수 있듯이 오래된 역사를 가지고 있습니다.

그러나 지금까지 만화에 대한 진지한 연구는 거의 없었습니다. 1993년 출간된 스콧 맥클라우드의 기념비적인 저작 “만화의 이해(Understanding Comics)”는 당시 만화를 사랑하던 10대였던 콘에게 큰 영향을 주었습니다. 그 후 그는 버클리에서 언어학을 공부하게 되었고 언어와 만화의 공통점에 주목하게 되었습니다.

만화의 각 장면은 언어의 요소들을 가지고 있습니다. 말풍선, 동선, 충격을 나타내는 별 등 시각언어의 다양한 요소들이 한 장면 안에서 무한한 방법으로 조합됩니다. 한 장면은 다시 상위 레벨의 구성요소가 됩니다. 영어에는 여기에 대응되는 구조가 존재하지 않지만 터키어나 이누잇어같은 교착어에는 이와 같은 구조가 있습니다. (예를 들어, 이누잇어의  angyaghllangyugthqiu 는 “그 남자도 더 큰 배를 원하고 있어”를 의미합니다.) 만화 “피넛(Peanuts)”의 한 장면은 “찰리브라운은 배트를 휘두를 준비가 되었습니다”라는 의미를 전달합니다.

이보다 더 상위의 구조로 “서사적 문법(narrative grammar)”이 있습니다. 이는 흔히 기승전결로 표시됩니다. 이렇게 묶인 하나의 이야기는 다시 더 큰 이야기 속에서 기승전결의 한 축을 담당하게 됩니다. 이러한 재귀(recursion)적 구조는 언어가 가지는 중요한 특징입니다.

문장에서 각 부분이 다른 기능을 하듯이 만화의 장면들도 각각 다른 기능을 합니다. ‘기(Establisher)’에서 설정된 긴장은, ‘승(Initial)’에서 고조되며, ‘전(Peak)’에서 정점을 찍고 ‘결(Release)’에서 다시 풀리게 됩니다. (그림 닐 콘)

학부를 졸업하던 당시 심리학과 언어학외에는 어떠한 준비도 되어 있지 않은 그였지만, 그는 이러한 통찰에 실험적 증거가 필요하다는 것을 깨달았습니다.

“유일한 방법은 시각언어와 청각언어에 대한 뇌의 활동을 관찰하는 것입니다.”

그는 이를 위해 7-80년대 이루어진 언어에 대한 실험들에 주목했습니다. 한 실험은 사람들이 문장 중의 특정 단어를 골라내는 시험에서 비문법적인 문장의 경우 더 긴 시간이 걸린다는 것을 발견한 것입니다. 그는 이 실험을, 장면의 순서를 바꾼 만화를 이용해 재현했고 언어의 경우와 같은 결과를 얻었습니다.

콘은 이제 전 세계의 다양한 시각언어를 조사하고 이들을 망라한 백과사전을 만들 수 있기를 바라고 있습니다. 예를 들어, 미국의 만화들이 상대적으로 전체를 조망하는 넓은 장면을 많이 사용한다면 일본의 만화(망가)는 인물들에게 초점을 맞춥니다. 또 호주의 원주민들이 대화를 위해 사용하는 모래그림에도 관심을 두고 있습니다. 만화의 역사에서 각 시각요소들의 기원을 찾는 일에도 관심을 가지고 있습니다. (Guardian)

원문 보기

veritaholic

Recent Posts

[뉴페@스프] 곧 닥칠 ‘고령 사회’, 우리가 던져야 할 질문은 따로 있다

* 뉴스페퍼민트는 SBS의 콘텐츠 플랫폼 스브스프리미엄(스프)에 뉴욕타임스 칼럼을 한 편씩 선정해 번역하고, 글에 관한 해설을…

7 시간 ago

“숨 쉬는 건 범죄가 아니다”…노숙도 마찬가지? 간단치 않은 사정들

미국 연방대법원이 노숙을 불법으로 규정하고 노숙자를 처벌한 지방 정부(시 정부)의 행동이 위헌이라는 사건에 관해 이번…

2 일 ago

[뉴페@스프] Z세대 가치관에 문제 있다? 그런데 부모인 X세대가 더 문제다?

* 뉴스페퍼민트는 SBS의 콘텐츠 플랫폼 스브스프리미엄(스프)에 뉴욕타임스 칼럼을 한 편씩 선정해 번역하고, 글에 관한 해설을…

3 일 ago

기후변화로 인한 ‘변화’가 이 정도였어? 뜻밖의 결과들

기후변화로 인한 이상 기후, 자연 재해는 우리에게 더는 낯선 일이 아닙니다. 아예 "기후 재해"라는 말이…

4 일 ago

[뉴페@스프] 경합지 잡긴 잡아야 하는데… 바이든의 딜레마, 돌파구 있을까

* 뉴스페퍼민트는 SBS의 콘텐츠 플랫폼 스브스프리미엄(스프)에 뉴욕타임스 칼럼을 한 편씩 선정해 번역하고, 글에 관한 해설을…

1 주 ago

데이트 상대로 ‘심리 상담’ 받는 사람을 선호한다고? 운동만 자기 관리가 아니다

보스턴 대학에서 일하는 정신과 의사가 ‘자녀의 정신 건강에 과몰입하는 미국 부모들’에 대한 칼럼을 기고 했습니다.…

1 주 ago