AI가 모든 감각을 연결할 때, 인간에게 남는 가장 중요한 능력

goodteacher1

Hatched by goodteacher1

Sep 06, 2026

8 min read

93%

0

AI가 이미지를 보고, 소리를 듣고, 문장을 읽는 것을 넘어 서로 다른 감각을 하나의 공간에서 연결하기 시작했다. 그렇다면 인간에게 남는 일은 무엇일까? 단순히 더 많은 정보를 해석하는 일일까, 아니면 정보가 의미가 되는 방향을 결정하는 일일까?

이 질문은 인공지능 시대의 인문학을 오래된 고전의 보존 문제로 축소하지 않는다. 오히려 인문학의 역할을 더 근본적인 차원에서 다시 묻게 한다. 인간은 세계를 감각의 묶음으로 경험하지만, 그 경험을 삶의 방향과 가치의 언어로 바꾸는 존재다. AI가 감각을 통합할수록 인문학의 핵심은 약해지는 것이 아니라 더욱 선명해진다.

AI는 세계의 신호들을 연결할 수 있다. 그러나 무엇을 중요하게 연결해야 하는지는 여전히 인간의 질문이다.

감각을 연결하는 기계와 의미를 연결하는 인간

최근의 멀티모달 인공지능은 이미지, 텍스트, 오디오 같은 서로 다른 유형의 데이터를 한데 다룬다. 사진 속 강아지를 인식하는 데서 멈추지 않고, 그 강아지가 낼 법한 소리와 움직임, 표면의 질감이나 온도감까지 연관 지을 수 있다. 한 장의 스케치와 문장을 바탕으로 이미지를 만들고, 오디오를 단서로 관련 이미지를 찾으며, 이미지와 소리를 함께 사용해 새로운 결과물을 생성할 수도 있다.

이 기술의 중요한 변화는 단순히 입력 형식이 다양해졌다는 데 있지 않다. 서로 다른 감각이 하나의 연결된 표현 공간 안에서 다뤄진다는 데 있다. 인간이 붉은 사과를 볼 때 우리는 색만 보지 않는다. 단단한 표면을 상상하고, 씹을 때의 소리를 떠올리며, 단맛과 차가움을 예상한다. 하나의 대상은 시각, 청각, 촉각, 기억, 언어가 겹쳐진 경험으로 나타난다. 멀티모달 AI는 이러한 연결 구조를 계산적으로 재현하려 한다.

그러나 여기에는 중요한 구분이 필요하다. 감각의 통합은 의미의 통합과 다르다.

카메라가 장례식장의 검은 옷을 인식하고, 마이크가 낮은 목소리와 느린 음악을 포착하며, 언어 모델이 애도의 문장을 생성할 수 있다고 하자. 시스템은 이 모든 요소 사이의 통계적 연관성을 매우 정교하게 계산할 수 있다. 하지만 그것이 상실의 무게를 안다는 뜻은 아니다. 인간에게 장례식은 색과 소리의 조합이 아니라, 되돌릴 수 없는 부재와 남겨진 사람의 책임, 기억을 어떻게 이어갈 것인가에 대한 질문이다.

AI는 감각 사이의 다리를 놓는다. 인문학은 그 다리를 건너 어디로 가야 하는지 묻는다.

정보가 많아질수록 방향이 더 중요해지는 이유

기술은 오랫동안 인간의 감각을 확장해 왔다. 망원경은 보이지 않던 것을 보게 했고, 녹음기는 사라질 소리를 보존했으며, 사진은 한순간을 붙잡았다. 멀티모달 AI는 여기서 한 단계 더 나아가 감각들을 서로 번역한다. 소리를 이미지로 바꾸고, 문장을 장면으로 만들며, 움직임을 언어로 설명한다.

이러한 능력은 엄청난 생산성을 가져온다. 시각 장애가 있는 사람에게 영화 장면을 소리와 언어로 설명할 수 있다. 건축가는 공간의 설계도를 실제 발걸음 소리와 햇빛의 변화가 있는 장면으로 미리 경험할 수 있다. 교육자는 하나의 역사적 사건을 문서, 그림, 음성 기록, 가상 공간을 결합한 경험으로 구성할 수 있다. 표현의 장벽이 낮아지고, 지식에 접근하는 통로가 많아진다.

하지만 연결 가능한 정보가 늘어날수록 선택의 문제도 커진다. 무엇이든 연결할 수 있는 시스템에서는 연결 자체가 더 이상 창의성의 충분조건이 아니다. 중요한 것은 어떤 요소를 어떤 맥락에서 연결할 것인지, 그 연결이 누구에게 어떤 결과를 낳을 것인지다.

예를 들어 한 도시의 재개발을 홍보하는 영상을 만든다고 생각해 보자. AI는 새 건물의 조감도, 활기찬 음악, 웃는 가족의 표정, 편리한 교통을 하나로 결합해 매력적인 미래를 보여줄 수 있다. 하지만 그 영상에 사라지는 골목의 소리, 이주해야 하는 상인의 목소리, 오랫동안 그 장소에 축적된 기억이 포함되지 않는다면 그것은 현실의 통합이 아니라 현실의 편집이다. 모든 감각을 넣었다고 해서 모든 인간이 포함되는 것은 아니다.

이 지점에서 인문학은 정보의 반대편에 서지 않는다. 인문학은 정보가 누구의 관점으로 배열되었는지를 묻는다. 어떤 목소리가 중심에 있고, 어떤 경험이 배경으로 밀려났는지 살핀다. 무엇을 만들 수 있는가보다 먼저, 무엇을 만들어야 하는가를 묻는다.

인문학은 지식의 창고가 아니라 선택의 나침반이다

인문학을 고전 작품을 읽고 감상하는 활동으로만 이해하면 인공지능 시대의 역할을 작게 보게 된다. 인문학의 더 본질적인 기능은 인간 존재와 삶의 방법을 탐구하는 데 있다. 고대의 서사시와 연극, 회화와 음악이 시대를 넘어 살아남는 이유도 단순히 오래되었기 때문이 아니다. 그 작품들이 욕망, 두려움, 사랑, 배신, 책임, 죽음 같은 인간의 근본 문제를 계속 새롭게 보여주기 때문이다.

AI가 더 많은 작품을 만들 수 있게 될수록 이 기능은 오히려 중요해진다. 작품의 희소성이 줄어들기 때문이다. 과거에는 글을 쓰고 그림을 그리고 음악을 만드는 데 많은 시간과 기술이 필요했다. 이제는 짧은 문장 하나로 여러 감각이 결합된 결과물을 만들 수 있다. 그 결과 창작물은 폭발적으로 늘어나지만, 우리가 무엇을 오래 바라보고 무엇을 기억할 것인지는 더 어려운 문제가 된다.

여기서 인간의 역할은 기계보다 더 빠르게 생산하는 것이 아니다. 무엇을 기억할 가치가 있는지 판단하는 것이다.

한 예로, AI에게 전쟁의 참상을 표현하는 멀티모달 작품을 요청할 수 있다. 폐허의 이미지, 금속성의 굉음, 끊어진 가족의 대화, 불안정하게 흔들리는 화면을 결합하면 강렬한 결과가 나올 것이다. 그러나 강렬함은 진실성과 다르다. 고통을 미학적으로 소비하게 만들 수도 있고, 실제 인간의 비극을 관객의 감정적 자극을 위한 장치로 바꿀 수도 있다.

인문학적 질문은 여기서 시작된다. 이 작품은 고통을 이해하게 하는가, 아니면 고통을 구경하게 하는가? 당사자의 목소리를 확장하는가, 아니면 당사자를 대신해 말하는가? 감정의 강도를 높이는가, 아니면 판단의 깊이를 더하는가?

이 질문들은 AI의 성능 지표에 포함되기 어렵다. 하지만 인간의 삶에서는 결정적이다. 정확성, 속도, 해상도, 자연스러움은 좋은 결과물의 일부일 뿐이다. 그 결과물이 인간을 어떻게 대하는가까지 살펴야 한다.

새로운 문해력: 감각을 해석하고 결과를 책임지는 능력

문해력은 더 이상 글자를 읽는 능력에 머물 수 없다. 이미지, 음성, 영상, 공간, 알고리즘의 추천을 함께 읽어내는 다중 감각 문해력이 필요하다. 이 문해력은 단순한 기술 사용법이 아니다. 서로 다른 표현이 어떤 인상을 만들고, 어떤 감정을 유도하며, 어떤 현실을 숨기는지 알아차리는 능력이다.

예를 들어 같은 정책을 세 가지 방식으로 표현할 수 있다. 텍스트로는 예산과 통계를 제시하고, 이미지로는 깨끗한 미래 도시를 보여주며, 오디오로는 희망적인 음악을 깔 수 있다. 세 요소가 결합하면 독립적으로 읽을 때보다 훨씬 강력한 설득이 발생한다. 문제는 이 설득이 사실을 더 잘 이해하도록 돕는지, 아니면 감정으로 판단을 대신하게 만드는지다.

다중 감각 문해력은 다음 네 가지 질문으로 훈련할 수 있다.

  1. 무엇이 제시되었고 무엇이 빠졌는가? 이미지와 소리의 풍부함이 오히려 특정 집단의 부재를 가릴 수 있다.
  2. 이 연결은 사실에 근거하는가, 아니면 익숙한 고정관념에 기대는가? 특정 직업을 특정 성별의 목소리와 연결하는 방식처럼 데이터의 편향은 감각의 결합에도 스며든다.
  3. 누가 이 결과물을 해석하고 누가 영향을 받는가? 제작자의 의도만으로 결과의 윤리적 의미가 결정되지는 않는다.
  4. 이 결과물은 나의 판단을 넓히는가, 아니면 나 대신 판단하는가? 편리함이 사고의 대체로 바뀌는 순간을 구별해야 한다.

이 네 질문은 AI 도구를 거부하기 위한 것이 아니다. 오히려 더 잘 사용하기 위한 조건이다. 사용자는 AI에게 단지 아름답고 설득력 있는 결과를 요구하는 데서 나아가, 관점의 다양성, 제외된 목소리, 예상되는 부작용까지 함께 요구해야 한다.

교육에서도 같은 원칙을 적용할 수 있다. 학생에게 역사 사건을 AI로 시각화하게 한 뒤, 결과물을 감상하는 데서 끝내지 말고 질문하게 하는 것이다. 어떤 자료가 이미지에 반영되었는가? 누구의 증언이 빠졌는가? 배경 음악이 사건을 영웅담처럼 만들지는 않는가? 하나의 결과물을 만드는 과정이 곧 해석과 책임의 훈련이 된다.

AI 시대의 창작자는 연결자가 아니라 편집자다

멀티모달 AI의 시대에는 창작자의 정의도 달라진다. 과거의 창작자는 빈 화면 위에 무언가를 만들어내는 사람이었다. 앞으로의 창작자는 이미 존재하는 감각과 이야기와 기억을 어떤 질서로 배치할지 결정하는 사람이 될 가능성이 크다.

이때 창작의 핵심은 생성보다 편집에 있다. 편집은 단순히 불필요한 것을 삭제하는 일이 아니다. 서로 다른 경험이 충돌하지 않고 대화하도록 맥락을 설계하는 일이다. 어떤 장면 뒤에 어떤 소리를 놓을지, 어떤 사람의 목소리를 먼저 들려줄지, 침묵을 어디에 둘지 결정하는 일이다.

다큐멘터리를 만든다고 해 보자. AI는 인터뷰 녹취를 분석해 핵심 문장을 추리고, 사진과 영상에 맞는 음악을 추천하며, 여러 버전의 내레이션을 만들 수 있다. 하지만 편집자는 여전히 결정해야 한다. 인터뷰 중 말을 더듬는 순간을 삭제할 것인가? 침묵을 남길 것인가? 가장 논리적인 답변 대신 가장 불완전하지만 진실한 증언을 선택할 것인가?

이런 선택은 효율의 문제가 아니라 인간관의 문제다. 인간을 매끄러운 데이터로 볼 것인지, 모순과 망설임을 가진 존재로 볼 것인지에 따라 편집의 방향이 달라진다. AI가 결과물을 매끄럽게 만들수록 인간은 매끄럽지 않음의 가치를 더 의식해야 한다.

좋은 AI 활용은 인간의 흔적을 지우는 일이 아니다. 인간의 흔적이 어디에서 시작되었고 무엇을 향하는지 더 분명하게 만드는 일이다.

따라서 앞으로 필요한 사람은 AI에게 가장 정교한 명령을 내리는 사람만이 아니다. 좋은 질문을 만들고, 서로 다른 관점을 연결하고, 결과의 수혜자와 피해자를 상상하며, 필요할 때 생성된 결과를 거부할 수 있는 사람이다. 이 능력은 문학, 역사, 철학, 예술에서 길러지는 판단력과 깊이 연결되어 있다.

오늘부터 실천하는 인간 중심의 멀티모달 사고

AI를 사용할 때 인문학을 추상적인 교양으로 남겨두지 않으려면, 작업 과정에 구체적인 절차를 넣어야 한다. 다음의 작은 프레임워크는 글쓰기, 기획, 교육, 디자인, 마케팅 등 다양한 상황에 적용할 수 있다.

1. 먼저 목적을 감각이 아니라 인간의 문제로 정의한다

이미지를 만들기 전에 어떤 이미지가 예쁜지 묻지 말고, 누구의 어떤 경험을 이해시키려는지 적는다. 발표 자료를 만들기 전에 얼마나 인상적인지 묻지 말고, 청중이 무엇을 더 정확하게 판단해야 하는지 정한다.

2. 최소 세 가지 감각으로 같은 대상을 바라본다

하나의 주제를 텍스트, 이미지, 소리의 관점에서 각각 표현해 본다. 서로 다른 표현이 같은 의미를 전달하는지, 아니면 특정 감각이 다른 감각의 해석을 지배하는지 비교한다. 이 과정은 결과물을 풍부하게 만들 뿐 아니라, 자신의 편견을 드러낸다.

3. 빠진 사람과 빠진 시간을 찾는다

AI가 만든 결과물에는 대개 중심 장면이 있다. 그 장면의 바깥에 있는 사람은 누구인지, 현재만 보이고 과거와 미래가 사라지지는 않았는지 묻는다. 특히 공공 문제를 다룰 때는 가장 쉽게 이미지화되는 사람만 대표자로 선택되지 않았는지 확인해야 한다.

4. 감정과 판단을 분리해 다시 본다

결과물을 처음 보았을 때 느낀 감정과, 사실에 근거해 내린 판단을 따로 기록한다. 감동적이라는 이유로 정확하다고 믿지 말고, 불편하다는 이유로 틀렸다고 단정하지 않는다. 멀티모달 결과물은 감정을 빠르게 움직이므로 이 분리가 중요하다.

5. 마지막에 거부할 권리를 행사한다

AI가 만들 수 있다는 이유만으로 만들 필요는 없다. 특정 이미지를 재현하는 것이 누군가의 상처를 상품화한다면 중단할 수 있어야 한다. 가장 인간적인 AI 활용은 언제나 생성 버튼을 누르는 데 있지 않고, 누르지 않기로 결정하는 데 있을 때도 있다.

Key Takeaways

  1. AI의 감각 통합과 인간의 의미 통합을 구분하라. 여러 데이터를 연결하는 능력은 방향과 가치에 대한 판단을 대신하지 못한다.
  2. 결과물보다 빠진 관점을 먼저 살펴라. 무엇이 보이는지뿐 아니라 누가 보이지 않는지를 확인하라.
  3. 멀티모달 문해력을 훈련하라. 텍스트, 이미지, 소리, 공간이 함께 만들어내는 감정과 설득의 구조를 분석하라.
  4. 창작을 생성보다 편집의 문제로 보라. 어떤 감각을 연결하고 어떤 목소리를 앞세울지 결정하는 과정에 윤리적 책임이 있다.
  5. AI에게 좋은 답보다 좋은 질문을 요구하라. 관점의 다양성, 제외된 목소리, 예상되는 피해를 결과물의 조건에 포함하라.

AI가 인간처럼 여러 감각을 한데 묶는 날은 점점 가까워지고 있다. 그러나 인간다움은 감각을 많이 갖는 데 있지 않다. 인간은 본 것을 기억하고, 들은 것을 해석하며, 그 해석에 따라 누군가를 돕거나 해칠 수 있는 존재다. 감각은 세계를 우리 앞에 가져오지만, 의미는 그 세계에 대한 우리의 책임에서 생긴다.

앞으로 인문학의 가장 중요한 질문은 AI가 인간을 대체할 수 있는가가 아닐지도 모른다. 더 중요한 질문은 이것이다. AI가 세계의 모든 신호를 연결할 수 있게 되었을 때, 우리는 어떤 연결을 인간적으로 책임질 것인가?

기계가 감각의 경계를 허무는 시대에 인간에게 필요한 것은 더 많은 자극이 아니다. 무엇을 깊이 보고, 무엇을 오래 듣고, 무엇을 끝내 만들지 않을 것인지 결정하는 능력이다. 그 선택의 능력이야말로 인공지능 시대에도 사라지지 않는 인문학의 나침반이다.

Sources

← Back to Library

Hatch New Ideas with Glasp AI 🐣

Glasp AI allows you to hatch new ideas based on your curated content. Let's curate and create with Glasp AI :)

Start Hatching 🐣