컴퓨터한테 말 걸었더니, 펠리컨이 자전거를 타네요

펠리컨이 자전거를 타는, 기묘하고 위대한 장면

요즘 온라인 좀 하셨으면 봤을 법한 기묘한 이미지가 하나 있어요. 펠리컨 한 마리가 꽤나 진지한 표정으로 자전거 페달을 밟는 3D 이미지요. 처음 보면 '이게 무슨 쓸데없는 고퀄리티 짤인가' 싶죠. 웃기긴 한데, 딱 거기까지? 근데 여러분, 이 장면이야말로 앞으로 우리가 먹고사는 방식을 통째로 바꿀지 모를, 아주 중요한 사건의 증거사진입니다.

이건 그냥 누가 뚝딱 만든 밈이 아니에요. 개발자 사이먼 윌리슨이라는 사람이 자기 맥북에서 실행한 실험 결과거든요. 그가 한 일은 딱 하나, 컴퓨터에 대고 말로 명령한 것뿐입니다. "내 컴퓨터에 깔린 '블렌더'라는 3D 프로그램 좀 써서, 자전거 타는 펠리컨 장면 좀 만들어줘."

그러자 AI가 스스로 맥OS 운영체제를 뒤져 블렌더 프로그램을 실행하고, 그 복잡하기 짝이 없는 메뉴와 버튼들을 지 혼자 막 조작해서 펠리컨 모델을 불러오고, 자전거 위에 태우고, 조명까지 설치한 뒤에 '렌더링' 버튼을 누른 겁니다. 사람이 손 하나 까딱 안 했어요. 이게 왜 혁명적이냐고요? 지금까지 AI는 우리 '말'을 알아듣는 똑똑한 앵무새에 가까웠어요. 시키면 글을 써주고, 그림을 그려주고, 코드를 짜줬죠. 하지만 딱 거기까지. 그걸 실행하고, 다른 프로그램에 적용하는 건 온전히 우리 몫이었잖아요. 포토샵으로 뭘 하려면 포토샵을 직접 켜서, 배운 대로 버튼을 눌러야 했죠. 그런데 이젠 AI가 내 컴퓨터에 깔린 프로그램을, 마치 내 손에 '빙의'한 것처럼 직접 주무르기 시작했다는 겁니다. 우리가 컴퓨터와 맺어온 관계의 근본이 바뀌는 순간이에요.

AI 에이전트, 그게 뭔데? '심부름꾼'에서 '대리인'으로

여기서 핵심 개념이 바로 'AI 에이전트(Agent)'입니다. 말이 좀 어려운데, 이거 하나만 기억하시면 돼요. 지금까지의 AI가 '똑똑한 번역가'였다면, AI 에이전트는 '유능한 개인 비서'예요. 비유를 들어볼게요.

여러분이 쓰시던 챗GPT 같은 LLM(Large Language Model, 쉽게 말해 사람 말을 엄청나게 학습해 문장을 만들어내는 AI)은 외국어 실력은 출중하지만 손발이 없는 번역가와 같아요. "제주도 가는 비행기 표 예매하는 법 영어로 알려줘"라고 하면, 정말 유창하게 방법을 알려주죠. 하지만 거기까지. 실제 예매 사이트에 들어가서 날짜를 고르고 결제하는 건 여러분이 직접 해야 합니다. 답답하죠.

그런데 AI 에이전트는 달라요. 이 친구는 그냥 말만 하는 게 아니라 '권한'과 '도구'를 가진 개인 비서입니다. 여러분이 "다음 주 금요일 제주도 가는 제일 싼 비행기 표 예매해줘"라고 하면, 이 비서는 여러분의 의도를 파악하고, 스스로 인터넷 창을 열어 항공사 앱에 접속하고, 달력을 확인해 날짜를 입력하고, 심지어 미리 저장된 여러분의 카드로 결제까지 한 뒤에 "예매 완료했습니다"라고 보고합니다. 여러분의 스마트폰 앱 비밀번호나 신용카드 정보 같은 '열쇠'를 쥐고, 여러분을 '대리'해서 일을 처리하는 거죠.

이번 '자전거 타는 펠리컨' 소동이 바로 이겁니다. 작동 순서는 이래요.

1. 사용자가 지시한다: "블렌더 써서 자전거 타는 펠리컨 만들어줘." (추상적인 목표 전달)
2. AI 에이전트가 의도를 분석한다: '블렌더'라는 특정 프로그램을 사용해야 하고, '펠리컨'과 '자전거' 모델이 필요하며, 둘을 합쳐 '장면'을 구성하라는 뜻이군.
3. 수단을 탐색하고 계획을 세운다: 내 컴퓨터(/Applications 폴더)에 블렌더가 있네. 블렌더는 '파이썬(Python)'이라는 프로그래밍 언어로 자동화할 수 있지. 좋아, 파이썬 코드를 짜서 블렌더를 조종하자.
4. 직접 실행한다: AI가 실시간으로 필요한 파이썬 코드를 생성해서 블렌더에 주입합니다. "펠리컨 모델 불러와. 자전거 모델 불러와. 펠리컨을 자전거 안장 위에 앉혀. 렌더링 시작해." 같은 명령어를 코드로 번역해서 실행하는 거죠.

핵심은 AI가 단순히 코드 조각을 뱉어내는 걸 넘어, 운영체제와 특정 소프트웨어의 작동 방식을 이해하고, 직접 제어하는 '실행 능력'을 갖췄다는 점입니다. 컴퓨터 안에 사는 또 다른 '나'가 생긴 거나 마찬가지예요. 웃프죠.

'포토샵' 좀 하세요? 이젠 '포토샵, 해줘'의 시대

이 변화가 얼마나 거대한지 알려면, 우리가 컴퓨터를 어떻게 써왔는지 되돌아볼 필요가 있어요. 역사는 반복되니까요.

1980년대만 해도 컴퓨터는 전문가의 전유물이었어요. 까만 화면에 흰 글씨만 나오는 '도스(DOS)' 같은 환경에서 `copy c:\autoexec.bat a:` 같은 외계어를 외워서 쳐야 했죠. 일반인은 엄두도 못 낼 일이었어요.

그러다 1990년대, 마이크로소프트 윈도우와 애플 맥OS가 '그래픽 사용자 인터페이스(GUI)'라는 걸 들고나왔습니다. 아이콘을 마우스로 '클릭'하는 방식이죠. 이건 혁명이었습니다. 누구나 눈에 보이는 대로, 직관적으로 컴퓨터를 다룰 수 있게 됐으니까요. '컴퓨터 좀 한다'는 말은 곧 포토샵, 엑셀, 파워포인트 같은 프로그램의 복잡한 메뉴와 단축키를 얼마나 잘 외우고 있느냐와 동의어였습니다.

그런데 이제 세 번째 혁명이 오고 있습니다. 바로 '자연어 인터페이스(NLI)', 더 정확히는 '에이전트 기반 인터페이스'입니다. 이건 '내가 한다(Do-It-Yourself)'에서 '네가 해줘(Do-It-For-Me)'로의 전환이에요.

느낌이 오시나요? 우리는 더 이상 소프트웨어의 충실한 '사용자(User)'나 '조작자(Operator)'가 아니게 될 겁니다. 대신 아이디어를 내고 결과물을 평가하는 '감독(Director)'이나 '연출가(Producer)'가 되는 거죠. 마치 복잡한 조리 과정을 외울 필요 없이, 유능한 셰프에게 "오늘은 봉골레 파스타가 먹고 싶군. 알덴테로 부탁해"라고 말하는 것과 같아요. 셰프(AI 에이전트)는 주방(소프트웨어)의 모든 도구 사용법을 이미 마스터하고 있으니까요. 우리의 정체성이 바뀌는 겁니다.

'시민 창작자'의 폭발, 그리고 '프로'들의 빡침

그럼 이 기술이 당장 우리 일상과 관계를 어떻게 바꿀까요? 가장 먼저, '시민 창작자(Citizen Creator)'의 시대가 폭발적으로 열릴 겁니다. 머릿속에 기가 막힌 아이디어는 있지만, 그걸 구현할 기술(코딩, 3D 모델링, 영상 편집 등)이 없어서 좌절했던 사람들 있잖아요. 이들에겐 날개가 달리는 셈이에요.

가령, 1인 게임 개발자는 이제 수백 개의 건물, 나무, 자동차 모델을 일일이 만들거나 비싼 돈 주고 사지 않아도 돼요. 그냥 AI 에이전트에게 "70년대 서울 변두리 골목길 분위기로 낡은 상점 10개랑 전봇대, 리어카 좀 배경에 깔아줘"라고 말하면 되니까요. 덕분에 기술 구현에 쏟던 시간을 아껴 더 창의적인 스토리텔링과 게임 디자인에 집중할 수 있게 됩니다.

건축가는 고객 앞에서 "이 디자인을 해가 질 무렵 노을빛 아래서 보고 싶네요. 내부는 북유럽 스타일로 바꿔주시고요"라고 말 한마디로 시뮬레이션을 즉석에서 보여줄 수 있겠죠. 상상만 해도 멋지지 않나요?

물론 여기서 누군가는 빡치기 시작합니다. 바로 그 복잡한 블렌더와 3D 맥스, 마야 같은 프로그램의 인터페이스를 마스터하기 위해 청춘을 바친 '프로'들이죠. 이들의 피땀 어린 기술 숙련도가 하루아침에 쓸모없어지는 것 아니냐는 불안감, 충분히 이해됩니다. '내 밥그릇 뺏기는 거 아냐?' 하는 공포.

여기서 제 입장은 명확해요. AI가 3D 아티스트를 '대체'하지는 않을 겁니다. 하지만 그들의 '직무 기술서'를 완전히 새로 쓰게 만들겠죠. 이건 대체가 아니라 '재정의'에 가깝습니다. AI는 지루하고 반복적인 기술 노동(모델링, 리깅, 텍스처링 등)을 자동화해 줄 겁니다. 그러면 아티스트의 가치는 어디서 나올까요? 바로 '기술 숙련도'가 아니라 '창의적 비전'과 '미적 감각', 그리고 '정확한 지시 능력'에서 나옵니다. AI라는 최고의 어시스턴트를 부리는 '아트 디렉터'로 역할이 격상되는 셈이죠. 물론, 이 변화에 적응하는 사람에게만 해당되는 '승진'일 겁니다.

여기서 흔한 오해 두 가지를 짚고 가야 해요. - 첫째, 'AI가 예술가의 일자리를 뺏을 것이다.' > 아니요. 오히려 'AI를 쓰는 예술가'가 'AI를 안 쓰는 예술가'의 일자리를 뺏을 겁니다. 도구가 바뀌면 연장 탓 안 하던 장인도 새 연장을 배워야 하죠. 포토샵이 처음 나왔을 때 암실 기술자들이 느꼈을 공포와 비슷해요. 결과적으로 포토샵은 디자이너의 파이를 키웠죠. - 둘째, '이제 누구나 걸작을 만들 수 있다.' > 천만에요. AI라는 최고급 주방을 갖게 된다고 모두가 미슐랭 셰프가 되는 건 아니잖아요? '쓰레기를 넣으면 쓰레기가 나온다(Garbage in, garbage out)'는 황금률은 AI 시대에도 유효합니다. 뭘 만들어야 할지, 어떤 게 좋은 결과물인지 알아보는 '눈', 그리고 그걸 AI에게 정확히 전달하는 '입'이 새로운 실력이자 희소한 능력이 될 겁니다. 좋은 질문과 지시가 곧 창의력이 되는 거죠.

하지만 '펠리컨'은 아직 자전거를 잘 못 탑니다

자, 지금까지 너무 희망찬 이야기만 했나요? 이제 찬물을 좀 끼얹을 시간입니다. 맞아요, '자전거 타는 펠리컨'은 아직 시제품에 불과해요. 실제 전문가의 작업물에 비하면 조악하기 짝이 없죠. 이 기술이 당장 우리 앞에 놓인 현실적인 한계들은 명확합니다.

첫 번째 한계는 '마지막 1%의 디테일' 문제입니다. AI는 90%까지는 놀랍도록 빠르게 작업을 해냅니다. 하지만 예술적 감각이 필요한 미세 조정, 예상치 못한 오류 수정 같은 마지막 10%의 '화룡점정'을 못 해요. 펠리컨의 발이 페달을 뚫고 나온다거나, 그림자가 이상한 방향으로 생긴다거나 하는 문제들이죠. 결국 이 마지막 1%를 채우기 위해선 여전히 인간 전문가의 섬세한 손길이 필요합니다. 그리고 이 1%를 채우는 데 전체 작업 시간의 50%가 들기도 하죠. 웃프죠.

두 번째는 '환각(Hallucination)' 문제입니다. AI가 명령을 완전히 잘못 해석해서 엉뚱한 결과물을 내놓는 경우예요. "좀 더 드라마틱한 조명을 만들어줘"라고 했더니, 장면 전체에 불을 질러 버리는 식이죠. 데모 영상에서는 웃고 넘어갈 일이지만, 마감에 쫓기는 실무에서는 재앙일 수 있습니다. AI는 아직 우리의 '의도'와 '맥락'을 100% 이해하지 못하거든요. 여전히 예측 불가능한 '멍청한 천재'에 가깝습니다.

세 번째, 이게 어쩌면 가장 중요한데, 'API의 정치학' 문제입니다. API(Application Programming Interface)는 쉽게 말해 프로그램의 기능을 외부에서 조종할 수 있도록 열어놓은 '공식적인 뒷문'이에요. 이번 실험이 가능했던 건 블렌더가 이런 API를 아주 잘 열어놨기 때문입니다. 하지만 모든 소프트웨어 회사가 이렇게 친절할까요? 천만에요. 어도비(Adobe)나 오토데스크(Autodesk) 같은 공룡들은 자체 AI 기능을 개발해서 구독료를 더 받아내려 하지, 외부 AI 에이전트가 자기네 프로그램에 마음대로 들어와 휘젓고 다니는 걸 원치 않을 수 있어요. 앞으로 AI 에이전트의 발전은, 이처럼 소프트웨어 기업들이 얼마나 자신의 '성'을 개방할 것인지에 달린 비즈니스 전쟁의 결과물이 될 겁니다.

당신의 '업무'는 어떻게 바뀔까: 추적할 신호 세 가지

'나는 3D 아티스트도 아니고 개발자도 아닌데, 이게 나랑 무슨 상관이야?'라고 생각하실 수 있어요. 아닙니다. 이건 우리 모두의 이야기예요. 앞으로 당신의 업무 환경이 어떻게 바뀔지 가늠해볼 수 있는 신호 세 가지를 알려드릴게요.

1. 모든 소프트웨어에 '조수석'이 생긴다: 마이크로소프트가 자사 오피스 제품군에 '코파일럿(Copilot, 부조종사)'이라는 이름을 붙인 건 정말 신의 한 수예요. 앞으로 여러분이 쓰는 모든 프로그램, 엑셀, 파워포인트, 회계 프로그램, 고객 관리 툴에 'AI 조수' 버튼이 생기는 걸 목격하게 될 겁니다. 이게 1단계예요. 2단계는 이 조수들이 서로 대화하며 여러 프로그램을 넘나드는 복합적인 작업을 처리하는 겁니다. "지난 분기 매출 보고서 엑셀 데이터 기반으로, 투자자 발표용 PPT 10장짜리 초안 만들어줘" 같은 명령이 가능해지는 거죠.

1. '말 잘하는 능력'이 최고의 기술이 된다: 미래의 핵심 역량은 '프롬프트 엔지니어링', 즉 AI에게 일을 잘 시키는 능력이 될 겁니다. 이건 단순히 명령어를 아는 게 아니에요. 내가 원하는 바를 명확하고, 구체적이고, 창의적으로 '정의'하고 '설명'하는 능력입니다. 추상적인 생각을 구체적인 언어로 번역하는 능력, 즉 당신의 '말발'이 곧 연봉과 직결되는 시대가 옵니다. 국어 공부 열심히 해야겠죠?

1. '운영체제(OS)급 에이전트'의 등장: '자전거 타는 펠리컨'은 특정 앱 하나를 조종하는 수준이죠. 하지만 애플, 구글, 마이크로소프트 같은 빅테크가 진짜 노리는 건 'OS 레벨 에이전트'입니다. 내 컴퓨터 운영체제에 상주하면서, 내가 하는 모든 작업을 지켜보고, 내 의도를 파악하고, 여러 앱을 오케스트라처럼 지휘하는 '총괄 집사' 같은 존재요. 언젠가 우리가 컴퓨터를 켜면, 바탕화면 아이콘 대신 "오늘 무엇을 도와드릴까요?"라고 묻는 대화창이 먼저 뜨게 될 겁니다. 그게 이 게임의 끝판왕이에요.

그래서, 우리는 모두 '감독'이 될 준비가 되었나

자전거 타는 펠리컨이라는 기묘한 이미지에서 시작해, 인간과 컴퓨터의 관계 변화라는 거대한 이야기까지 왔네요. 정리해 볼까요? 우리는 컴퓨터의 언어를 배우던 시대를 지나, 컴퓨터가 우리의 언어를 배우는 시대로 넘어가고 있습니다. 그리고 그 과정에서 우리는 도구를 다루는 '기술자'에서 비전을 제시하는 '감독'으로 역할 전환을 강요받고 있어요.

이는 한편으론 해방입니다. 지긋지긋한 반복 노동에서 벗어나 더 창의적인 일에 집중할 수 있게 되니까요. 하지만 다른 한편으론 두려운 일입니다. 감독의 자리는 아무나 앉는 게 아니거든요. 무엇을 만들어야 하는지, 무엇이 좋은 것인지에 대한 자신만의 철학과 비전이 없는 사람은 AI라는 초고성능 도구를 손에 쥐고도 아무것도 하지 못하거나, 쓰레기만 양산하게 될 테니까요.

AI 에이전트라는 유능한 비서가 우리에게 묻고 있습니다. "무엇을 원하십니까, 감독님?" 이라고요. 이 질문에 제대로 답할 수 있으려면, 우리는 기술을 공부하기 전에 우리 자신에게 더 깊이 질문을 던져야 할지 모릅니다. 내가 진짜 만들고 싶었던 게 뭐였더라? 하고 말이죠.

컴퓨터에게 '알아서 잘' 해달라고 말할 수 있게 된 시대, 진짜 실력은 '잘'을 정의하는 능력에서 나옵니다.

독자가 던질 법한 질문들

Q. 3D 모델링이나 코딩을 전혀 모르는데, 저도 이제 '자전거 타는 펠리컨' 같은 걸 만들 수 있다는 건가요?

A. 아직은요. 하지만 곧 그렇게 될 겁니다. 지금은 기술 시연에 가까운 초기 단계라 전문가의 손길이 필요하지만, 이런 기술의 발전 속도를 보면 1~2년 안에 포토샵 필터 쓰듯, 앱에서 옵션 고르듯 쉽게 쓸 수 있는 서비스가 쏟아져 나올 거예요. 지금부터 중요한 건 '무엇을 만들고 싶은가'라는 아이디어를 구체적으로 쌓아두는 겁니다. 도구가 사람을 기다려주는 시대가 오고 있으니까요.

Q. 이런 AI 에이전트가 제 컴퓨터 파일을 마음대로 보고 조작하면 너무 위험하지 않나요? 해킹당하면 어떡하죠?

A. 정곡을 찌르는, 가장 중요한 질문이에요. 빡치면서도 꼭 해결해야 할 문제죠. 그래서 앞으로 '권한 관리'가 AI 시대의 핵심 보안 이슈가 될 겁니다. 집에 온 가사도우미에게 안방 마스터키까지 다 맡기진 않잖아요? 마찬가지로 AI 에이전트에게 '이 프로그램만 사용해', '이 폴더에 있는 파일만 읽어', '결제하기 전엔 반드시 나에게 물어봐' 같은 식으로 아주 세밀하게 권한을 설정하는 기술이 함께 발전해야만 합니다. 이 '디지털 가드레일'을 누가 더 안전하고 편리하게 만드느냐가 빅테크들의 다음 전쟁터가 될 거고요.

Q. 결국 인간의 창의성이란 것도 AI가 다 대체할 수 있게 되는 거 아닐까요?

A. 전 아니라고 봐요. 웃프지만, AI는 아직 '왜' 이걸 만들어야 하는지, 이게 왜 아름답고 왜 웃긴지 몰라요. 주어진 목표를 달성하기 위한 최적의 경로를 기가 막히게 찾아낼 뿐이죠. 하지만 창의성의 본질은 아무도 생각 못한 '새로운 목표'를 설정하는 데 더 가깝습니다. '자전거 타는 펠리컨을 만들어보자'는 엉뚱하고 쓸데없어 보이는 상상, 그게 바로 인간의 영역이죠. AI는 그 상상을 현실로 만들어주는 역사상 가장 강력한 자전거가 되어줄 거고요. 그러니 우리는 계속 엉뚱한 상상을 해야 합니다. 그게 AI 시대에 인간이 가장 잘할 수 있는 일이 될 테니까요.