코믹: 대리인 스케치 코미디 세대

인공지능에게 농담을 써달라고 요청하면, 종종 소름 끼치는 ‘아빠 농담’의 디지털 버전을 얻을 수 있습니다. 하지만 놀라운 점은 오늘날 Saturday Night Live의 전문가들과 거의 견줄 수 있는 코믹 스케치를 만들 수 있는 AI 시스템이 있다는 것입니다. 이 시스템의 이름은 COMIC이며, 실제 작가 편집부처럼 작동합니다. 각기 다른 개성을 가진 AI 에이전트가 시나리오 작가, 감독, 비평가, 심지어 무대 관리자 역할을 맡아 서로 경쟁합니다. 이러한 시스템의 핵심 아이디어는 다음과 같습니다. 특히 코미디와 같이 가장 파악하기 어렵고 주관적인 분야에서 진정한 창의성을 창출하려면, 고정된 목표에 따라 모델에게 '올바른 농담'을 추측하도록 요청하는 것만으로는 충분하지 않습니다. 아이디어가 도전, 수정, 종종 서로 상충하는 의견을 통해 다듬어지는 지속적인 경쟁에 더 많은 인공 지능을 투입해야 합니다. 실제로, 개그의 품질은 그것이 보편적인 이상에 얼마나 가까운지에 의해 결정되는 것이 아니라, 다양한 취향을 가진 비평가들이 심사하는 일련의 대결에서 경쟁자들을 얼마나 잘 이겨내느냐에 의해 결정됩니다. Susung Hong, Brian Curless, Ira Kemelmacher-Shlizerman, Steve Seitz가 COMIC의 개발을 주도했으며, 차이를 만드는 세부 사항은 비평가의 활용입니다. 단순히 AI 에이전트가 아니라 Key & Peele부터 Foil Arms & Hog에 이르기까지 거의 5,000개의 YouTube 코미디 동영상을 분석하여 사람들이 실제로 좋아하는 것에 맞춘 '비평가'입니다. 모든 것을 설명하는 인용문은 바로 이 논문에서 찾을 수 있습니다: “COMIC은 기준이 되는 품질 한도를 부과하는 대신 상대주의를 채택하여, 대본의 적합성은 이상적인 것과의 거리보다는 현재 경쟁자들에 대한 상대적 성과로 정의됩니다.” 요컨대, AI에게 코미디는 정복해야 할 정상이 아니라 지속적인 경쟁입니다. 진화 생물학의 레드 퀸 이론과 비슷합니다. 경쟁에서 살아남으려면 계속 변화해야 한다는 것입니다. COMIC의 구조는 일종의 아이디어 섬입니다. 각 대본은 별도의 ‘섬’에서 생성되며, 각 섬은 슬랩스틱을 선호하는 사람, 재치 있는 농담을 선호하는 사람, 어색한 농담을 선호하는 사람 등 취향이 다른 비평가 위원회가 관리합니다. 각각의 대본은 2대2 토너먼트 형식으로 서로 경쟁합니다. 패배한 대본은 비평가의 조언에 따라 다시 작성된 후 다시 경쟁에 참여하게 됩니다. 이 프로세스는 여러 세대에 걸쳐 반복되어 기준을 지속적으로 높이고, ‘평균적으로 가장 효과적인 것’의 단순한 버전이 아닌 다양한 스케치가 탄생할 수 있도록 합니다. 실제 사례를 하나 들어보겠습니다. COMIC은 이 방법을 사용하여 사진과 캐릭터의 음성 힌트만으로 동영상을 생성했습니다. 장면마다 일관된 스토리와 인식 가능한 캐릭터를 구축하고, 한 장면에서 다음 장면으로 이어지는 연속성을 유지했습니다. 이는 Sora나 Veo와 같은 일반 동영상 모델이 여전히 어려움을 겪는 부분입니다. 사람들의 눈에 비친 결과는 어떨까요? 눈가림 테스트에서 COMIC의 동영상은 1~7점 만점 기준으로 중간급 전문 제작물과 비슷한 수준의 유머와 몰입도 점수를 받았습니다. 반면, 전통적인 모델은 시각적으로 더 현실적이지만 내러티브와 '더 보고 싶다'는 욕구 측면에서는 뒤처집니다. 저녁 식사 때 이야기할 수 있는 사실: 이 시스템은 매우 효율적이어서 GPU 비용 5달러의 예산으로 하루 만에 고품질 스케치를 제작할 수 있습니다. 반면, 일반적인 쇼 한 편의 제작 비용은 그보다 훨씬 더 높습니다. 또한, 비평가 선정은 사람이 결정하는 것이 아닙니다. AI는 수백 개의 서로 다른 비평가 ‘페르소나’를 생성한 다음, 어떤 비디오가 YouTube에서 더 많은 반응을 얻을지 예측하는 능력을 측정하여 실제로 좋은 것과 나쁜 것을 구별할 수 있는 경우에만 해당 페르소나를 유지합니다. 가장 놀라운 점은 품질이 위에서 결정되는 것이 아니라, 마치 한 방에 모여서 농담을 주고받고, 서로를 수정하고, 도전하는 인간 작가들처럼 스크립트와 비평가들이 서로를 업데이트하면서 지속적으로 비교하는 과정에서 탄생한다는 것입니다. 마지막으로 한 가지 도발적인 생각을 제시해 보겠습니다. 에이전트 간의 경쟁과 실제 관객의 취향에 부합하는 비평가들의 선정을 통해 이 방법론은 AI에게 코미디뿐만 아니라 다른 형태의 창의성도 가르칠 수 있는 방법이 될 수 있습니다. 결국 유머는 가장 어려운 실험실일 뿐입니다. 기억해야 할 문구는 이것입니다: AI의 코미디는 공식으로 측정되는 것이 아니라, 인간과 마찬가지로 지속적인 도전과 수정으로 얻어지는 것입니다. 이 아이디어가 인공 지능의 창의성에 대한 여러분의 생각을 바꿀 수 있다고 생각하신다면, Lara Notes에서 'I'm In' 버튼을 누르세요. 이는 '좋아요' 버튼이 아니라, 이제 이 관점을 여러분의 것으로 만든다는 의미입니다. 그리고 며칠 후 누군가에게 SNL의 작가실에 있는 것처럼 다른 AI와 경쟁하면서 더 재미있게 되는 AI가 있다는 사실을 이야기하게 된다면, Lara Notes에서 함께했던 사람을 태그할 수 있습니다. 바로 ‘Shared Offline’입니다. 이 연구는 arxiv.org에서 가져온 것으로, 전체 기사를 읽는 데 비해 약 23분 정도를 절약하셨습니다.