AI 글쓰기 도우미 5종 실험: 놀라운 결과

최근 저는 워싱턴 포스트가 주최한 AI 글쓰기 실험에 참여하여 5가지 인기 있는 AI 도구를 평가하는 커뮤니케이션 전문가 패널에 합류했습니다. 기술 기자 제프리 파울러(Geoffrey Fowler)는 이를 전통적인 베이크 오프의 현대적 버전으로 구성하여 우리에게 이 AI 도구들이 5가지 유형의 까다로운 업무 및 개인 이메일을 얼마나 잘 처리할 수 있는지 평가하도록 했습니다.

왜 이메일인가?

파울러는 이메일 쓰기가 ‘AI가 여러분의 삶에서 할 수 있는 가장 유용한 일 중 하나입니다. 그리고 AI가 이메일을 작성하면서 보여주는 기술은 다른 종류의 글쓰기 작업에도 적용됩니다.’라고 설명했습니다.

심사위원들은 이 블라인드 테스트에서 총 150개의 이메일을 평가했습니다. 하나의 AI 도구가 명확한 승자로 떠올랐지만, 이 실험은 AI 글쓰기 및 커뮤니케이션 도우미의 잠재적인 이점과 중요한 한계를 모두 강조했습니다.

평가 기간 동안 우리는 어떤 이메일이 ChatGPT, Microsoft Copilot, Google Gemini, DeepSeek 또는 Anthropic의 Claude에 의해 생성되었는지 알지 못했습니다. 파울러는 또한 자신이 직접 작성한 이메일을 포함시켜 AI가 생성한 콘텐츠와 사람이 작성한 콘텐츠를 구별하도록 했습니다.

최고의 AI 글쓰기 도우미

Claude가 압도적인 승자였습니다.

파울러는 ‘평균적으로 Claude의 이메일이 다른 이메일보다 더 인간적으로 느껴졌습니다.’라고 언급했습니다. 또 다른 심사위원인 에리카 다완(Erica Dhawan)은 ‘Claude는 지나치게 기업적이거나 비인격적이지 않으면서도 정확하고 존중하는 언어를 사용합니다.’라고 덧붙였습니다.

DeepSeek가 2위를 차지했고, 그 뒤를 Gemini, ChatGPT, Copilot이 이었습니다. Copilot은 꼴찌를 기록했습니다. Windows, Word, Outlook에서 널리 사용할 수 있음에도 불구하고 심사위원들은 Copilot의 이메일이 너무 인위적으로 들린다고 판단했습니다. 파울러에 따르면 ‘Copilot은 5번의 테스트 중 3번에서 ‘잘 지내시길 바랍니다’라는 매우 일반적인 문구로 메시지를 시작했습니다.’

Claude가 전체 경쟁에서 승리했음에도 불구하고, 저는 개인 점수에서 사람이 작성한 이메일을 선호한다는 것을 발견했습니다. 이 선호도는 모든 AI 도우미가 공유하는 근본적인 한계를 강조했습니다.

파울러는 심사위원들이 어떤 이메일이 최고인지 항상 동의하지는 않았지만, 핵심 문제인 진정성에 대해 의견이 일치했다고 지적했습니다. 그는 ‘AI가 기술적으로 ‘정중’하게 글을 썼더라도 인간에게는 진실되지 않게 느껴질 수 있습니다.’라고 강조했습니다.

이 실험에서 얻은 저의 주요 교훈은 AI 도구가 개요를 작성하고, 주장을 구성하고, 명확성을 보장하는 데 뛰어나다는 것입니다. 그러나 그들은 종종 부자연스럽고 지나치게 형식적이며 로봇 같고 개인화, 감정 및 공감이 부족한 글을 만들어냅니다.

AI 도우미가 창의성에 어려움을 겪는 이유는 대규모 언어 모델의 기본 아키텍처에서 비롯됩니다. 이러한 모델은 ‘구문적 일관성’을 갖춘 콘텐츠를 생성하도록 설계되었습니다. 즉, 자연스럽게 흐르고 문법 규칙을 준수하는 문장을 연결하는 것을 의미합니다. 그러나 우리 모두가 알다시피 규칙은 때로는 깨지도록 만들어집니다.

규칙 파괴자: 스티브 잡스

1997년 스티브 잡스의 리더십 하에 Apple은 역사상 가장 기억에 남는 마케팅 캠페인 중 하나를 시작했습니다. 당시 회사는 파산 직전에 있었고 관심을 사로잡고 경쟁사와 차별화할 수 있는 캠페인이 절실히 필요했습니다.

결과적으로 ‘미친 사람들’로 유명한 TV 광고에는 밥 딜런, 존 레논, 마틴 루터 킹 주니어와 같은 반항적이고 선구적인 인물들의 흑백 초상화가 등장했습니다. 이 캠페인은 Apple의 브랜드 정체성을 되살리고 회사의 재정 회복에 중요한 역할을 한 것으로 널리 알려져 있습니다.

AI가 Apple 캠페인을 만드는 임무를 맡았다면 아마도 일어나지 않았을 것입니다.

제가 어떻게 그렇게 확신할 수 있을까요? Claude 자신이 인정했기 때문입니다.

Claude는 ‘저에게 Apple의 유명한 캠페인과 같은 슬로건을 만들어달라고 요청하면 기본 모드에서는 ‘Think Different’가 아닌 ‘Think Differently’라고 썼을 것입니다. 제 훈련은 문법적 정확성을 강조합니다. 동사 ‘think’를 수식하는 적절한 부사형은 ‘differently’일 것이고, 저는 이 확립된 규칙을 따르는 경향이 있을 것입니다.’라고 인정했습니다.

Claude에 따르면 캠페인이 성공한 이유를 사후에 분석할 수 있습니다. 그러나 ‘그러한 의도적인 문법적 반항을 생성하는 것은 저에게 자연스럽게 오지 않습니다.’

AI는 인간이 아니기 때문에 반항적인 정신이 부족합니다. 일부 AI 봇이 글쓰기에서 인간의 특성을 시뮬레이션하는 데 다른 봇보다 능숙할 수 있지만, 궁극적으로 인간 커뮤니케이션을 정의하는 개인적인 경험과 창의적인 통찰력으로 형성된 고유한 목소리가 부족합니다.

AI는 아이디어를 브레인스토밍하고, 생각을 명확히 하고, 문서를 요약하고, 정보를 수집하고 정리하는 데 도움이 되는 유용한 도우미로 간주되어야 합니다. 이것들은 모두 필수적이고 시간이 많이 걸리는 작업입니다. 그러나 AI는 커뮤니케이션을 향상시킬 수 있지만 인간 커뮤니케이터를 대체해서는 안 됩니다.

점점 더 많은 사람들이 이메일, 이력서, 메모 및 프레젠테이션을 작성하기 위해 AI 도우미에 의존함에 따라 개인이 비슷하게 들리기 시작하는 균질화 위험이 커지고 있습니다. 기업 채용 담당자들은 이미 이러한 추세를 감지하고 있습니다.

각 개인은 공유할 고유하고 강력한 스토리를 가지고 있습니다. 인공적인 목소리가 자신의 진정한 목소리를 덮어쓰도록 허용하지 않는 것이 중요합니다.

AI 도우미의 한계와 가능성

앞서 언급했듯이, AI 도우미는 여러 면에서 뛰어난 능력을 보여주지만, 인간만이 제공할 수 있는 특유의 감성과 창의성에는 미치지 못합니다. 이는 AI가 학습하는 데이터의 특성, 즉 과거의 데이터를 기반으로 미래를 예측하는 데 집중하기 때문입니다. 혁신적인 아이디어는 종종 기존의 틀을 깨고 새로운 시각을 제시하는 데서 비롯되는데, AI는 이러한 ‘틀 깨기’ 능력이 부족합니다.

AI는 또한 맥락에 대한 이해가 부족할 수 있습니다. 인간은 상황, 문화, 개인적인 관계 등을 고려하여 커뮤니케이션의 뉘앙스를 파악하지만, AI는 이러한 복잡한 요소를 완벽하게 이해하지 못합니다. 따라서 AI가 생성하는 콘텐츠는 때로는 부적절하거나 오해를 불러일으킬 수 있습니다.

그럼에도 불구하고 AI 도우미는 분명히 강력한 도구이며, 적절히 활용하면 우리의 업무 효율성을 크게 향상시킬 수 있습니다. 예를 들어, AI는 방대한 양의 데이터를 분석하고 요약하여 우리가 더 나은 결정을 내릴 수 있도록 도와줍니다. 또한, AI는 반복적이고 시간이 많이 걸리는 작업을 자동화하여 우리가 더 창의적이고 전략적인 업무에 집중할 수 있도록 해줍니다.

AI 활용의 윤리적 고려사항

AI 기술이 발전함에 따라 윤리적인 문제도 함께 고려해야 합니다. AI가 생성하는 콘텐츠의 저작권, AI가 개인 정보를 수집하고 사용하는 방식, AI가 편향된 정보를 학습하고 전파할 가능성 등 다양한 문제가 제기되고 있습니다.

우리는 AI 기술을 개발하고 사용하는 데 있어 투명성, 공정성, 책임감을 갖춰야 합니다. AI가 인간의 존엄성을 훼손하지 않고 사회 전체에 이익이 되는 방향으로 활용될 수 있도록 노력해야 합니다.

미래의 AI와 인간의 협력

미래에는 AI와 인간이 더욱 긴밀하게 협력하는 시대가 올 것입니다. AI는 우리의 업무를 지원하고 효율성을 높이는 데 기여하고, 우리는 AI가 놓치는 창의성, 감성, 윤리적 판단을 제공할 것입니다. 이러한 협력을 통해 우리는 이전에는 상상할 수 없었던 방식으로 문제를 해결하고 새로운 가능성을 열어갈 수 있습니다.

AI 기술은 계속 발전하고 있으며, 미래에는 더욱 강력하고 다양한 기능을 갖춘 AI 도우미가 등장할 것입니다. 우리는 이러한 변화에 적응하고 AI를 효과적으로 활용하는 방법을 배워야 합니다. 또한, AI가 인간을 대체하는 것이 아니라 인간의 능력을 확장하고 삶의 질을 향상시키는 데 기여할 수 있도록 노력해야 합니다.

궁극적으로 AI는 도구일 뿐이며, 그 도구를 사용하는 것은 우리 인간입니다. 우리는 AI를 어떻게 활용할지 신중하게 고민하고, AI가 우리 사회에 긍정적인 영향을 미칠 수 있도록 책임감을 가지고 행동해야 합니다.