AI 콘텐츠 검사기가 쓸모없다는 것을 증명하는 5가지 사례

전문 작가이든 정기적으로 수필을 쓰는 학생이든, AI 콘텐츠 검사 도구를 통해 자신의 작업을 검토하고 100% AI가 생성한 글쓰기 결과를 얻는 데 지쳤을 것입니다. 실제로 AI 콘텐츠 검사기는 항상 신뢰할 수 있는 것은 아니며, 다음 다섯 가지 예는 그 이유를 보여줍니다.

1. 문단은 AI에게 글을 쓰라고 요청했습니다.

AI 콘텐츠 검사기가 100% 정확하다면 ChatGPT에서 생성된 콘텐츠도 100% AI가 생성한 것으로 표시되어야 하지 않을까요?

테스트 결과, ChatGPT의 콘텐츠는 70~100% AI가 생성한 것으로 나타났습니다. 하지만 몇 번 시도해 본 결과, ChatGPT가 생성한 텍스트는 100% 사람이 쓴 것으로 밝혀졌습니다.

예를 들어, 저자는 ChatGPT에 iPhone 15 Pro 카메라에 대한 대화를 작성해 달라고 요청했습니다. 피드백은 가장 진보적이고 안정적인 ChatGPT, GPT4, AI 콘텐츠 감지 엔진인 ZeroGPT를 통해 실행됩니다.

실제로 ZeroGPT에서는 이 텍스트가 100% 사람이 쓴 것이라고 보고합니다.

그러면 AI가 생성한 콘텐츠를 사람이 쓴 것으로 표시할 수 있다면, 그 반대 상황에서도 그 결과를 신뢰할 수 있을까요?

2. 미국 독립 선언서

미국 독립 선언서는 1776년 7월 4일에 의회에서 채택되었는데, 이는 약 250년 전에 작성되었다는 것을 의미합니다.

기초한 토머스 제퍼슨이 시간 여행 능력이 없었다면 AI가 미국 독립 선언서를 쓸 수 있는 방법은 전혀 없습니다. 흥미로운 점은 ZeroGPT가 다른 생각을 가지고 있으며 AI가 텍스트의 97.75%를 생성했다고 주장한다는 것입니다. 말도 안 돼요!

3. 성경

히브리어 성경은 독립 선언보다 약 1,676년 전인 서기 100년경에 완성되었습니다. ZeroGPT와 같은 AI 감지기는 유명 문학 작품과 역사 텍스트를 AI가 생성한 것으로 표시하는 경우가 많습니다. 이러한 작품이 AI 모델에 영향을 미치기 때문입니다.

그럼에도 불구하고, ZeroGPT에 성경의 텍스트를 입력하면 100% AI가 생성한 경고가 표시된다는 사실은 콘텐츠 감지기를 완전히 신뢰할 수 없다는 것을 증명합니다.

4. 모비딕

허먼 멜빌이 바다에서 겪은 일을 바탕으로 쓴 '모비딕'은 인공지능이 발명되기 훨씬 전인 1851년에 처음 출판되었습니다. 저자는 첫 번째 장의 유명한 발췌문을 ZeroGPT에 실행했고, 그 결과 88.24%가 AI가 작성했습니다.

이러한 결과는 AI 모델이 이와 같은 고전 문학 작품의 영향을 받는다는 점을 감안하면 전혀 놀랍지 않지만, 유명 텍스트가 AI가 생성한 것으로 잘못 분류되었다는 사실은 여전히 ​​중요한 문제를 강조하고 콘텐츠 감지 도구가 얼마나 신뢰할 수 없는지를 보여줍니다.

5. 애플의 첫 아이폰 보도자료

물론, AI 모델은 셰익스피어와 모비딕과 같은 고전 문학 작품을 포함한 다양한 텍스트를 통해 훈련됩니다. 이는 모비딕을 콘텐츠 검사기로 검사했을 때 AI가 생성한 것으로 잘못 식별되는 이유를 설명할 수 있지만, Apple 보도자료를 사용하여 AI 모델을 훈련시킨다는 생각은 터무니없는 듯합니다.

저자는 새로운 Apple 보도자료를 검사기로 확인하는 대신, Apple의 뉴스 아카이브를 검색하여 iPhone에 대한 Apple의 첫 번째 보도자료를 찾아냈습니다. 작성자는 보도자료 전체를 ZeroGPT에 붙여넣었고, 그 결과 콘텐츠의 89.77%가 AI가 생성한 것으로 나타났습니다.

헤드라인과 한두 문단을 제외한 나머지 텍스트는 AI가 생성했다고 합니다.

전반적으로 실험을 실행해 볼 수 있는 AI 감지 도구가 많이 있습니다. 하지만 결론은 AI 콘텐츠 감지 도구는 효과가 없다는 것입니다. 이는 AI가 생성한 텍스트를 감지하는 것이 훨씬 더 어렵다는 것을 의미하지만, 전적으로 AI가 작성한 텍스트는 주의 깊게 읽기만 해도 인식이 가능합니다.