chatgpt의 한계

지난 몇 주동안 chatgpt를 사용하면서 놀라움도 있었지만 한계점도 발견할 수 있었습니다.

 

자료의 한계, 부정확한 데이터

chatgpt에서 최신 정보를 물어보신 분들은 아시겠지만 chatgpt는 2021년까지의 데이터만 가지고 있다고 나옵니다.

(하지만 일부 2022년 데이터도 나오긴 합니다만 대부분 정확하지 않습니다. )

 

2021년 질문

 

2022년 질문

 

2023년 질문

 

또 다른 문제는 답변의 정확성 입니다.

이 문제는 보다 세부적인 질문으로 들어갔을 때 더 크게 드러납니다.

2022년 질문

 

2022년 한국의 역사적 이벤트에 대해 질문했을 때 chatgpt는 4월 13일 총선에 대해 설명했지만 위 설명에 나온 4월 13일 총선 날자는 2016년의 20대 총선이었으며 정권교체에 대한 이야기는 2008년 17대 대선, 코로나19에 때문에 투표 결과에 영향을 미쳤다는 이야기는 21대 총선 이야기가 섞인 것으로 보입니다.

 

문제는 이 같은 배경지식을 모르고 답변을 받았을 때는 '그럴듯하다'라는 점입니다.

 

하지만 반대로 19대 대선에 대해 물어볼 경우 비교적 정확하고 자세한 답변을 받을 수 있습니다.

(홍준표 대신 안철수가 나온 것은 의외지만 사실이 아닌 것은 아니니...)

19대 대선

2021년 진행된 총선 역시 잘 나오고요

21대 총선

 

 

하지만 예상했던 대로 2022년 진행된 20대 대선의 경우는 엉망인 데이터가 나옵니다.

20대 대선

 

 

 

chatgpt의 무한한 가능성에는 매번 놀라고 있지만

글쓰기와 같은 창작 영역을 벗어나지 않으려고 하는 것은 이런 이유 때문입니다.

다만 2021년까지 한정으로 국제적으로 유명한 사건들이나 특정 이벤트에 대해서는 높은 정확도를 보입니다. 

 

 

 

결론적으로 chatgpt를 사용할 때 아래와 같은 사항들은 주의가 필요할 것 같습니다.

 

- 특정 이벤트가 아닌 무언가를 찾으라고 하는 종류 

- 2022년 이후 진행된 이벤트