서비스/SW

ChatGPT를 1개월 가량 사용해 보았습니다. 

현재는 버전 4o죠.

기존과 차원이 다르게 나아졌다며 엄청난 광고가 있어서 정말 그럴까? 하고 기대하는 마음에 결제하고 지난 1개월간 사용해 보았습니다.

제가 기대하던 주 기능은 두 가지인데, 하나는 논문 및 전문서적 읽기, 다른 하나는 통계분석입니다. 이에 대한 사용기를 간단히 정리하고, 경험을 공유하고자 합니다.

1. 논문 및 전문서적 읽기

 - 저는 영어 네이티브가 아니다보니 영문 읽기는 당연하게도 한글에 비하면 많이 느립니다. 그래서 논문을 좀 대신 읽고 요약해준다면 시간을 많이 절약할 수 있을 거라고 기대했습니다. 아직 다른 사이트나 프로그램의 성능이 충분히 나오지 않기도 했고요.

 (1) 요약: 훌륭한 편입니다. 초록보다 훨씬 내용이 풍성합니다. 맥락을 이해하는데는 큰 무리가 없었습니다.

 (2) 번역: 잘될 때도 있고 그렇지 않을 때도 있습니다. 과도한 퍼포먼스를 요구하면 제대로 기능하지 않을 수 있다는 것을 알고 있었으므로, 핵심적인 부분(2~3페이지 가량)만 전문 번역을 요구했습니다. 결과는 크게 4가지로 나눌 수 있었습니다. 

  1) 잘 됨: 사실대로 깔끔하게 100% 번역해냅니다. 구글 번역이나 기타 번역 프로그램 등에서 보던 결과보다 훨씬 잘 번역했습니다. 사람이 번역하는 것과 별반 차이가 없는 수준이었습니다.

  2) 다른 내용이 있음: 매끄럽게 잘 번역하지만 헐루시네이션이 있습니다. 그럴 듯한 거짓말을 하거나 다른 수치가 나옵니다.

  3) 요약을 함: 전문 번역을 요구하는데 전문이라고 하면서 요약을 출력합니다. 당연하게도 세부사항 비교가 불가능했습니다.

  4) 불가: 그림이 크게 있거나 디자인이 어지러운 경우에는 아예 판독 불가를 외치는 경우도 있었습니다.

 (3) 수치 추출: 그림에서 수치를 읽어 엑셀로 출력해줘 기능입니다. 훌륭합니다. 실패한 적이 없었던 것 같습니다. 

 (4) 그림 판독: 아직 안 시켜봤습니다. 질문하시는 분들이 계실까봐 남깁니다.

 (5) 소감: 맥락 파악은 잘 하므로, 낯선 논문을 읽는데는 큰 도움이 됩니다. 하지만 세부사항 이해 및 비교에는 사용자 스스로 해야하는 비중이 매우 큽니다. 

2. 통계 분석

 (1) 입력: 데이터표가 들어있는 엑셀을 입력하면 인식을 합니다. 2가지 문제가 있습니다.

  1) 입력 제한: 기본 입력은 그룹당 5개까지의 데이터만 인식합니다. 그 이후는 잘 될 때도 있고 아닐 때도 있습니다.

  2) 형식 제한: 아주 단순한 표의 형식만 인식합니다. 조금만 형식이 복잡해져도 에러가 발생합니다.

 (2) 연산: 분산 분석을 수행해보았습니다.

  1) 결과: 옵션의 변경을 잘 인식하지 못합니다. 예를 들어 일원/이원 구분, 반복의 유무 반영이 잘 안됩니다. 

  2) 공식 및 계산과정 나열: 열심히 설명은 하는데 헐루시네이션이 있었습니다. 의도한 옵션 설정이 제대로 반영 안 됩니다.

(3) 소감: 현재 전문 통계프로그램은 당연하고 엑셀의 분석기능 대체도 안되는 수준입니다. 물론 미래에 발전할 가능성은 있습니다.

3. 종합 소감

 - 다른 번역 툴을 대체할만한 수준은 된다고 생각합니다. 하지만 현재 업무에 적극 활용하기에는 아직 많이 아쉽습니다.

 - 통계에 이용하기에는 모든 면에서 미흡합니다. 현재 수준은 추천하기 어렵습니다.

이상입니다. ChatGPT 사용에 관심있는 분들께 도움이 되길 바랍니다.