[ KSJ | 면역학 | 멀티오믹스 ]
제 경험상, ChatGPT는 출처마저도 "생성"해내는 경우가 태반이었습니다. PMID도 윗분처럼 잘못된 경우가 많았고, 진짜 있을법한 그럴듯한 이름으로, 제가 딱 원할것같은 이름으로 생성해주더라구요 ㅋㅋㅋㅋ
제가 써본 다른 툴 중에서 논문 DB를 비교적 정확하게 잘 찾아준것은 ChatSonic, BingChat, Perplexity, You.com(YouChat) 이었습니다.ㅋㅋ 이것들은 검색엔진이랑 연동 되어있어서 링크를 걸어주는데 몇번 테스트 했을때 대체로 제대로 된 링크를 주었었습니다.
다만 말빨(글빨)은 ChatGPT보다 떨어지는 느낌이었습니다. 답변 딱 하고 링크 나오고 끝인 느낌.
예를 들면 "Treg fragility를 최초로 밝힌게 누구야?" 하면 ChatGPT는
"아, 그거요~ 제가 잘알죠, 그건 2014년(거짓)에 James murphy(거짓)이 발견했고 2015년에도 네이쳐 나왔구요~ 이러이러 저러저러한 결과가 있고(거짓), 그렇습니다. 더 도와드릴까요?
Reference
- "Treg fragility review"(논문명 구라), DOI(구라) PMID(구라)
- "This is Treg fragility"(논문명 구라), DOI(구라) PMID(구라)
이런 느낌이면
BingChat, perplexity같은건
"아. 2017년 cell에 William et al이요.
- 논문 주소 (맞음)"
글쓸때나 뭔가 구조가 필요할땐 ChatGPT가 월등하고 정확도는 다른게 더 높은 느낌이었습니다. 하지만 결국 다들 GPT3 API 기반이어서 다른 서비스들도 틀릴때가 없는건 아닙니다. 맹신은 금물 ㅋㅋ