김욱영
김욱영
Moderator
🌿 뉴비 파트너

ChatGPT의 출처에 대한 대화

[ KSJ | 면역학 | 멀티오믹스 ]

제 경험상, ChatGPT는 출처마저도 "생성"해내는 경우가 태반이었습니다. PMID도 윗분처럼 잘못된 경우가 많았고, 진짜 있을법한 그럴듯한 이름으로, 제가 딱 원할것같은 이름으로 생성해주더라구요 ㅋㅋㅋㅋ
제가 써본 다른 툴 중에서 논문 DB를 비교적 정확하게 잘 찾아준것은 ChatSonic, BingChat, Perplexity, You.com(YouChat) 이었습니다.ㅋㅋ 이것들은 검색엔진이랑 연동 되어있어서 링크를 걸어주는데 몇번 테스트 했을때 대체로 제대로 된 링크를 주었었습니다.
다만 말빨(글빨)은 ChatGPT보다 떨어지는 느낌이었습니다. 답변 딱 하고 링크 나오고 끝인 느낌.
예를 들면 "Treg fragility를 최초로 밝힌게 누구야?" 하면 ChatGPT는
"아, 그거요~ 제가 잘알죠, 그건 2014년(거짓)에 James murphy(거짓)이 발견했고 2015년에도 네이쳐 나왔구요~ 이러이러 저러저러한 결과가 있고(거짓), 그렇습니다. 더 도와드릴까요?
Reference
  1. "Treg fragility review"(논문명 구라), DOI(구라) PMID(구라)
  2. "This is Treg fragility"(논문명 구라), DOI(구라) PMID(구라)
이런 느낌이면
BingChat, perplexity같은건
"아. 2017년 cell에 William et al이요.
  1. 논문 주소 (맞음)"
글쓸때나 뭔가 구조가 필요할땐 ChatGPT가 월등하고 정확도는 다른게 더 높은 느낌이었습니다. 하지만 결국 다들 GPT3 API 기반이어서 다른 서비스들도 틀릴때가 없는건 아닙니다. 맹신은 금물 ㅋㅋ
2

👉 이 게시글도 읽어보세요