소개
스터디 신청하면서 제일 궁금했던, 똑같은 프롬프트를 그대로 제품별로 입력했을 때
내용이 어떻게 출력되며, 차이점이 무엇인지를 파악하기 위해 진행해봤습니다.
LLM 활용이 거의 처음이라, 제품 및 모델간 차이도 헷갈리는 지식 수준이어서 이 부분이 너무 궁금했어요😂
진행 방법
프롬프트는 1주차 수업에서 제공해주신 내용을 그대로 사용했습니다.
0~8단계 여행계획 추천 및 일정 프롬프트를 챗지피티, 제미나이, 클로드에 동일한 내용으로 입력 후 답변 내용 확인 및 분석
결과와 배운 점
사용 LLM별 차이
챗지피티 4o
항목별로 간결하게 답변하나 할루시네이션 심하고 성의 없는 편
유튜브 링크를 함께 요청하니 링크를 걸어주긴 하는데, 모두 없는 동영상이었고 비행기편도 전혀 달랐습니다.
지피티의 항목별 간단한 표기
제미나이 2.5 pro
여행 계획 세우기는 제미나이가 정말 압승인 것 같아요! 구글 항공권, 호텔 검색/유튜브/지도 정보가 연동되니 가장 정확하고 계획 세우기에 최적화되어 있더라구요. 호텔리스트, 항공권리스트, 구글맵에 좌표 모두 찍어 노출되는 점은 정말 신세계였네요. 선정 이유 또는 설명도 다른 2개보다 잘해줬어요.
제미나이의 항목별 표기
클로드 sonnet 3.7
3개 중 가장 간결하게 답변, 설명글도 한 줄 정도만 적어줍니다.
지피티보다 할루시네이션 적었지만 그래도 항공권 정보, 입장료 등 잘못된 부분이 여럿 있었습니다. 그리고 3박 4일 여행지를 추천해달라고 했는데 추천지 중에 하나로 포르투갈을 추천해줘서 웃겼습니다ㅋㅋ
클로드의 항목별 간단한 표기
앞으로의 계획
지피티와 제미나이는 각각 딥리서치로도 진행해봤는데, 프롬프트 1개 입력 후 시간소요가 엄청 길더라구요. 체감상 개당 15분 이상 걸렸던 것 같습니다. 또, 1~2개 진행하면 멈추거나 계속 오류가 발생해서 불편함을 느꼈어요. 딥리서치 프롬프트는 다르게 구성해야하나라는 생각이 들어서, 다양하게 작성해서 계속 시도해보려고 합니다ㅎㅎ
