가장 궁금했던 같은 프롬프트를 입력했을 때의 차이를 비교해봤습니다.
2025.04.25

소개
스터디 신청하면서 제일 궁금했던, 똑같은 프롬프트를 그대로 제품별로 입력했을 때
내용이 어떻게 출력되며, 차이점이 무엇인지를 파악하기 위해 진행해봤습니다.
LLM 활용이 거의 처음이라, 제품 및 모델간 차이도 헷갈리는 지식 수준이어서 이 부분이 너무 궁금했어요😂
진행 방법
프롬프트는 1주차 수업에서 제공해주신 내용을 그대로 사용했습니다.
0~8단계 여행계획 추천 및 일정 프롬프트를 챗지피티, 제미나이, 클로드에 동일한 내용으로 입력 후 답변 내용 확인 및 분석
결과와 배운 점
사용 LLM별 차이
챗지피티 4o
항목별로 간결하게 답변하나 할루시네이션 심하고 성의 없는 편
유튜브 링크를 함께 요청하니 링크를 걸어주긴 하는데, 모두 없는 동영상이었고 비행기편도 전혀 달랐습니다.
제미나이 2.5 pro
여행 계획 세우기는 제미나이가 정말 압승인 것 같아요! 구글 항공권, 호텔 검색/유튜브/지도 정보가 연동되니 가장 정확하고 계획 세우기에 최적화되어 있더라구요. 호텔리스트, 항공권리스트, 구글맵에 좌표 모두 찍어 노출되는 점은 정말 신세계였네요. 선정 이유 또는 설명도 다른 2개보다 잘해줬어요.

클로드 sonnet 3.7
3개 중 가장 간결하게 답변, 설명글도 한 줄 정도만 적어줍니다.
지피티보다 할루시네이션 적었지만 그래도 항공권 정보, 입장료 등 잘못된 부분이 여럿 있었습니다. 그리고 3박 4일 여행지를 추천해달라고 했는데 추천지 중에 하나로 포르투갈을 추천해줘서 웃겼습니다ㅋㅋ

앞으로의 계획
지피티와 제미나이는 각각 딥리서치로도 진행해봤는데, 프롬프트 1개 입력 후 시간소요가 엄청 길더라구요. 체감상 개당 15분 이상 걸렸던 것 같습니다. 또, 1~2개 진행하면 멈추거나 계속 오류가 발생해서 불편함을 느꼈어요. 딥리서치 프롬프트는 다르게 구성해야하나라는 생각이 들어서, 다양하게 작성해서 계속 시도해보려고 합니다ㅎㅎ




다행히 gemini에서 시연의 저주를 피해가셨네요 😂
제가 이번에 딥리서치 프롬프팅과 결과물까지 만드는거 한번 준비해보겠습니다!