문제를 캡처해서 챗GPT에게 제공하기
챗GPT의 가장 훌륭한 활용 사례 중 하나는 내가 문제를 겪고 있는 문제를 캡처해서 제공해주는 것 입니다.
코드를 작성하다가 에러 메세지가 나타나면 코드를 캡처해 챗GPT에게 “버그를 해결하는 방법을 알려주세요” 라고 물어보곤 합니다.
내가 모르는 툴을 처음 쓸 때, 툴을 캡처해 챗GPT에게 “이 툴을 사용하는 방법을 알려주세요”라고 물어보곤 합니다.
이것이 의미 있는 이유는, 나의 상황에 대한 맥락을 제공해주기 때문입니다. 맥락을 제공했을 때 챗GPT가 더 훌륭한 답변을 내놓습니다.
AI는 똑똑하지만, 무엇을 해야 하는지, 어떻게 해야 하는지에 대한 맥락이 부족합니다. AI를 더 잘 사용할수 있는 방법은 상황에 대한 맥락을 제공하는 것입니다.
화면 캡처 → 챗GPT 질문 자동화
저는 최근에 스트림덱이라는 매크로 키보드를 사용하게 되었는데, 문제를 캡처해서 챗GPT에게 질문하고 답변을 해주는 과정을 하나로 합칠 수 있지 않을까 했습니다.
그리고 스트림덱에서는 이를 정말 쉽게 구현할 수 있었습니다.
실제 단계는 이와 같습니다.
화면을 캡처해서 클립보드에 붙여넣기 (^⇧⌘3)
챗GPT를 열기
캡처한 화면을 붙여넣기(⌘V)
프롬프트를 붙여넣기
챗GPT의 불쾌한 답변
저는 구현한 서비스를 이용해 대화하던 중 챗GPT의 답변 중에서 굉장히 불쾌한 경우가 있음을 느끼게 되었습니다. 그건 챗GPT가 답변 중 여러 개를 나열해서 “여기 중에 무엇이 필요하신가요?” 라고 묻는 경우입니다.
실제로 업무를 할 때도, 여러 옵션 중에 뭐가 나을까요? 라고 물어보는 것은 좋은 방식이 아닙니다. 이걸 하려는데, 이러한 다른 옵션도 있습니다 라고 답변하는게 더 좋습니다. 그런 것 아예 없이 이걸로 진행하겠습니다 라고 하는 것이 더 더 좋습니다.
챗GPT와의 답변도 마찬가지입니다. 우리는 선택하고 싶지 않습니다. 가장 좋은 판단으로 진행해주길 원합니다.
그래서 프롬프트에 이러한 부분을 굉장히 강조해서 작성했습니다. 화면을 보고 스스로 판단하기를 원했거든요. 또한 맥락을 추가로 넣을 수 있는 부분도 만들었습니다.
Instruction:
당신은 화면을 보고 무엇을 해야할 지 알려주는 AI Assistant입니다.
당신의 업무는 화면을 보고 화면을 보고있는 유저에게 필요한 것을 예상해서, 필요한 것을 제공해주는 것입니다.
먼저 화면을 주의깊게 살펴보세요. 그런 다음 유저에게 필요한 단일 행동을 당신이 가지고 있는 도구를 최대한 활용해서 가치를 바로 제공하세요
답변은 유익하고 논리적으로 작성되어야 합니다.
복수의 선택지를 제시하지 않습니다.
사용자에게 결정을 맡기지 않습니다. 스스 로 판단해서 행동하세요.
오버헤드가 있으면 안됩니다.
사용할 수 있는 도구 :
- Web Search
- Canvas
- Code Interpreter & Data Analysis
Context:
그 결과 챗GPT의 결과물은 꽤나 만족스러웠습니다. 별도의 맥락을 전달하지 않았음에도 불구하고, 화면에 있는 URL 링크를 보고, 해당 링크에 접속해 글을 요약해주었기 때문입니다.
이처럼 저는 제대로된 맥락을 추가할 수 있는 AI가 다음 버전의 AI가 아닌가 하고 생각합니다. 좋은 의견 있으면 남겨주세요!