Testing ChatGPT-4 for 'UX Audits' Shows an 80% Error Rate & 14-26% Discoverability Rate
Baymard에서 진행한 테스트에 따르면, ChatGPT-4의 UX 제안은 전문가에 비해 80%의 거짓 긍정 오류율과 20%의 정확도를 보임.
ChatGPT-4은 웹페이지 스크린샷에서 26%의 UX 문제를 발견하고, 실제 웹페이지에서는 14%만 발견함. 이는 인터랙션이 필요한 UX 문제를 스크린샷만으로는 파악할 수 없기 때문임.
ChatGPT-4의 UX 제안 중 약 8.9%는 사용자 경험 에 해를 끼칠 수 있고, 71.1%는 시간 낭비에 해당하는 제안으로 판명됨.