Patterns for Building LLM-based Systems & Products
대형 언어 모델(LLM)을 시스템과 제품에 통합하기 위한 실질적인 패턴에 대해 다룬다. 이를 위해 학문적 연구, 산업 자원, 그리고 실무자의 지식을 참조하여 핵심 아이디어와 실습을 요약한다.
성능 측정, 최신 외부 지식 추가, 특정 과제에 대한 능력 향상, 지연 시간 및 비용 감소, 출력 품질 보증, 오류 예방과 우아한 관리, 사용자 피드백 수집 등 7가지 핵심 패턴을 제공한다.
모델 성능을 평가하는 데 사용되는 측정법인 '평가'에 대해 자세히 설명한다. 이는 벤치마크 데이터와 지표를 포함하며, 이를 통해 시스템 또는 제품이 얼마나 잘 수행되는지를 측정하고 어떠한 회귀를 감지하는데 도움이 된다.
괜찮은 글이 있어 공유드립니다!