RAGAS

RAG 시스템 평가 자동화 기법과 루프 엔지니어링 개념 연동 골든셋 구축

작성자:

1. RAG 시스템 평가 자동화 패러다임 시프트와 엔지니어 독박 검증의 종말 최근 수많은 기업들이 사내 내부 데이터를 활용해 답변을 제공하는 RAG(검색 증강 생성) 시스템 도입에 열을 올리고 있다. 하지만 RAG 시스템을 구축해 본 엔지니어들이라면 누구나 마주하는 거대한 절벽이 있으니, 그것은 바로 “어제보다 오늘 고친 시스템이 정말 더 똑똑해졌는가?”라는 품질 평가의 문제라는 것이다. 검색 엔진의 파라미터나 … 더 읽기

[학습] AI 에이전트를 위한 좋은 스펙 작성법

작성자:

AI 에이전트를 위한 좋은 스펙 작성법 원문 [LINK] 공부를 하라고, 이 글을 읽다보니 내가 모르는 것들이 너무 많았어서, AI와 공부 한 것을 기록해본다. 공부 한 것이 체화 되지 않으면 잊기때문에 수기로 한 번 쓰고, 블로그에도 다시 한번 정리하면서 습득해야겠단 생각이 들었다. ㄱ. LLM-as-a-Judge는 어떻게 설정 할 수 있을까? 말 그대로 사람이 하던 평가 업무를 PT-4나 … 더 읽기