RAG 골든셋 구축 방법 14부작 마스터 가이드: 8편 2축(논리 정합성) 교차 검증

1. 물리적 실재성 단계를 넘어 논리의 관문으로 7편에서 가동한 1축 기계 대조 파이프라인을 통해, 골든셋 초안에 적힌 모든 근거 발췌문이 진짜 원본 문서에 실재하는 문자열이라는 물리적 무결성을 확보했다. 조사 하나, 공백 한 칸의 불일치까지 완벽하게 정제해 낸 것이다.그러나 1차 방어선을 통과했다고 해서 정답지가 완전히 무결하다고 선언할 수는 없다. 아직 한 단계 더 깊은 수준의 언어적, … 더 읽기

RAG 골든셋 구축 방법 14부작 마스터 가이드: 7편 1축(물리 발췌 진위) 검증 파이프라인

1. 유창하게 틀리는 AI와 정답지 오염의 공포 점진적 배치 공정을 통해 수집된 질문과 정답, 그리고 근거 원문 발췌 데이터는 우리 시스템의 성능을 판가름할 ‘수능 기출문제집’의 초안이 된다. 하지만 이 단계에서 절대 잊지 말아야 할 머신러닝 검증 공학의 명제가 존재한다. 바로 “LLM(거대언어모델)은 대단히 유창하게 틀린다”는 사실이다. 문제를 출제한 AI 세션들은 문장 구조나 어순이 대충 비슷하면 원문에 … 더 읽기