AI 용어 사전

사람이 정답을 검수해 확정해 둔, 변경 전후를 비교하는 기준이 되는 평가용 데이터 묶음.

프롬프트나 모델을 바꿀 때 기존에 잘 되던 케이스가 깨지지 않았는지 다시 돌려 확인하는 평가.

사람이 매번 지시하는 대신 에이전트가 스스로 반복 실행·검증하도록 루프를 설계하는 일.

코드를 직접 쓰는 대신 에이전트를 지휘하고 검증하며 제품 수준 소프트웨어를 만드는 방식.

코딩 에이전트가 읽도록 빌드·테스트·규칙을 적어 두는 저장소 공통 지침 파일.

코드보다 명세를 먼저 쓰고, 에이전트가 그 명세를 기준으로 구현하게 하는 개발 방식.

모델 응답이 지정한 JSON 스키마를 반드시 따르게 강제하는 기능

모델이 미리 정의된 함수를 어떤 인자로 부를지 결정하는 기능

사람 대신 다른 AI 모델이 답변의 품질을 채점하게 하는 방법

AI 애플리케이션의 실제 성능을 체계적으로 측정하는 평가 체계

AI가 코드 변경사항을 읽고 버그·개선점을 지적하는 것

표준 벤치마크 점수가 실제 실무 성능을 더 이상 잘 구분하지 못하는 현상

에이전트·모델 호출 과정을 추적·기록해 문제를 진단하는 체계

코드를 직접 짜지 않고 원하는 느낌을 말로 설명해 AI가 만들게 하는 방식