LLM Wiki

독립 평가 에이전트 루브릭 재수정 루프

3 min read

독립 평가 에이전트 루브릭 재수정 루프(유형: workflow)에 대한 한국어 위키 노트를 성공적으로 생성하여 등록했습니다.

📄 작성된 파일 정보

📝 주요 포함 내용 요약

  1. Frontmatter 스키마 준수:
    • type: workflow, status: draft, core: false, sources: ['raw/0xMorty_Loop_Design.md'], created: 2026-08-27, updated: 2026-08-27 지정.
  2. 핵심 요지 및 상세 내용:
    • 동일 컨텍스트 내 자기 수정(Self-Correction) 시 발생하는 자기 편향(Self-Correction Bias) 문제 및 컨텍스트 윈도우 오염을 극복하기 위한 독립 평가 에이전트(Grader)의 역할 정립.
    • 0xMorty의 실전형 9단계 스웜 루프 중 7단계(“결과 평가 및 실패작 재수정”) 프로세스와 연결 지표 명시 (raw/0xMorty_Loop_Design.md).
  3. 구체적 사용 시나리오 & 코드 예시:
    • 모델 조합 예시: 빠른 구현용 Claude 3.5 Haiku / GPT-4o-mini와 엄격 평가용 Claude 3.5 Sonnet / OpenAI o3-mini 조합 제시.
    • Python 기반 워크플로우: RubricItem 구조체, 독립 평가 함수(grader_agent_eval), 그리고 재수정 루프 실행 함수(run_rubric_refinement_loop) 구현 예시 추가.
  4. 충돌 및 한계 분석 (## 충돌):
    • 단일 에이전트의 자가 검토 방식이 가진 환각 자가 복제 문제와 이를 해결하기 위한 독립 맥락 평가의 트레이드오프(API 토큰 비용 vs 인간 수동 리뷰 및 머지 충돌 감소 효과) 분석.
  5. Obsidian 연동 지식 그래프 구축 (## 관련 노트):
    • [[실전형 9단계 스웜 루프]], [[루프 디자인 5단계]], [[SubagentStop 라이프사이클 훅]], [[리드 에이전트 오케스트레이션]], [[Git Worktree 기반 작업 영역 격리]], [[AI 상호 리뷰의 한계]] 등 기존 지식 베이스 노트들과 양방향 연결되도록 위키링크 구성.

그래프 뷰

백링크