Skip to content

[Test] RAG A/B claim·lease 장애 재시험 - #516

Merged
Gimini-3 merged 2 commits into
developfrom
test/rag-ab-lease-recovery
Oct 15, 2026
Merged

Gimini-3 merged 2 commits into
developfrom
test/rag-ab-lease-recovery

Conversation

@Gimini-3

Copy link
Copy Markdown
Contributor

시험 내용

실제 백엔드 JVM 2대와 격리 PostgreSQL에서, 모델 응답을 제어하며 RAG 작업의 claim·lease 복구를 시험했습니다. 제어 모델 서버는 합성 응답을 사용했으며 실제 Ollama와 공개 서비스는 사용하지 않았습니다.

  • A가 모델 응답을 기다리는 동안 B를 기동: 호출 1회, 최종 SUCCESS·인용 1건
  • A를 강제 종료: 20초 lease 만료 뒤 B가 새 token으로 재선점, 최종 SUCCESS·인용 1건. 모델 호출은 재시도로 총 2회
  • A의 늦은 응답: 격리 DB에서 lease·token을 무효화한 뒤 B 완료와 경합시켜 A의 STALE_RESULT_DISCARDED를 확인. B 답변·인용만 유지

총 7회 중 통과 4회, 준비·시험 조건 실패 3회입니다. 실패 회차와 미판정 원인도 개별 실행 파일에 보존했습니다. 각 회차의 시험 행과 프로세스를 정리했고 시험용 PostgreSQL 컨테이너도 정지했습니다.

결과 기록

docs/test-results/rag-ab-ownership-20261016/README.md에서 각 run ID의 조건, 이벤트, 결과, 한계를 연결합니다.

해석 범위

모델 호출의 정확히 한 번 실행은 주장하지 않습니다. 현재 소유자가 최종 답변·인용 한 벌만 확정하는 것을 확인했습니다. 실제 Ollama·공개 브라우저·알림 중복·사용자 영상 촬영은 이번 자동 재시험 범위 밖입니다.

@coderabbitai

coderabbitai Bot commented Oct 15, 2026 •

Copy link
Copy Markdown

Important

  • 🔍 Trigger review

This repository does not receive automatic reviews because it has fewer than 10 stars.

⚙️ Run configuration
  • Configuration used: Repository: DocGrid/docgrid/.coderabbit.yaml
  • Review profile: CHILL
  • Plan: Advanced
  • Run ID: 9264de9c-e6e3-4401-97ac-e060d5be42fd
  • Autofix · Keep fixing CodeRabbit findings and required CI, and resolving merge conflicts

Thanks for using CodeRabbit! It's free for OSS, and your support helps us grow. If you like it, consider giving us a shout-out.

❤️ Share

Comment @coderabbitai help to get the list of available commands.

@Gimini-3
Gimini-3 merged commit f238caf into develop Oct 15, 2026
3 checks passed
@Gimini-3
Gimini-3 deleted the test/rag-ab-lease-recovery branch October 15, 2026 21:18
@Gimini-3 Gimini-3 self-assigned this Oct 16, 2026
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant