Skip to content

feat: run 접수 기본 LLM 호출 상한 40→80 [1.106] - #246

Merged
chowon442 merged 1 commit into
devfrom
worktree-task-1.106
Oct 29, 2026
Merged

chowon442 merged 1 commit into
devfrom
worktree-task-1.106

Conversation

@chowon442

Copy link
Copy Markdown
Member

📌 관련 이슈

  • Refs Team-Proovy/proovy-brain#174 (task 1.106)

🏷️ PR 타입

  • ✨ 기능 추가 (Feature)
  • ✅ 테스트 추가 (Test)

📝 작업 내용

  • RunSnapshotProperties.Budget.maxLlmCalls의 기본값을 40에서 80으로 올립니다(proovy.run.snapshot.budget.max-llm-calls).
    • 근거: Brain은 verify 라운드 상한을 (run 남은 호출) // 3으로 정합니다. 기본값이 40이면 verify 호출이 12회로 잘립니다. 2026-10-24 재실측에서는 4건 모두 run 전체 호출이 15회에서 멈췄고, 완료된 3건이 모두 미검증이었습니다. 2026-10-25 재실측(b)에서 상한을 80으로 두자 verify 상한이 25가 됐고, 실제 사용은 8·13·14회, 검증 통과는 0/4에서 2/4로 늘었습니다. 5 run의 비용은 약 $0.18이었습니다.
  • maxToolCalls(40), maxOutputTokens(100,000), maxCostMicros(5,000,000) 등 다른 limit은 바꾸지 않았습니다. 비용 상한과 출력 token 상한은 그대로라서 fail-closed 예산 원칙도 바뀌지 않습니다.
  • budget_policy_version은 budget-v1을 유지합니다. 버전은 run마다 snapshot에 저장되는 라벨입니다. limits 값 자체가 request_fingerprint와 policy_snapshot에 고정되므로, 기본값을 바꿔도 이미 접수한 run의 의미와 fingerprint는 변하지 않습니다. limit을 바꿀 때 버전을 올리라는 규정은 계약(Brain docs/plan/22, docs/contracts/run-snapshot-v1.md)에 없습니다.
  • 계약 fixture(contracts/brain/internal-run-v1/**)의 40은 예시 입력값이라 그대로 둡니다.
  • 테스트
    • 신규 RunSnapshotPropertiesTest: 빈 설정을 Binder로 binding했을 때 limits가 (80, 40, 100000, 5000000, 5, 10, 50)이고 버전이 budget-v1인지, 설정값이 기본값을 덮는지 확인합니다. 지금까지는 @DefaultValue를 실제로 검사하는 테스트가 없었습니다.
    • RunSnapshotFactoryTest.defaults() 헬퍼와 해당 단언을 80으로 맞춥니다.

검증

  • ./gradlew test --tests '…RunSnapshotPropertiesTest' --tests '…RunSnapshotFactoryTest' (eclipse-temurin:21-jdk 컨테이너): 2 + 22 tests pass
  • 전체 suite(Postgres 포함)는 CI에서 확인합니다.

✅ 체크리스트

  • 코드 리뷰를 받을 준비가 완료되었습니다
  • 테스트를 작성하고 모두 통과했습니다
  • 문서를 업데이트했습니다 (필요한 경우) — Server 문서에는 기본값 서술이 없습니다. 근거와 개발 기본값 문서는 Brain PR에서 갱신합니다.
  • 셀프 리뷰를 완료했습니다

🤖 Generated with Claude Code

verify 라운드 상한이 (run 남은 호출) // 3이라 기본 40에서는 12회로 잘려
독립 답 확인·뒤쪽 검토가 실행되지 못했다(2026-10-24 재실측). 80으로 올린다.
다른 limit과 budget-v1은 그대로 둔다.

Refs Team-Proovy/proovy-brain#174

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
@chowon442
chowon442 merged commit 9707d4b into dev Oct 29, 2026
1 of 4 checks passed
@chowon442
chowon442 deleted the worktree-task-1.106 branch October 29, 2026 11:35
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant