평가 보고서와 보안·안정성 개선
평가 커버리지 보고서 명령이 추가되고, 핵심 동작과 보안 검증이 강화되었습니다.
교안에 영향
예전 evals 안내에는 eval coverage report 명령이 없어 관련 문서가 맞지 않습니다.
요약
- evals에 평가 커버리지 보고서 명령이 추가되었습니다. - core와 a2a에서 취소된 도구 응답 처리, 연속 역할 정리, ReAct 루프 및 프롬프트 주입 루프 완화가 이뤄졌습니다. - a2a-server에서 workspace trust와 task isolation 검증을 강화해 RCE 위험을 줄였습니다. - macOS Seatbelt 프로필 정렬과 자격 증명 검증 순서, GOOGLE_APPLICATION_CREDENTIALS 대체 경로도 조정되었습니다.
바뀐 것
새 기능
- caretaker-triage에 LLM triage orchestrator와 container build를 구현했습니다.
- evals에 eval coverage report 명령을 추가했습니다.
기타
- cli의 macOS permissive Seatbelt profiles를 deny-default model에 맞게 정렬했습니다.
수정
- core와 a2a에서 취소된 tool responses를 묶고 연속된 roles를 합쳐 400 Bad Request를 막았습니다.
- core에서 무한 ReAct loops와 prompt injection loops를 완화했습니다.
- a2a-server에서 workspace trust와 task isolation을 강제해 RCE를 방지했습니다.
- core에서 cached credentials를 순차적으로 검증하고 GOOGLE_APPLICATION_CREDENTIALS fallback을 복구했습니다.