Anthropic 퀴즈

퀴즈를 풀면 정답과 설명이 나타납니다.

1. 팀은 claude.ai에서 개발자 API를 통해 Claude를 평가하고 있습니다. 무엇을 가정하지 말아야 합니까?
   • 애플리케이션, API 및 호스팅된 통합은 필연적으로 동일한 기능과 제어를 노출합니다.
   • 배포 표면마다 설정이 다를 수 있음
   • 자체 애플리케이션에서 사용되는 표면을 테스트해야 함
   • 평가를 위해서는 정확한 엔드포인트가 필요합니다.
2. 팀에서 모델 출시를 위해 Claude 시스템 카드를 읽습니다. 그 증거는 무엇을 입증합니까?
   • 모델을 사용하는 모든 애플리케이션은 동일한 동작을 갖습니다.
   • 해당 릴리스에 대한 증거 및 제한 사항(모든 다운스트림 애플리케이션에 대한 보장은 아님)
   • 모델은 테스트된 작업 외에는 오류를 범할 수 없습니다.
   • 팀에 더 이상 애플리케이션별 평가가 필요하지 않음
3. Claude 기반 애플리케이션은 클라이언트 측 도구 요청을 받습니다. 누가 그 작업을 실행합니까?
   • 모델 그 자체
   • 애플리케이션과 관계없이 프롬프트를 작성한 사용자
   • 클라이언트 측 도구 호출을 처리하는 애플리케이션
   • 해당 모델의 시스템 카드
4. 도구 지원 비서가 기록을 업데이트했다고 말합니다. 애플리케이션에서 무엇을 확인해야 합니까?
   • 내레이션이 자신감 있게 들리는지
   • 모델 카드에 도구 사용 목록이 나와 있는지 여부
   • 프롬프트가 레코드 이름을 지정했는지 여부
   • 작업 완료 및 결과 상태가 올바른지 여부
5. 팀은 클라우드 플랫폼과 직접 API를 통해 Claude를 비교합니다. 평가기록에는 무엇이 포함되나요?
   • 정확한 엔드포인트, 모델 버전 및 관련 구성
   • Claude 성만
   • 애플리케이션 출시일만
   • 사용자가 가장 좋아하는 답변
6. 개발자가 광범위한 품질 주장에만 의존하는 대신 작업별 테스트를 만들어야 하는 이유는 무엇입니까?
   • 모델 카드는 모든 애플리케이션에 대한 테스트를 대체합니다.
   • 측정된 행동은 작업 및 평가 조건에 따라 다릅니다.
   • 시스템 카드는 모든 상황에서 높은 품질을 보장합니다.
   • 테스트를 통해 플랫폼 차이가 사라집니다.
7. 정책 질문에 답변하는 동안 검색 도구가 실패합니다. 애플리케이션은 어떤 동작을 테스트해야 합니까?
   • 일반적인 맥락에서 고안된 자신감 있는 답변
   • 확인하지 않고 도구가 성공했다는 주장
   • 정책을 만들어냈다기보다는 증거가 빠졌다는 명확한 보고
   • 모델에 의한 정책 텍스트 변경
8. 프로덕션에서 Claude 모델 버전을 변경하기 전에 팀에서는 무엇을 계획해야 합니까?
   • 안정적인 API는 출력 동작이 변경될 수 없다는 것을 의미한다고 가정합니다.
   • 결과 충돌을 방지하려면 평가 세트를 삭제하세요.
   • 새 릴리스가 있는 경우 롤백 계획 건너뛰기
   • 관련 평가를 반복하고 지원 중단 또는 롤백 계획을 유지합니다.