앤트로픽, Claude Fable 5.1 공개: 캐시 읽기 비용 인하와 Mythos 제한 접근 병행
- 앤트로픽 발표 기준 Fable 5.1은 Terminal-Bench-Science 0.1에서 52.6%를 기록해 Fable 5의 24.7%보다 높았고, Terminal-Bench 4.0에서는 55.8%를 기록함
- Fable 5.1과 Mythos 5.1은 같은 기반 모델이며, 일반 공개 Fable과 달리 Mythos는 사이버보안·생명과학 작업용 보호 장치를 적용해 신뢰 접근 프로그램에서만 제공됨
- 토큰 과금 작업에서 캐시 읽기 가격을 낮춰 Fable 5보다 일반 작업은 약 25%, 에이전트 작업은 최대 약 45% 비용 절감을 예상함
- 기업용 EFS(Enterprise Frontier Safeguards)는 고객이 전적으로 통제하는 클라우드에 데이터를 보관해 무보존 정책과 같은 개인정보 보호를 제공하며, 올가을부터 단계적으로 배포 예정임
- 사이버보안 보호 장치는 무해한 내용을 잘못 막는 비율을 60% 감소시켰고, Fable 5.1은 취약점 발견에는 쓸 수 있지만 익스플로잇 개발에는 쓸 수 없도록 제한함
Hacker News opinions
이번 업데이트가 사용량을 리셋하긴 했는데, 내 5시간 창은 거의 안 썼는데도 2시간 뒤 초기화에서 5시간 뒤 초기화로 바뀜. 이번 주기에는 5시간 리셋을 한 번 덜 받는 셈임
난 오히려 좋았음. Fable 사용량이 98%였고 목요일에야 초기화될 예정이었는데 일찍 풀렸음
정렬 검사가 너무 민감해서 Fable은 거의 항상 Opus로 내려가더라. 실질적인 작업을 해본 사람이 있는지 궁금함
스크립트 몇 개는 작성했는데 비용이 너무 비쌌음
방어와 탐지 업무를 하는데 CVP에 있어도 사이버보안 관련 요청은 매번 Opus로 내려감. Fable을 쓸 수가 없었음
난 구현보다 계획 수립에 Fable을 많이 쓰는데 꽤 좋았음. 계획은 Fable로 만들고 구현은 Opus로 하는 조합이 잘 맞더라
철새 같은 무해한 생물학 정보를 다룰 때도 예전에는 막혔음. 한두 달 전부터는 생물학 차단 목록을 조정했는지 다운그레이드가 눈에 띄게 줄었음
내 업무는 거의 전부 사이버로 분류돼서 막힘. 회사도 Mythos 등록 계획이 없고, 개인이 등록할 수 있는지도 모르겠음
pgrust 작업에서는 Fable 문제가 거의 없었음. 버그를 찾는 퍼즈 테스터를 만들 때만 차단됐음
10년 된 비디오카메라와 DVR 통신을 리버스 엔지니어링하는 데는 쓸모없었지만, 에이전시 웹 개발 업무에는 꽤 좋았음
문제를 명확히 설명하고 검증 방법까지 주면 복잡한 문제도 거의 한 번에 해결했음. 보안 인접 작업에서 Opus로 내려가는 일은 가끔 있지만 드문 편임
캐시 읽기 가격이 4분의 1로 내려간다는 점이 제일 큼. 긴 에이전트 작업은 이전 대화 기록을 캐시에서 다시 읽으니 실제 비용 차이가 날 것임
우리 viktor.com 평가에서는 실제 작업 비용이 Fable 5보다 약 30% 줄었음. 캐시 효과가 생각보다 큼
캐시 할인과 별개로 사용량 쿼터는 17% 내려갔음
Haiku 5는 대체 언제 나오는지 모르겠음. Haiku가 1년째 업데이트가 없고 Sonnet도 문제가 있었으니, Anthropic이 저가 모델 시장에는 관심이 없다는 신호처럼 보임
이미 4.8급 모델로 오류가 거의 없는데 이 가격을 낼 이유가 있는지 모르겠음. 저렴한 오픈 모델도 점점 더 많은 용도에서 충분히 잘함