미스트랄, 3B 오픈웨이트 멀티모달 모더레이션 모델 Shieldstral 공개
- 미스트랄이 Shieldstral을 Apache 2.0 라이선스로 공개함, 3B 크기로 최대 7배 큰 오픈 가드모델들과 텍스트 안전성에서 동급 성능을 내고 멀티모달 모더레이션에서는 새 기록을 세움
- 기존 가드모델은 고정된 유해 카테고리를 가중치에 박아넣어 재학습이 필요했지만, Shieldstral은 추론 시점에 자연어 정책 질문만 던지면 재학습 없이 새 정책에 바로 적용됨
- 텍스트와 이미지를 하나의 인터페이스로 처리하며,
<Instruct>,<Query>,<Document>세 부분으로 요청을 구성해 yes/no 로짓을 소프트맥스로 정규화한 연속적 안전성 점수를 한 번의 forward pass로 반환함 - 단일 16GB GPU에서 구동 가능할 만큼 경량화됐고, 이질적인 공개 안전성 데이터셋들을 하나의 instruction-query-document 포맷으로 통일해 학습에 활용함
- NVIDIA가 주도하는 Open Secure AI Alliance의 창립 멤버로 참여하며 발표됨
Hacker News 의견들
미스트랄 모델 얘기 더 많아졌으면 좋겠음, 유럽에서 AI 만드는거 자체가 반가움
근데 성능이 최신 아시아 모델들이랑 너무 벌어졌음. 몇 년 전엔 중위권에서 버텼는데 이제는 그것도 아님. EU에 호스팅된 딥시크나 큐원 쓰는게 나을 정도
미스트랄 7b는 지금도 맥북에서 로컬로 돌리기 제일 좋은 오픈모델 중 하나임, 속도도 빠름
미스트랄은 이제 이 -stral 네이밍 좀 버려야 함, Shieldstral은 진짜 어색하고 별로임
네이밍이 좀 그래도 끝까지 밀고 나가야 브랜딩이 되는거임
전략이 작은 모델 만드는게 아니라 그게 유일한 선택지인거임, 소타 학습에 필요한 컴퓨팅과 자금이 미스트랄한텐 없음
이거 반대로 써서 '불온한' 콘텐츠 필터링해서 모아주는 뉴스레터 만들면 재밌을듯, 어쨋든 미스트랄은 근처 시장이 뭘 원하는지 잘 아는듯
유럽 AI act, 채팅컨트롤 같은 규제 때문에 회사들이 이런 컴플라이언스 도구가 필요할거라는거 알고 만든듯
이게 임의의 정책셋으로 진짜 조정 가능한지 궁금함, 아니면 그냥 우리가 아는 빅테크식 모더레이션 스타일 하나 더 나온건지. 논문 보니까 진짜 유연한건 아닌 것 같음
정책 하나당 모델을 한 번씩 돌려서 위반여부 판단하고 그 결과들 합쳐서 점수 내는 방식으로 보임, 실제로 유연해보임
이런 식으로 SV식 도덕관을 다른 문화권에 그대로 이식하는게 맞는지 의문임, 문화적 제국주의같은 느낌
미스트랄은 프랑스 회사인데 프랑스가 그렌 실리콘밸리식 사고를 강요하는 느낌은 아니지 않나
헬스케어 리뷰 플랫폼 운영해봤는데 이런 정책-자연어 매핑 방식이 실제로 엄청 유용했음, 이런 모델 있었으면 콜드스타트에 최고였을듯
이런 블랙박스식 모더레이션이 대세가 될지 의문임
여러 도구 중 하나로만 쓰면 되는거지 이거 하나로 다 해결하려는건 아님
이미지 공유 플랫폼 만들려고 했는데 콘텐츠 모더레이션 책임 때문에 접었었음, 이건 그 문제에 대한 현실적이고 비용효율적인 해법으로 보임
딥시크 말고 경제성을 진짜 고려하는 AI회사 하나 더 나왔네