Modelos & Agentes
anthropic isola avaliações internas de modelos da internet
theverge.com11 de outubro
o que aconteceu
A Anthropic está desconectando suas avaliações internas de modelos da internet, segundo reportagem do The Verge. A medida visa evitar contaminação de dados de treinamento e garantir que benchmarks internos não vazem para o dataset de futuros modelos.
por que importa
Reconhecimento de que avaliações públicas poluem o próprio processo de treinamento — sinal de maturidade técnica, mas também de que benchmarks abertos estão perdendo utilidade.
fonte
- The Verge: Anthropic cutting evals from internetImprensaAbrir ↗
