Uma pontuação de benchmark não é uma avaliação do modelo
O DeepSWE põe Luna Max dois pontos atrás de Sol High por cerca de um sexto do custo. Explico por que este resultado não descreve o uso real dos modelos.
Tema
model-evaluation
Todos os artigos com a tag model-evaluation, do mais recente para o mais antigo.