태그
#benchmarks
3개 기사
models
"프런티어 모델"이 진짜 의미하는 것 — 그리고 벤치마크가 당신을 오도하는 이유
"프런티어 모델"은 사양이 아니라 끊임없이 움직이는 라벨입니다. 이 말이 실제로 가리키는 것, 리더보드 점수가 당신에게 필요한 답을 주지 못하는 이유, 그리고 그럼에도 잘 고르는 법을 살펴봅니다.
#frontier-models#benchmarks#evaluation
06-01 19:11·7 분
research
벤치마크를 넘어선 평가: 사람 심사자와 모델 심사자
벤치마크는 점수 매기기 쉬운 것을 측정합니다. 열린 과제에는 판단이 필요합니다. 사람에게서든, 사람을 대신하는 모델에게서든. 둘 다 오도할 수 있습니다.
#evaluation#llm-as-judge#benchmarks
05-06 16:53·7 분
research
모델은 어떻게 평가되는가: 벤치마크, 그리고 그것이 거짓말하는 이유
벤치마크 점수는 측정처럼 보이지만, 사실은 주장입니다. 모델 평가가 실제로 어떻게 이루어지는지, 그리고 높은 숫자가 왜 여전히 당신을 오도할 수 있는지 살펴봅니다.
#benchmarks#evaluation#leaderboards
05-06 16:14·7 분