한국어EN
학습 데이터·후속학습Yang 외

Rethinking Benchmark and Contamination

Rethinking Benchmark and Contamination — Rephrased Samples

왜 중요한가

바꿔쓰기·번역만으로 n-gram 디컨터미네이션이 무력화되고 HumanEval의 8~18%가 공개 코퍼스와 중복

출처 — 1차 출처만 싣고, 직접 이동해 확인할 수 있어요 논문arxiv.orghttps://arxiv.org/abs/2311.048502026년 8월 24일에 더한 조각 · 그 주 보기
같은 주에 나온 조각11.06GPT-4 Turbo 128K와 Assistants API Retrieval 발표공식 발표11.06DevDay공식 발표
같은 축의 가까운 조각10.27NLP Evaluation in trouble논문01.31Dolma논문02.02KTO — 전망이론 기반 이진 신호 정렬논문02.05GRPO 도입 (DeepSeekMath)논문
DevDayH200 발표