TUMN 인사이트

AI·IT 수집 자료실

공식 출처에서 수집한 소식을 발행일 순서로 확인하세요. 발췌는 원문의 일부이며 TUMN이 작성·검증한 해설 글과 구분됩니다. 전체 내용은 원문에서 읽을 수 있습니다.

1개 · 1페이지 · 로그인 없이 열람

메모리 벤치마크 점수 믿어도 되나 ↗

에이전트 기억 벤치마크(LoCoMo, LongMemEval 등)의 점수를 그대로 믿기 어려운 이유를 정리한 글 같은 제품의 LoCoMo 점수가 누가 쟀느냐에 따라 58.44~94.7로 변동이 큼 LoCoMo 정답지 1,540개를 대화 원문과 대조하니 약 7%가 틀렸거나 모호 같은 답이라도 채점 프롬프트만 바꾸...