PREMIUM OpenAI의 SWE-Bench Pro 평가, 30%가 결함

OpenAI의 SWE-Bench Pro 평가, 30%가 결함
공유하기

OpenAI가 수행한 SWE-Bench Pro 평가 결과, 정밀한 점수라고 해서 반드시 신뢰할 수 있는 측정치는 아니라는 중요한 시사점을 제공하고 있습니다. 공개된 벤치마크의 27.4%와 경험 많은 소프트웨어 엔지니어들이 평가한 34.1%의 문제점이 드러나면서, 이 평가가 실제 프로그래밍 능력을 제대로 반영하지 못할 가능성을 보여주고 있습니다. OpenAI...

Premium News

🔓 모든 프리미엄뉴스를 광고 없이...

글로벌 투자관점의 프리미엄뉴스를 가장 빠르게.

댓글 남기기