구글 딥마인드의 수석 제품 관리자 로건 킬패트릭은 AI 기업들이 AI 모델 성능을 더 잘 평가하기 위해 자체 벤치마크를 개발할 것을 촉구했습니다. X에서 발언한 킬패트릭은 맞춤형 벤치마크가 기업들이 고유한 사용 사례를 반영하지 못할 수 있는 공개 리더보드에 의존하는 대신, 특정 비즈니스 요구에 적합한 지표에 집중할 수 있게 한다고 강조했습니다. 그는 Zapier와 Sierra 같은 기업들이 이미 이 접근법을 통해 비즈니스 특화 작업에 맞춘 AI 모델 성능을 크게 향상시키고 있다고 밝혔습니다.