본 발명은 복수의 딥러닝 모델의 성능에 대한 우열을 가리기 위한 딥러닝 모델의 스코어링 방법에 관한 것이다.
본 발명의 목적은, 복수의 심판 모델(judge model)을 이용하여 복수의 평가 대상 모델에 대한 평가를 수행함으로써, 복수의 평가 대상 모델에 대한 성능 평가의 편향성을 줄이고, 객관성을 확보할 수 있는 딥러닝 모델의 스코어링 방법을 제공하는 것이다.
비교하는 평가 대상 모델의 수를 늘리거나, 복수의 심판 모델을 이용함에 따라 필연적으로 증가되는 비교 횟수를 감소시킴으로써, 복수의 평가 대상 모델에 대한 스코어링 수행에 필요한 시스템 리소스를 최소화 시키고, 평가 속도는 가속화 시키면서도, 평가 결과에 대한 정확도는 향상시킬 수 있다.
카카오뱅크 금융기술연구소
Financial Tech Lab