안녕하세요. 저희 회사에서 현재 진행중인 정부과제 중 성능 인증을 받아야 하는 부분이 있습니다.

공인평가 대상 항목은 주어진 이미지를 딥러닝 기반의 프로그램에 입력으로 넣어 출력된 분류결과의 정확도를 측정하는 것입니다.

과제 계획서에 몇가지 평가 측도가 있는데 목록은 아래와 같습니다.

1. 예측 정확도가 목표치를 넘는지 (ex: Accuracy, Precision, Recall 몇% 이상)
2. 예측 시간이 목표치에 들어오는지 (ex: 이미지 한장당 100ms 이내)

궁금한점은 아래와 같습니다.

1. 위와 같은 딥러닝 성능을 검증하기 위한 공인평가 진행이 귀사에서 가능한지

2. 시험인증이 가능하다면, 귀사에서 과제 검증 수행을 위해 필요한 항목들이 무엇인지 궁금합니다. 예를 들어, 성능을 검증하기 위한 데이터셋을 저희가 준비해서 학습 후 검증을 받는지 아니면 귀사에서 제공하는 데이터셋으로 학습 후 검증을 받는지 아니면 또다른 방법으로 시험을 수행하시는 것인지 궁금합니다.

3. 시험에 통상적으로 소요되는 기간와 비용이 궁금합니다.


감사합니다.