Skip to content

[공지] finall_stt_3 평가 오류 수정 및 리더보드 초기화 예정 안내 #16

@DaconHoneyBee

Description

@DaconHoneyBee

안녕하세요, 한국어 음성·자연어 인공지능 경진대회 대화요약 부문 참가자 여러분.
2021 훈민정음 한국어 음성 자연어 인공지능 경진대회 운영진 데이콘입니다.

음성인식 final_stt_3의 평가 과정에서 문제가 발견되어, 아래와 같이 문제 해결 과정에 대해 공유드립니다.


1. 문제상황

  • 문제: final_stt_3의 리더보드 점수가 다른 task에 비해 score 개선이 안되는 현상 파악
  • 원인: 평가코드(데이터처리 + 평가산식) 중 데이터처리 코드에 제출 파일과 정답 파일의 인덱스 매칭이 제대로 이루어지지 않음

2. 조치 예정 내용

3. 사후 조치

  • 조치 완료(코드 수정 및 리더보드 초기화) 후 참가자들에게 경과 공유
  • 추가적인 문제가 발생하지 않도록 지속적인 모니터링

아래의 기존 리더보드는 참고만 부탁드립니다. (2021년 11월 17일 19시 기준)
기존리더보드_1117_19시

대회 운영에 있어 오류가 재발생하지 않도록 보다 세심한 검토를 약속드리며,
진심으로 사과의 말씀 드립니다.

감사합니다.
데이콘 드림.

Metadata

Metadata

Assignees

Type

No type

Projects

No projects

Milestone

No milestone

Relationships

None yet

Development

No branches or pull requests

Issue actions