Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

[공지] finall_stt_3 평가 오류 수정 및 리더보드 초기화 예정 안내 #16

Open
DaconHoneyBee opened this issue Nov 17, 2021 · 2 comments
Assignees
Labels
공지사항 공지사항 필독! 필독!

Comments

@DaconHoneyBee
Copy link
Contributor

DaconHoneyBee commented Nov 17, 2021

안녕하세요, 한국어 음성·자연어 인공지능 경진대회 대화요약 부문 참가자 여러분.
2021 훈민정음 한국어 음성 자연어 인공지능 경진대회 운영진 데이콘입니다.

음성인식 final_stt_3의 평가 과정에서 문제가 발견되어, 아래와 같이 문제 해결 과정에 대해 공유드립니다.


1. 문제상황

  • 문제: final_stt_3의 리더보드 점수가 다른 task에 비해 score 개선이 안되는 현상 파악
  • 원인: 평가코드(데이터처리 + 평가산식) 중 데이터처리 코드에 제출 파일과 정답 파일의 인덱스 매칭이 제대로 이루어지지 않음

2. 조치 예정 내용

3. 사후 조치

  • 조치 완료(코드 수정 및 리더보드 초기화) 후 참가자들에게 경과 공유
  • 추가적인 문제가 발생하지 않도록 지속적인 모니터링

아래의 기존 리더보드는 참고만 부탁드립니다. (2021년 11월 17일 19시 기준)
기존리더보드_1117_19시

대회 운영에 있어 오류가 재발생하지 않도록 보다 세심한 검토를 약속드리며,
진심으로 사과의 말씀 드립니다.

감사합니다.
데이콘 드림.

@DaconHoneyBee
Copy link
Contributor Author

@hunminjeongeum-competition-final-2021/team-1

@DaconHoneyBee DaconHoneyBee pinned this issue Nov 17, 2021
@DaconHoneyBee
Copy link
Contributor Author

2021년 11월 17일 20시 - 데이터 처리 코드 수정 및 리더보드 초기화가 완료되었습니다.

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
공지사항 공지사항 필독! 필독!
Projects
None yet
Development

No branches or pull requests

1 participant