블랙박스 고의사고 분석 대회, 라벨 규칙을 판정 스킬 카드로 고정해야 하는 이유 | DAKER 커뮤니티
블랙박스 영상 기반 대회에서는 모델 성능만큼이나 라벨 기준의 일관성이 중요합니다. 규칙이 채팅에 흩어져 있으면 같은 장면도 날마다 다르게 해석될 수 있고, 그 차이는 점수 이전에 데이터 자체의 흔들림으로 이어집니다.
특히 팀 병합과 제출 일정이 가까워질수록, 누가 봐도 같은 기준으로 판정할 수 있는 장치가 필요합니다. 그래서 지금 필요한 것은 대화 속 합의가 아니라, 다시 꺼내도 같은 판단을 재현할 수 있는 판정 스킬 카드입니다.
블랙박스 고의사고 분석 대회란, 블랙박스 영상 기반으로 고의사고를 판별하는 AI 모델을 만드는 DACON 경진대회를 의미합니다. 2026년 9월 14일 기준 팀 병합은 9월 23일 23:59, 제출은 9월 29일 10:00입니다. 판정 스킬 카드란, 라벨 정의·경계 사례·재현 절차를 한 장에 담아 같은 규칙으로 다시 돌리게 하는 체크 카드를 의미합니다.
왜 지금 판정 기준을 고정해야 할까
영상 판정은 규칙이 조금만 흔들려도 결과가 크게 달라집니다. 이때 문제는 단순한 의견 차이가 아니라, 학습에 쓰이는 라벨 자체가 불안정해진다는 점입니다. 어제는 고의사고로 본 장면을 오늘은 제외한다면, 모델 실험 결과를 비교하는 일도 어려워집니다.
Skill Creator식 접근은 이런 반복 작업을 재실행 가능한 스킬로 묶어 팀의 판단 기준을 남기는 방식입니다. 병합이 9월 23일이라면, 팀을 합치기 전에 같은 경계 사례를 같은 언어로 설명하고 같은 결론으로 판정할 수 있어야 합니다.
라벨 규칙을 채팅에 남기지 말고, 재현 가능한 판정 스킬 카드로 고정합니다.
채팅에만 남은 규칙은 검색이 어렵고, 어느 버전이 최신인지도 분명하지 않습니다. 반면 경계 사례가 포함된 카드 한 장이 있으면 신규 멤버가 들어와도 같은 기준으로 판단하기가 훨씬 쉬워집니다. 그래서 새 모델 실험에 앞서 카드 초안을 먼저 만드는 것이 좋습니다.
판정 스킬 카드는 무엇을 담아야 하나
오늘 기준의 판정 스킬 카드는 코드가 아니라 문서입니다. 핵심은 라벨 정의, 제외 조건, 경계 사례, 재현 절차를 한 장 안에 담아 두는 데 있습니다. 길게 설명하기보다, 실제 판정에 바로 쓸 수 있을 정도로 짧고 분명해야 합니다.
예를 들어 라벨 정의와 제외 조건은 네 줄 이하로 정리하면 됩니다. 여기에 경계 사례 1건의 영상 구간과 그 장면을 그렇게 판정한 이유를 함께 적어 두면, 추상적인 규칙이 실제 판단 기준으로 바뀝니다.
팀에서 바로 써볼 수 있는 적용 흐름
적용 방식도 복잡할 필요는 없습니다. 먼저 라벨 정의와 제외 조건을 짧게 적고, 다음으로 경계 사례 1건을 골라 영상 구간과 판정 이유를 붙입니다. 그 뒤 같은 구간을 다른 팀원이 다시 판정해 일치하는지 확인하면 됩니다.
판정이 일치하면 그 카드를 잠그고, 이후 실험 로그에 카드 버전을 함께 적어 두는 방식으로 연결할 수 있습니다. 이렇게 해야 나중에 결과를 되짚을 때 어떤 기준으로 라벨링했는지 다시 확인할 수 있습니다.
병합 전에 같은 판정 기준이 있어야 합친 데이터가 덜 깨집니다.
채팅 규칙을 문서로 옮길 때 주의할 점
기존에 채팅으로만 오간 규칙이 있다면, 그대로 복사해 두는 것만으로는 충분하지 않습니다. 복사한 뒤 버전과 날짜를 넣고, 채팅과 분리된 기준 문서로 관리하는 것이 좋습니다. 그래야 이후 수정이 생겨도 어떤 시점의 규칙을 썼는지 추적할 수 있습니다.
또한 판정 스킬 카드는 설명을 늘리는 문서가 아니라, 같은 장면을 다시 봤을 때 같은 결론에 도달하게 만드는 문서여야 합니다. 그래서 경계 사례를 반드시 포함하는 편이 효과적입니다.
코믹 해설로 보면 더 쉬운 흐름
이 내용을 4~6컷으로 압축하면 흐름은 분명합니다. 채팅에만 규칙이 남아 있어 판정이 엇갈리고, 그 문제를 해결하기 위해 판정 스킬 카드를 만들고, 경계 사례를 다시 검증한 뒤, 마지막으로 버전을 고정하는 순서입니다. 헤드라인은 판정 스킬 카드입니다.
참고 자료
블랙박스 고의사고 분석 대회 공식 페이지
DAKER 대회 디렉터리
여러분의 팀에서는 라벨 규칙을 어떤 방식으로 남기고 있는지 함께 이야기해 봐도 좋겠습니다.