개발 이야기

고유번호 없는 경기, 같은 일정인지 어떻게 알았을까요?

브라우저에 보이는 야구 일정에서 신규·변경·중복을 구분하기 위해 내부 ID, 관측 이력과 첫 수집 기준선을 나눴어요.

사이트 공개일
기록 수정일
기술과 주제
Python · Django · PostgreSQL · 데이터 식별
이 글의 목차

공지 번호가 있던 수집기에서 출발했어요

공연 알림은 공지의 고유번호를 기준으로 새 글을 구분할 수 있었어요. 같은 번호를 다시 읽으면 기존 공지로 판단하고, 한 사용자에게 여러 키워드가 일치해도 하나의 알림만 만들면 됐어요.

야구 일정의 브라우저 수집에서는 같은 방식으로 사용할 원천 일정 번호가 없었어요. 화면에는 팀명, 날짜, 시간, 경기장 등이 있었지만 행 순서는 바뀔 수 있었어요. 같은 경기가 홈팀과 원정팀 페이지에 동시에 보이기도 했고요.

날짜와 팀명을 붙여 임시 번호를 만들기만 하면 끝날 것 같지만, 경기 시간이 바뀌면 새 경기로 오인할 수 있어요. 반대로 같은 날 같은 팀의 두 경기를 하나로 합칠 수도 있어요. 화면에서 본 내용과 시스템이 관리하는 경기의 정체성을 분리해야 했어요.

내부 ID는 유지하고 관측 내용을 쌓았어요

서버가 부여한 내부 ID를 일정의 영구 식별자로 사용했어요. 원천 번호가 없는 곳에 실제 번호처럼 보이는 값을 만들어 넣지는 않았어요.

화면에서 읽은 팀 조합·일시·경기장·명시된 더블헤더 차수 등은 별도의 관측 이력으로 남겨요. 이 정보로 만든 지문은 ‘어떤 모습으로 보였는가’를 비교하기 위한 값이에요. 일정 자체의 ID와 역할이 달라요.

업무 흐름

  1. 01화면의 일정 관측
  2. 02기존 지문·후보 대조
  3. 03기존 ID 연결 또는 신규 생성
  4. 04불분명하면 관리자 확인
업무 흐름 개념도

같은 날의 팀 조합과 후보가 유일하면 시간이나 장소가 바뀌어도 기존 경기의 갱신으로 처리해요. 이전 모습도 관측 이력에 남기므로 나중에 예전 표시가 다시 나와도 새로운 경기로 만들지 않아요. 예매 상태는 일정의 정체성을 정하는 지문에서 제외했어요.

같은 경기처럼 보여도 합치면 안 되는 경우

일반 경기는 여러 구단 페이지에 나타나도 하나로 연결해요. 하지만 특별석은 별도로 판매되는 대상일 수 있어요. 특별석 목록마다 구분 그룹을 두어 일반 경기나 다른 특별석과 합쳐지지 않게 했어요.

이후 응원전을 추가할 때도 같은 원칙을 적용했어요. 같은 날짜와 대진이어도 실제 경기와 응원전은 다른 행사예요. 행사 유형과 예매 구단을 구분에 포함했어요.

  • 같은 일반 경기가 다른 구단 화면에도 나타나면 기존 일정에 연결해요.
  • 같은 날 후보가 유일하고 시간·구장만 바뀌면 ID를 유지하며 내용을 갱신해요.
  • 특별석과 응원전은 일반 경기와 별도로 식별해요.
  • 미래 경기의 날짜 이동이 의심되면 임의로 신규 확정하지 않고 보류해요.
  • 같은 날 복수 경기인데 차수 표시가 없으면 관리자 확인을 기다려요.

공백과 대소문자를 정리하는 처리는 있었지만, 팀 별칭을 추정하는 사전은 넣지 않았어요. 비슷해 보인다는 이유로 다른 팀이나 경기를 연결하지 않도록 한 거예요.

첫 수집은 알림이 아니라 기준선이에요

처음 연결한 페이지에는 이미 공개된 일정이 있을 수 있어요. 데이터베이스에 없다는 이유만으로 모두 새 소식으로 보내면 가입자에게 과거 일정이 한꺼번에 전달돼요.

그래서 페이지별 첫 정상 목록은 기준 데이터로 저장하고 발송하지 않았어요. 이후 신규로 확정된 일정부터 키워드를 평가해요. 처음 관측했을 때 기준 데이터였던 보류 건을 관리자가 나중에 신규 일정으로 확정해도, 그 처리 시점만 보고 소급 발송하지 않아요.

빈 화면도 신중히 다뤘어요. 로딩 실패로 비어 있는 화면과 정상적으로 일정이 없는 화면은 달라요. 정상 빈 목록이 확인된 경우에만 기준선으로 인정해야, 나중에 처음 올라온 일정을 새 소식으로 판단할 수 있어요.

자동 판단의 끝에 확인 경로를 남겼어요

관리자는 보류된 관측을 기존 일정에 연결하거나, 별도의 신규 일정으로 확정하거나, 무시할 수 있어요. 처리한 사람과 시각을 남기며 신규 확정의 알림 평가도 반복하지 않아요.

개발 당시 테스트에서는 행 순서 변경, 시간·구장 변경 후 예전 표시로 복귀, 다른 구단 페이지의 중복, 더블헤더, 날짜 이동과 늦게 도착한 관측을 확인했어요. 일정·관측 이력·알림 저장 중 오류가 나면 함께 되돌아가는지도 검사했고요.

화면 정보만으로 모든 경기의 동일성을 완벽히 판별할 수는 없어요. 특히 날짜가 옮겨지거나 구분 표시가 없는 일정은 근거가 부족할 수 있어요. 이 구조의 핵심은 억지로 답을 만드는 대신, 확실한 갱신과 확인이 필요한 후보를 구분해 두는 데 있어요.