시점 정합성(PIT)은 어떤 결정을 다시 계산할 때 그 시점에 실제로 관측할 수 있었던 값만 쓰는 성질이다. 오늘 내려받은 과거 데이터는 그동안 정정됐을 수 있어서, 아무 조치 없이 쓰면 미래 정보가 과거 결정에 섞인다. 이 성질은 분석 단계가 아니라 수집 단계에서 지켜야 한다.
핵심
- 과거 데이터는 바뀐다. 공개 통계도 소급 정정되고 일부는 원자료가 지워져 되돌릴 수 없으며, backfill 파일명의 날짜는 공개 시점의 증거가 아니다. 응답 버전, 지표 정의 버전, payload 해시, backfill 여부를 남겨야 재수신과 새 개정본을 가른다. 소급 정정은 봇 재분류 같은 이유로도 일어난다. 데이터 계약을 통과해도 예측력은 따로 검증한다.
- 시각은 하나가 아니다. 사건이 일어난 시각, 값이 공개된 시각, 내가 받은 시각은 서로 다르고, 공급자의
date하나가 두 의미를 겸하기도 한다. 셋을 별도 타입으로 두면 섞어 쓰는 실수가 컴파일 오류가 되고, 모르는 시각은 추정하지 말고 unknown으로 둔다. 블록 헤더 시각처럼 생산자가 적어 넣은 시각은 내 수신 시각을 대신하지 못한다. - 없음은 0이 아니다. 노드 재시작이나 캐시 재구축 중의 빈 응답을 0으로 채우면 신호가 수집 장애를 학습한다. 관측 모집단과 캡처 공백을 필드로 남겨 나중에 걸러 낸다. 정책이 다른 노드에서 온 두 표시값을 같은 모집단의 분자와 분모로 가정하지 않고, 재시작 여부도 필드로 남긴다.
- 같은 키에 다른 값이 오면 덮어쓰지 않는다. 같은 값이면 아무것도 하지 않고, 다르면 기존 행을 둔 채 충돌로 기록한다. 마지막 쓰기 우선은 원천의 정정과 수집 버그를 구별할 수 없게 만들고, 재시작은 다시 적용이 아니라 대조로 한다. 충돌을 남겨 두면 나중에 사람이 어느 쪽이 맞는지 판단할 수 있다. 원천이 사후 정정될 수 있는 외부 데이터와 감사 추적이 필요한 원장성 데이터에 맞는 규칙이다.