PostgreSQL publication 열이 어긋났다면: 재시작 전 구간까지 대사하기
재시작이 증상을 없애도 snapshot 시작부터 재시작 전까지의 값 배치가 옳았다는 증거는 아니다. Relation의 공개 열 순서와 refresh 후 해석 순서를 비교해야 한다.
증상이 멈춘 뒤 남는 잘못된 구간
재시작이 증상을 없애도 snapshot 시작부터 재시작 전까지의 값 배치가 옳았다는 증거는 아니다. Relation의 공개 열 순서와 refresh 후 해석 순서를 비교해야 한다. timestamp 형식이 맞아도 값이 다른 열에 쓰였을 수 있다. Truthound에 넘길 대사표는 값의 타입보다 먼저 tuple 위치와 원천 열의 대응을 보존해야 한다. [1, 2, 3]
재현을 좁힌 세션 조건
Debezium PostgreSQL #2952는 publication column list를 쓰는 세션에서 incremental snapshot의 schema refresh 뒤 tuple 위치가 전체 테이블 열에 맞춰지는 제보다. 댓글은 이전에 Relation을 받은 세션에서 snapshot을 시작하는 조건으로 재현을 좁혔다. 최초 snapshot만 실행한 세션과 이미 Relation을 받은 세션은 같은 대조군이 아니다. 재시작 효과는 원문 관측이며 이 글에서 connector를 실행한 결과가 아니다. [1]
세 단계로 만든 작은 시험
사전 INSERT로 Relation을 수신한 뒤 snapshot과 후속 INSERT를 수행하는 작은 시험을 만들고, 필드별 원천 대응이 어긋난 구간의 배포를 중단한다. publication column list와 제외 열을 고정하고 동일 세션의 Relation, refresh, 후속 tuple을 수집한다. 재시작 뒤 새 행만 정상이라는 이유로 앞선 구간을 대사에서 빼지 않는다. [1, 3]
세 번째 값의 주인은 누구인가
설명용 publication 순서를 id,a,created_at으로 정하고 원본 테이블에는 그 사이 excluded_flag가 있다고 둔다. tuple의 세 번째 값은 publication 정의에 따라 created_at에 귀속돼야 한다. decoder가 created_at을 가리키면 위치 대응 조건은 충족한다. excluded_flag를 가리키면 값이 우연히 형식 검사를 통과해도 실패다. 이 예는 논리 계약을 보여 주며 실제 PostgreSQL 실행값은 아니다. [1, 3]
타입 검사 앞에 둘 대응 검사
Truthound Core Python SDK 3.3.2의 ColumnPairValidator로 publication_column_name과 decoder_column_name을 relationship="=="로 비교할 수 있다. 운영자가 tuple 위치를 해독해 비결측 이름을 준비해야 하며, 알 수 없는 매핑은 별도로 격리한다. SDK가 pgoutput 세션을 갱신하거나 과거 행을 재생하지는 않는다. [1, 2, 3]
재시작과 복구를 나누기
connector 재시작은 현재 Relation을 다시 받는 대안이지만 이미 잘못 기록한 값의 복구와 다르다. 해당 session 구간을 원본 키로 다시 읽고 필드별 값을 대사한다. snapshot 이전 Relation 수신이 없던 환경은 후속 재현 조건과 구별하며, 실제 수정판의 적용 여부도 버전별로 확인한다. [1, 3]
적용 조건
publication column list와 실제 Relation·refresh 관측을 같은 세션에 묶고 필드 제외 설정도 보존한다.
대안
connector 재시작 뒤 해당 구간을 원본과 대사하고 확인된 upstream 수정본을 별도 시험한다.
한계
Truthound는 pgoutput 상태를 갱신하거나 잘못 기록된 구간을 자동 재생하지 않는다. 보고의 의심 원인과 후속 재현 조건을 구별한다.
근거
- 사건 확인일
- 대상 확인일
- 수정일
