SQL Server when_needed: NULL LSN을 복구 지점으로 승인하지 않기
offset 레코드가 있다는 사실과 재개 가능한 commit LSN이 있다는 사실은 다르다. CDC가 재생성된 상황의 NULL LSN을 유효한 복구 지점으로 승인하면 안 된다.
offset 행이 가리는 미확인 지점
offset 레코드가 있다는 사실과 재개 가능한 commit LSN이 있다는 사실은 다르다. CDC가 재생성된 상황의 NULL LSN을 유효한 복구 지점으로 승인하면 안 된다. Truthound가 비교할 대상은 offset의 존재 자체보다 요구된 복구 경로와 실제 선택이다. 유효성을 알 수 없는 값을 임의 정상 LSN으로 채우면 사라진 초기 자료를 가릴 수 있다. [1, 2, 3]
시험 실패와 원인 추정을 구분하기
Debezium SQL Server #2986은 when_needed 통합시험에서 snapshot이 NULL commit LSN을 남긴 다음 CDC 재생성 뒤 필요한 snapshot을 생략한 로그를 보고한다. LSN 생성 시점에 대한 원인 두 가지는 원문도 미확인으로 표시한다. 원문의 failing integration test와 logging은 복구 경로 관측의 근거다. 두 가지 미확인 LSN 생성 설명을 확정 원인이나 실제 고객 피해 규모로 표현하지 않는다. [1]
필요한 snapshot을 따로 승인하기
CDC 재생성 이후 유효한 최소 LSN이 확인됐는데 저장 commit LSN이 NULL인 실행을 분리하고, 실제 재snapshot과 원본 행 대사가 끝날 때까지 복구 완료를 표시하지 않는다. snapshot.mode=when_needed의 정확한 판본과 CDC 재생성 이력을 기록한다. 요구 선택과 실제 선택을 대조한 뒤 실행 시작·원본 키·착지 결과의 확인으로 이어 간다. [1, 3]
한 번의 선택이 뜻하는 범위
설명용 복구 계약은 사용할 수 있는 LSN이 없을 때 초기 자료를 다시 확보하도록 정한다. NULL LSN의 요구 snapshot 선택은 1이다. 실제 선택 1이면 요구 경로 선택 조건만 충족한다. 0이면 저장 offset만 보고 snapshot을 생략했는지 조사한다. 1도 snapshot의 행 완전성이나 완료를 증명하지 않으므로 source 대사는 계속 필요하다. [1, 3]
요구와 실제 경로의 일치 검사
Truthound Core Python SDK 3.3.2의 ColumnPairValidator로 required_snapshot_flag와 selected_snapshot_flag를 relationship="=="로 대조한다. 운영자는 NULL 상태와 가용한 최소 LSN을 확인한 후 비결측 0 또는 1의 정책 플래그를 준비한다. SDK는 SQL Server 로그 보존이나 connector offset을 수정하지 않는다. [1, 2, 3]
강제 snapshot도 조건부 선택
지원 수정판과 운영 복구 절차로 재snapshot을 수행한 뒤 원본 행을 대사한다. 유효한 재개 LSN이 존재하는 경우까지 항상 snapshot을 강제하면 불필요한 중복과 부하를 만들 수 있다. 확인할 수 없는 원본 범위는 복구 완료가 아니라 미확인으로 남긴다. [1, 3]
적용 조건
snapshot.mode=when_needed의 해당 버전 계약과 CDC 재생성 이력을 확인하며 유효한 원천 최소 LSN과 NULL 저장 상태를 구별한다.
대안
검증된 수정판과 운영 복구 절차로 snapshot을 재실행한다.
한계
Truthound는 SQL Server 로그 보존이나 offset을 수정하지 않는다. 테스트 실패의 손실 수를 실제 고객 피해로 일반화하지 않는다.
근거
- 사건 확인일
- 대상 확인일
- 수정일
