Styxis
Company
Knowledge

Doris net-zero rewrite 뒤에도 offset snapshot의 key는 남아야 한다

동일값 재쓰기라도 과거 offset의 snapshot에는 이전 행이 필요할 수 있다. offset에 고정한 key 집합으로 net-delta 제거의 영향을 검사하되 미실행 시나리오라는 보고 범위를 유지한다.

변경 없음과 과거 부재는 다르다

net change가 없다는 결과는 과거 offset에 key가 없었다는 뜻이 아니다. 독립 보존한 offset image를 준비하면 Truthound Core로 snapshot 집합을 대조할 수 있다. [1, 2, 3]

MIN_DELTA 제거와 재구성의 경계

Doris #70277은 최신 row가 offset보다 새롭고 MIN_DELTA도 같은 endpoint를 제거하면 key를 복원하지 못하는 MoW 경로를 분석한다. SQL·IVM refresh는 실행하지 않았다. join-IVM 영향은 가능한 경로이며 측정 결과가 아니다. [1]

이전 image를 기준으로 고정한다

소비 offset에 있던 key를 고정하고 동일값 재쓰기를 한 뒤 @snapshot을 비교한다. 일반 net-delta 제거를 historical before가 불필요하다는 근거로 쓰지 않는다. [1, 3]

같은 값을 다시 써도 과거는 둘이다

설명용 offset에는 (1,a),(2,b)가 있다. 이후 (1,a)를 다시 써도 기대 key는 1|2다. 이는 통과하고 2만 남으면 실패다. a→b→a처럼 돌아온 값도 같은 과거 구분이 필요하다. [1, 3]

정렬한 offset과 기대 집합의 역할

Truthound Core Python SDK 3.3.2의 DistinctValuesEqualSetValidator는 추출 key를 expected_values와 대조한다. offset 정렬과 이전 image는 운영자 입력이다. SDK는 snapshot rebuild나 IVM join을 수리하지 않는다. [1, 2, 3]

net 소비와 복원 시험을 나눈다

delete/reinsert와 value round trip을 포함해 두 소비 목적을 나눠 시험한다. 후속 검토는 stream type 변경으로 hard-coded scan을 우회하지 못하고 DETAIL만으로도 완전 대안이 아니라고 한정한다. [1, 3]

개념 반례와 실행 사실을 구분한다

수용 시험을 준비하면서도 원문 시나리오가 미실행이라는 범위를 보존한다. 명확한 개념 반례는 유용하지만 실제 배포에서 key 손실을 이미 관측했다고 주장하지 않는다. [1, 3]

적용 조건

소비 offset의 독립 image와 동일값 재쓰기 뒤 snapshot key를 준비한다.

대안

net-change 소비와 snapshot 복원 시험을 따로 둔다.

한계

  • 소스 분석의 IVM 가능 경로를 실행된 refresh 결과로 전하지 않는다.

근거

사건 확인일
대상 확인일
수정일