Styxis
Company
Knowledge

Doris UTC Z 파싱에서는 VARIANT 필드 존재도 확인한다

Zulu timestamp 적재는 행 성공 뒤에도 typed VARIANT 경로의 존재와 비결측을 확인한다. 변환 당시의 BE 환경을 남겨 사후 host 상태나 compaction 관측을 원인 증거로 확대하지 않는다.

정상 적재 건수가 필드를 보장하지 않는다

필수 typed path는 load count와 별도로 보존을 확인해야 한다. Z·+00:00 대조군의 존재·비결측 flag를 준비해 Truthound Core로 비교할 수 있다. [1, 2, 3]

downstream 관측과 master 분석을 나눈다

Doris #69326은 downstream branch-3.1의 필드 누락과 master의 Zulu alias 의존을 분석한다. master runtime 재현과 compaction 원인은 확정되지 않았다. 후속 검토는 query session보다 실제 storage conversion context를 기록하라고 한정한다. [1]

typed 값과 전체 JSON을 함께 본다

raw timestamp, row ID, BE 환경, typed-path 존재와 비결측을 연결한다. BE column 변환에서 Z와 +00:00을 대조하고 typed 접근과 전체 VARIANT 출력을 함께 본다. 행 성공과 필드 제거는 동시에 가능하다. [1, 3]

유효 UTC 입력의 존재 조건

설명용 필수 created_at=2015-01-01T03:47:41Z의 존재·비결측 결합 상태는 true여야 한다. true는 통과하고 false는 포함 행이 적재돼도 실패한다. 모든 nullable 시각을 거절하라는 규칙은 아니다. [1, 3]

필드 flag를 준비한 뒤 검사한다

Truthound Core Python SDK 3.3.2의 ColumnPairValidator는 비결측 상태 flag를 독립 필수 상태와 대조한다. 추출과 변환 context는 운영자가 준다. SDK가 tzdata를 설치하거나 삭제 필드를 복구하지 않는다. [1, 2, 3]

원시 메시지로 재추출 범위를 정한다

격리 환경에서 두 시각 표기를 대조하고 targeted 재추출을 위해 raw 메시지를 보존한다. parser 수정은 미래 실패를 막을 뿐 이미 버린 값을 다시 만들지 못한다. [1, 3]

인과의 미확인 범위를 남긴다

사후 host 파일만으로 당시 process cache를 알 수 없다. compaction 뒤에 관측했다는 결과도 compaction 원인의 증거는 아니다. 이 차이를 지켜야 조사 가설이 실행 사실로 바뀌지 않는다. [1, 3]

적용 조건

BE 변환 context와 Z/+00:00의 typed·full-VARIANT 상태를 준비한다.

대안

격리 대조 뒤 원시 메시지에서 영향 필드를 재추출한다.

한계

  • downstream 관측과 master 소스 가설·compaction 인과를 구분한다.

근거

사건 확인일
대상 확인일
수정일