Styxis
Company
Knowledge

Doris schema 변경 중 load 완료는 VISIBLE까지 확인한다

schema 변경 중 적재 완료를 알리기 전에 COMMITTED 상태를 visible key와 연결한다. timeout만으로 재적재하지 말고 transaction과 version trace로 대기 상태를 조사한다.

commit과 소비자 완료를 나눈다

schema 변경 중 commit 응답과 독자가 보는 완료는 다른 상태다. 기대 업무 key와 실제 visible snapshot을 Truthound Core로 대조한 뒤 소비자에게 완료 신호를 보낼 수 있다. [1, 2, 3]

shadow version을 둘러싼 대기

Doris #69410은 MoW schema change와 load가 shadow tablet version 공백·WAITING_TXN의 순환을 만드는 재현을 보고한다. 후속 검토는 영구 손실보다 진행 불능 문제로 범위를 한정한다. 이 순환에 restart가 반드시 필요한 것도 아니다. [1]

transaction과 조회 경계를 연결한다

ALTER watershed와 load별 COMMITTED·VISIBLE, partition version과 조회 snapshot을 연결한다. 승인 시점에 기대 key가 보이는지 확인한다. visible timeout만 보고 COMMITTED load를 무조건 다시 쓰면 중복 위험을 따로 만든다. [1, 3]

102와 202의 가시성 조건

원문에서 완료 대상으로 정한 key는 102와 202다. visible 기대 집합 102|202가 반환되면 두 load의 조건을 통과한다. empty는 COMMITTED 응답이 있어도 실패하며 소비자에게 보이는 완료가 아니다. [1, 3]

집합 검사 앞의 운영 입력

Truthound Core Python SDK 3.3.2의 DistinctValuesEqualSetValidator는 내보낸 key를 기대 집합과 비교한다. 관측 경계와 transaction trace는 운영자가 제공한다. SDK는 ALTER를 취소하거나 FE 보호 설정을 해제하지 않는다. [1, 2, 3]

복구 뒤 같은 transaction을 다시 본다

운영자가 지원 절차와 허용 schema 작업 범위를 검토한 뒤 같은 transaction ID의 VISIBLE을 확인한다. 보고의 임시 복구 설정을 영구 해결책으로 검증 없이 두지 않는다. [1, 3]

지연과 순환은 추가 증거가 필요하다

경과시간과 version trace로 정상 지연과 대기 순환을 구별한다. 나중 snapshot의 통과는 현재 수용 조건을 해결할 수 있지만 이전 지연의 정확한 원인까지 확정하지 않는다. [1, 3]

적용 조건

load transaction·ALTER watershed·승인 query snapshot을 연결한다.

대안

지원 복구 절차 뒤 같은 transaction의 VISIBLE을 확인한다.

한계

  • COMMITTED는 abort나 영구 손실을 뜻하지 않으며 시간·version trace가 더 필요하다.

근거

사건 확인일
대상 확인일
수정일