Styxis
Company
Knowledge

DuckDB INSERT OR IGNORE 전에 어느 행을 남길지 정해야 한다

여러 UNIQUE 제약이 얽힌 배치에서는 적재 성공보다 어떤 키가 살아남았는지가 중요하다. 승자 정책을 먼저 정하고 그 키 집합으로 INSERT OR IGNORE 결과를 승인한다.

충돌 무시는 선택 정책이 아니다

여러 UNIQUE 제약이 얽힌 입력에서는 충돌 무시가 업무상 승자를 정해 주지 않는다. 적재 전에 승인한 선택 규칙이 있어야 Truthound Core의 집합 검사도 실제 생존 키를 의미 있게 대조할 수 있다. [1, 2, 3]

병렬 실행에 따라 달라진 생존 행

DuckDB #28288은 입력 행들이 서로 다른 UNIQUE 키로 충돌할 때 스레드 수와 실행에 따라 생존 행이 달라질 수 있다고 보고한다. 단일 스레드의 첫 행 결과와 병렬 경로를 구분한 제보이며 이 글의 재현 결과는 아니다. [1]

원본 순서와 모든 키를 보존한다

원본 순서와 모든 UNIQUE 키를 남겨 충돌 그룹을 만들고 승자 규칙을 명시한다. 그 규칙으로 확정한 키 집합을 적재 결과와 대조한다. 행 수가 같아도 다른 고객이나 사건이 남았다면 같은 결과가 아니다. [1, 3]

첫 행 우선이라는 설명용 계약

원문의 세 행 충돌 사슬에 설명용 첫 입력 행 우선 정책을 적용한다. 첫 행 id=1이므로 생존 키 1은 통과한다. 키 2는 반환 행 수가 같아도 실패한다. 첫 행 우선은 이 예제의 업무 규칙이며 엔진의 보장으로 주장하지 않는다. [1, 3]

확정한 기대 집합을 제공한다

Truthound Core Python SDK 3.3.2의 DistinctValuesEqualSetValidator는 선택 열의 고유값을 expected_values와 대조한다. 승자 선정이 끝난 실제 키 열을 제공해야 한다. SDK는 병렬 집계를 결정적으로 바꾸거나 올바른 업무 승자를 선택하지 않는다. [1, 2, 3]

모호한 배치를 거절하는 대안

승인한 우선순위와 tie-break로 충돌을 사전 해소하거나 모호한 배치를 거절한다. 제외한 행과 이유도 보존하면 정책이 바뀌었을 때 엔진이 무엇을 버렸는지 추측할 필요가 줄어든다. [1, 3]

개수 대신 선택 근거를 인계한다

수용 기록에는 원본 순번, 제약별 키, 선택 키와 이유를 함께 둔다. 그러면 생존 행의 변화를 성공한 적재의 사소한 차이로 넘기지 않고 실제 정책 차이로 설명할 수 있다. [1, 3]

적용 조건

입력 순서와 모든 UNIQUE 키로 승인 승자 집합을 먼저 만든다.

대안

우선순위·tie-break로 사전 해소하거나 모호한 배치를 거절한다.

한계

  • SDK는 승자 정책을 정하거나 병렬 first 집계를 결정적으로 만들지 않는다.

근거

사건 확인일
대상 확인일
수정일