Polars strict struct cast: 성공 여부 대신 필드 집합과 순서를 확인하기
strict 옵션이 실행 경로마다 같은 필드 변경을 거절한다고 가정하지 말고 중첩 스키마의 실제 변화를 대조한다.
옵션 이름이 스키마 계약을 대신하지 않는다
strict라는 옵션 이름 대신 승인한 필드 목록과 순서를 명시적 계약으로 유지해야 한다. 필드 추가가 허용되는 업무와 정확히 같은 구조만 받는 업무는 다르다. 변환 성공이라는 상태만으로 그 둘을 구별할 수 없다. [1, 2, 3]
Series와 표현식 cast의 다른 경계
Polars 이슈 30471은 strict struct cast에서 필드 추가나 순서 변경을 Series.cast는 거절하지만 표현식 경로는 허용하는 후속 사례를 보고한다. 필드 삭제·이름 변경을 다룬 앞선 수정과도 구별한다. 이번 범위는 아직 남은 추가·순서 조건이며 같은 프로젝트의 모든 cast 문제가 새 사건인 것은 아니다. [1]
중첩 경로와 위치를 펼쳐 인계한다
변환 전후 중첩 필드 목록을 경로와 순서로 펼쳐 비교하고, 승인되지 않은 추가 필드가 NULL로 생기는 것을 스키마 진화 성공으로 처리하지 않는다. 허용한 변화는 승인 revision으로 기록하고 타입과 순서 요구도 별도로 남긴다. [1, 3]
필드 2개 계약에 3개가 들어온 경우
설명용 승인 struct는 a와 b의 2개 필드를 가진다. 변환 뒤에도 그 2개이면 개수 조건은 통과한다. c가 추가되어 3개가 되면 실패하며 c가 NULL이라는 사실은 추가를 승인한 근거가 아니다. 같은 2개라도 a가 다른 이름으로 바뀌거나 순서가 뒤집히는 경우는 개수만으로 찾을 수 없으므로 경로 집합과 위치를 함께 확인한다. [1, 3]
Truthound의 집합 검사는 순서 검사와 다르다
Truthound Core의 DistinctValuesEqualSetValidator로 외부에서 펼친 필드 경로 열의 고유값이 승인 집합과 같은지 확인할 수 있다. 이 역할은 스키마 인수의 한 부분이며 필드 수·반복·순서는 별도로 대조한다. 최상위 표의 검사가 nested Arrow 메타데이터까지 자동으로 보존한다고 가정하지 않는다. 승인된 목록과 순서로 struct를 명시적으로 재구성한 대안도 같은 경계에서 시험한다. [1, 2, 3]
적용 조건
같은 struct의 struct_path·field_position·field_name·declared_type을 펼치고 승인한 경로 목록과 순서를 원본 계약에서 보존한다.
대안
field 목록과 순서를 승인한 명시적 struct 재구성을 사용한다.
한계
Truthound의 최상위 스키마 검사가 모든 nested Arrow 메타데이터를 자동 보존한다고 가정하지 않는다.
근거
- 사건 확인일
- 대상 확인일
- 수정일
