Styxis
Company
Knowledge

strict=False 날짜 파싱에서 전체 형식 추론 실패를 구분하기

잘못된 한 행과 형식 하나도 찾지 못한 열은 다른 상태다. 명시 format과 실제 완료 상태를 함께 남긴다.

행별 실패 앞의 추론 단계

행별 파싱 실패와 형식 추론 자체의 실패를 구분하고 승인한 명시 format으로 완료 상태와 결측 표현을 따로 검사해야 한다. 비엄격 옵션이 어느 단계의 실패를 허용하는지 팀이 다르게 이해하면 예외를 무자료로 기록할 수 있다. 완료된 null 결과와 중단된 실행을 나눠 전달한다. 파싱이 완료된 뒤 만든 결측 플래그 대조표를 Truthound에 연결하는 구성이 맞는다. [1, 2, 3]

제보자가 좁힌 all-invalid 조건

Polars #29420은 format 없이 strict=False로 strptime할 때 전체 입력이 bad date면 null 대신 형식 추론 오류가 나는 사례를 보고한다. 제보자는 후속에서 한 날짜라도 형식을 추론할 수 있으면 다른 잘못된 행은 null이 되며, 오류는 열 전체에서 형식을 하나도 얻지 못한 경우라고 정정했다. 잘못된 날짜 하나가 언제나 전체 실행을 실패시킨다는 뜻은 아니다. [1]

실패를 null 성공으로 가장하지 않는다

입력 담당자는 허용 날짜 형식을 정하고 오류 상태·원문·결측 판정을 남긴다. format 추론 예외를 정상 null로 가장하지 말고 명시 format 경로를 시험한다. 파싱 완료 여부는 먼저 별도로 확인하고 실패한 실행에는 null 플래그 성공값을 만들지 않는다. 원문·명시 format을 보존한다. [1, 3]

bad date의 독립 결측 기준

설명용 명시 format은 %Y-%m-%d이며 bad date는 그 형식 밖이다. 비엄격 변환이 성공적으로 완료된 뒤 actual_null_flag가 true이면 기대 결측 상태와 같아 통과하고 false이면 실패한다. 실행이 예외로 끝났다면 정상 변환의 플래그를 만들어 비교하지 않는다. [1, 3]

완료 뒤 플래그를 비교한다

Truthound Python SDK 3.3.2의 ColumnPairValidator는 운영자가 완료된 파싱에서 만든 actual_null_flag_after_success와 required_null_flag를 비교한다. parser 실행·오류 분류는 외부 절차다. Core는 성공한 외부 변환의 결측 플래그를 비교하며 parser 예외를 처리하지 않는다. 모든 날짜 format을 자동 추론하거나 유효성을 보증하지 않는다. [1, 2, 3]

허용 형식별 분류 대안

명시 format을 사용하거나 허용 형식별 사전 분류 후 각각 파싱하고 실패 원문을 별도 보관한다. 같은 연산·자료형·실행 엔진에서 row_id, actual_null_flag_after_success, required_null_flag 표의 계약을 이미 회귀 시험하면 중복 대사의 이점은 작다. [1, 3]

적용 조건

파싱 완료 여부는 먼저 별도로 확인하고 실패한 실행에는 null 플래그 성공값을 만들지 않는다. 원문·명시 format을 보존한다.

대안

명시 format을 사용하거나 허용 형식별 사전 분류 후 각각 파싱하고 실패 원문을 별도 보관한다.

한계

  • Core는 성공한 외부 변환의 결측 플래그를 비교하며 parser 예외를 처리하지 않는다. 모든 날짜 format을 자동 추론하거나 유효성을 보증하지 않는다.

근거

사건 확인일
대상 확인일
수정일