Truthound · 전체 콘텐츠 · 15/24
공개 사건을 근거로 데이터 계약·검사 입력·한계를 설명하는 Truthound Core 검증 실무 자료
480 편
Parquet projection 뒤 Dask 배열 전환: partition과 길이 벡터의 단위 맞추기
projection 후 실행 그래프가 partition을 합칠 수 있으므로 선언 partition 수와 실제 길이 벡터의 소유 단위를 맞춰야 한다.
Dask object 열의 True: 같은 글자와 같은 Boolean 상태는 다르다
문자 표기보다 원래 값의 타입과 결측 의미를 인계 계약으로 확인해야 자동 string conversion을 상태 의미 보존으로 오해하지 않는다.
Dask uint8 mask 전달: 생성 성공과 deserialize 완료를 따로 확인하기
배열 dtype와 fill_value의 의미를 실제 직렬화 왕복에서 함께 검사해야 로컬 생성 성공을 분산 전달 완료로 오해하지 않는다.
Dask masked scalar 계산: graph dtype와 compute dtype를 다음 팀에 함께 전달하기
masked array의 실제 scalar promotion과 그래프 추론을 대사해야 명시 astype 표시만으로 최종 정밀도를 약속하지 않는다.
Dask loc의 171과 13: index mask를 위치 배열로 억지 적용하지 않기
같은 index 식도 최적화 뒤 block 수가 달라질 수 있으므로 mask와 자료의 분할 대응을 실행 경계에서 확인해야 한다.
Dask map_overlap의 chunks=None: 다음 팀이 아는 크기를 받는지 확인하기
옵션 생략과 명시 None의 차이를 실제 chunk 지식 상태로 확인해야 다음 단계가 알려진 크기를 전제하는지 판단할 수 있다.
비유한 singleton의 모집단 분산 0을 안정성으로 읽지 않는다
비유한 singleton의 모집단 분산 결과를 유한 singleton의 무변동 상태와 합치지 않는다. 입력 class와 결과 tag를 함께 남겨 알 수 없는 산술이 안정성 지표로 발행되지 않게 한다.
DuckDB의 전부 NULL인 Parquet 자식에도 목표 타입이 필요하다
NULL-only struct 자식의 cast는 실행 성공을 확인한 뒤 반환 타입과 NULL 위치를 검사한다. 연결이 무효화된 실패를 올바른 타입의 결측 결과로 집계하지 않는다.
DuckDB Parquet glob보다 먼저 timestamp 정밀도를 정하자
glob의 첫 파일이 바뀌어도 timestamp 정밀도가 유지되는지 실제 값을 비교한다. 출력 dtype만 확인하면 이미 반올림된 시간을 정상으로 승인할 수 있다.
DuckDB의 NaN 상수 비교를 대수식처럼 옮겨도 될까
NaN이 포함된 부정 비교식은 원래 식과 최적화 경로의 행 선택표로 대조한다. 비유한 값을 모두 격리하는 정책만으로 원래 필터 의미의 보존을 증명할 수는 없다.
DuckDB 빈 집계의 NULL 행과 0행 결과를 구별하기
빈 입력의 scalar 집계에서는 NULL 값과 결과 행의 부재를 따로 검사한다. 상관 조건과 DISTINCT를 바꾼 대조군을 남겨 cardinality 손실을 결측값 처리로 가리지 않는다.
DuckDB DESCRIBE의 alias와 실제 header를 대조한다
quoted alias를 쓰는 소비자는 DESCRIBE 이름과 실행 header의 대소문자를 그대로 대사한다. 추출 중 소문자로 정규화하면 소비자 계약을 바꾸는 schema 차이가 사라진다.
DuckDB INSERT OR IGNORE 전에 어느 행을 남길지 정해야 한다
여러 UNIQUE 제약이 얽힌 배치에서는 적재 성공보다 어떤 키가 살아남았는지가 중요하다. 승자 정책을 먼저 정하고 그 키 집합으로 INSERT OR IGNORE 결과를 승인한다.
DuckDB export의 복구 가능성은 표현식 객체 복원으로 확인한다
COLLATE와 subscript가 들어간 schema는 별도 DB에서 실제 복원해 본다. export 완료, SQL parse 성공, 복원 값 일치를 나누어야 복구 준비의 첫 실패 경계를 찾을 수 있다.
DuckDB BIGNUM lambda는 플랫폼과 list 길이를 교차해 검사한다
큰 음수의 lambda 비교는 scalar 대조만으로 승인하지 않는다. 실제 운영 OS에서 list 길이와 원소 위치를 바꾸어 부호에 따른 Boolean 결과를 확인한다.
Doris UTC Z 파싱에서는 VARIANT 필드 존재도 확인한다
Zulu timestamp 적재는 행 성공 뒤에도 typed VARIANT 경로의 존재와 비결측을 확인한다. 변환 당시의 BE 환경을 남겨 사후 host 상태나 compaction 관측을 원인 증거로 확대하지 않는다.
Doris net-zero rewrite 뒤에도 offset snapshot의 key는 남아야 한다
동일값 재쓰기라도 과거 offset의 snapshot에는 이전 행이 필요할 수 있다. offset에 고정한 key 집합으로 net-delta 제거의 영향을 검사하되 미실행 시나리오라는 보고 범위를 유지한다.
Doris schema 변경 중 load 완료는 VISIBLE까지 확인한다
schema 변경 중 적재 완료를 알리기 전에 COMMITTED 상태를 visible key와 연결한다. timeout만으로 재적재하지 말고 transaction과 version trace로 대기 상태를 조사한다.
Doris packed 읽기는 길이 감산 전에 slice 경계를 검사한다
packed 객체 안의 slice를 읽을 때는 전체 객체 크기보다 논리 slice 경계를 먼저 확인한다. 직접 reader와 cache 보호 경로를 나누어 offset의 범위 초과를 조사한다.
Doris packed slice 정리는 하나의 metadata snapshot으로 판단한다
packed slice 삭제 후보는 formal·recycle·tmp 참조의 모든 page를 같은 snapshot에서 확인해 만든다. 시점이 다른 inventory의 부재를 합쳐 전체 부재로 판단하지 않는다.
