Arrow ASCII 변환 뒤 buffer가 줄었다면 offset도 다시 확인해야 한다
array offset과 첫 value offset은 같은 정보가 아니다.
Arrow ASCII 변환 뒤 buffer가 줄었다면 offset도 다시 확인해야 한다
변환 후 바이트가 짧아지면 논리 문자열의 길이뿐 아니라 offset이 참조하는 물리 버퍼 경계도 다시 확인해야 한다. array offset이 0이라는 이유로 첫 value offset도 0이라고 가정하면 새 버퍼에 옛 위치를 재사용할 수 있다. [1, 2, 3]
보고의 범위와 전제
Arrow 이슈 54906은 array offset은 0이지만 첫 value offset이 0이 아닌 유효 입력에서 ASCII 대소문자 변환이 잘못된 배열을 만든다고 보고한다. 새 데이터는 버퍼 시작에 놓이는데 옛 offsets가 남는 경로를 지적하며 UTF-8 변환 대조는 영향을 받지 않는다고 제시한다. 모든 문자열 변환으로 범위를 확대하지 않는다. [1]
입력에서 확인할 관계
입출력 buffer 길이와 offset 범위를 함께 추출해 검사하고 원시 배열 검증에 실패한 출력을 후속 표로 변환하지 않는다. 먼저 native 배열 검증을 실행하고, 안전하게 얻을 수 있는 경계 정보만 비교 표로 옮긴다. 이미 유효하지 않은 객체를 읽으면서 검증용 값을 추출하려는 순서는 위험을 되풀이한다. [1, 3]
승인 기준을 정하는 작은 사례
설명용 출력이 ABC의 3바이트 버퍼라면 마지막 offset 3은 경계 안에 있다. 이전 버퍼의 offset 8을 그대로 사용하면 끝을 벗어나므로 실패다. 기대 경계는 실제 새 버퍼 길이에서 얻는다. 이 비교만으로 모든 offset의 단조성이나 문자열 내용까지 증명하는 것은 아니다. [1, 3]
Truthound 검사에 넘길 경계
Truthound Core 3.3.2의 ColumnPairValidator로 안전하게 추출한 최대 offset과 버퍼 길이를 크기 관계로 비교할 수 있다. 제품은 Arrow 객체의 복구기가 아니며 native validation을 대체하지 않는다. 새 버퍼에 맞게 offset을 정규화하는 검증된 변환 경로를 선택한 뒤 내용과 경계를 다시 확인한다. [1, 2, 3]
적용 조건
native validation을 먼저 수행하고 안전하게 얻은 offset·buffer 길이만 검사 표로 준비한다.
대안
새 buffer에 맞춰 offset을 정규화하는 검증된 변환 경로를 사용한다.
한계
표 기반 경계 검사는 유효하지 않은 Arrow 객체를 안전하게 복구하는 도구가 아니며 native validation을 먼저 수행해야 한다.
근거
- 사건 확인일
- 대상 확인일
- 수정일
