Styxis
Company
Knowledge

OpenSearch date_nanos bucket 0: 원본이 아닌 range rewrite 단위를 대조하기

검색 경로와 aggregation fast path를 분리해야 한다. 승인된 원본 시간과 경계로 계산한 bucket을 optimized 결과와 대조한다.

검색 성공 뒤의 다른 경로

검색 경로와 aggregation fast path를 분리해야 한다. 승인된 원본 시간과 경계로 계산한 bucket을 optimized 결과와 대조한다. Truthound는 원본 시각에서 독립 계산한 bucket과 실제 결과를 대조하는 위치에 둔다. query hit가 맞는다는 사실도 다른 aggregation 경로의 정확성은 보증하지 않는다. [1, 2, 3]

segment별 최적화 조건

OpenSearch #23403은 date_nanos range aggregation fast path가 millisecond bound를 nanosecond point처럼 인코딩해 bucket 수가 틀리는 보고다. 2.16.0·2.19.7·3.9.0 실행과 segment별 적용 조건을 제시한다. 최적화가 segment별로 적용돼 query와 merge에 따라 결과가 달라질 수 있다는 조건이 중요하다. report의 실행 버전을 다른 모든 OpenSearch 배포로 확대하지 않는다. [1]

우회와 독립 기준을 나누기

같은 문서·경계·segment 조건에서 최적화 유무를 비교하고, 독립 bucket 기준에 어긋난 집계를 공개하지 않는다. 해상도와 경계 포함을 고정하고 profile에서 optimized segment를 확인한다. 우회 결과를 기대값으로만 복사하지 않고 원본 키의 소속도 별도 계산한다. [1, 3]

두 원본 시각이 정하는 수

설명용 두 문서 시각은 2024-01-15와 2024-01-20이고 범위는 2024-01-01 이상 2024-02-01 미만이다. 기대 수는 원본 두 시각에서 계산한 2다. 0이면 실패이며 키 소속도 별도로 대조한다. 관측 2는 개수 조건만 충족하고 0은 실패다. 두 문서가 정말 같은 key인지, sub-millisecond 경계가 어떻게 처리되는지는 별도 대사한다. [1, 3]

기대 집계를 준비한 SDK 검사

Truthound Core Python SDK 3.3.2의 ColumnPairValidator로 independent_bucket_documents와 observed_bucket_documents를 relationship="=="로 비교한다. 운영자가 원본 시각과 승인 경계를 해독해 기대 집계를 준비한다. SDK는 BKD bound 변환이나 최적화를 고치지 않으며 같은 수로 문서 소속 전체를 증명하지 않는다. [1, 2, 3]

merge 뒤에도 확인할 경계

스크립트 또는 rewrite 비활성화의 성능·범위 비용을 평가한 뒤 우회를 선택한다. script·missing·겹친 range나 segment 전체를 덮지 않는 query는 fast path 조건이 다르다. 수정판에서도 merge 전후와 경계 바로 안팎을 다시 시험한다. [1, 3]

적용 조건

date_nanos와 date의 해상도·경계 포함 규칙을 고정하고 profile로 실제 최적화 적용 segment를 확인한다.

대안

스크립트 또는 rewrite 비활성화 우회 비용을 검토하고 같은 경계에서 지원 수정본을 시험한다.

한계

  • Truthound는 BKD bound 변환이나 OpenSearch 최적화를 고치지 않는다. bucket 수 일치만으로 문서 구성이나 모든 merge 조건의 정확성을 증명하지 않는다.

근거

사건 확인일
대상 확인일
수정일