ETW EventsLost=0인데 기록이 적다면: 독립 키 대사로 수집 범위 확인하기
손실 counter 0과 수집 완전성은 다르다. 같은 범위의 독립 이벤트 근거와 수신 결과를 대조해야 한다.
counter 밖의 기대 목록
손실 counter 0과 수집 완전성은 다르다. 같은 범위의 독립 이벤트 근거와 수신 결과를 대조해야 한다. Truthound에 가져오는 기대 목록도 같은 ETW consumer의 출력에서 다시 만들면 안 된다. 알려진 시험 요청과 provider가 만든 event의 관계를 따로 확인해야 비교가 독립적이다. [1, 2, 3]
요청 flag와 적용 flag
Beats #50966은 고부하 DNS ETW 수집에서 loss counter가 0인데 별도 AMA보다 적은 이벤트가 온 사례와 세션 flag 조합의 대조를 보고한다. 제보 환경의 수치를 보편적 손실률로 일반화하지 않는다. flag를 요청한 값과 kernel이 실제 적용한 값을 구별해야 한다. 원문은 INDEPENDENT만 요청한 경우와 hybrid-shutdown flag를 함께 쓴 경우의 readback을 대조한다. [1]
같은 범위의 두 consumer
RUN_ID와 동일 시간창을 가진 부하 시험에서 원본·독립 consumer·Beats의 키를 대사하고, 확인된 누락이 있으면 조용한 정상 상태를 승인하지 않는다. provider·RUN_ID·창·keyword·중복 정책을 맞추고 실제 적용 flag를 수집한다. 두 consumer의 필터가 다르면 총건수 차이를 손실이라고 부르기 전에 범위를 수정한다. [1, 3]
A~J의 키 대사
설명용 승인된 시험 이벤트 A~J 열 개를 독립 확인한다. 모두 착지하면 누락 0이고 H,I,J가 없으면 누락 3이므로 실패다. 단순 consumer 총건수 일치로 키 동일성을 대체하지 않는다. 누락 0은 이 확인 목록의 조건만 통과한다. 다른 고유 키 열 개로 바뀐 결과는 개수가 같아도 통과가 아니다. [1, 3]
차집합을 준비한 검사
Truthound Core Python SDK 3.3.2의 ColumnPairValidator로 permitted_missing_keys와 missing_verified_keys를 relationship="=="로 비교한다. 운영자가 원본 키 차집합을 계산하고 미확인 참조는 따로 남긴다. SDK는 ETW session flag를 변경하거나 kernel event를 복원하지 않으며 AMA도 완전한 원천이라는 보장은 없다. [1, 2, 3]
수정 뒤에도 필요한 근거
INDEPENDENT와 hybrid-shutdown 조합을 실제 readback으로 확인한 격리 시험이 대안이다. 수정 뒤에도 같은 RUN_ID와 키 대사를 반복한다. counter가 늘지 않는다는 관측을 무시하지 말되, 그것만으로 모든 입력의 완전성을 알리지는 않는다. [1, 3]
적용 조건
provider·RUN_ID·창과 중복 정책을 일치시키고 독립 consumer도 누락 가능성이 있음을 별도 평가한다.
대안
INDEPENDENT와 hybrid-shutdown flag의 실제 readback을 확인한 격리 시험을 수행한다.
한계
Truthound는 ETW session flag를 바꾸거나 kernel event를 복원하지 않는다. AMA와의 근접 건수가 완전한 원천 ground truth는 아니다.
근거
- 사건 확인일
- 대상 확인일
- 수정일
