스트림에서 최적 분산을 보장하는 VAROPTₖ 샘플링

본 논문은 가중치가 부여된 대용량 스트림에서 제한된 크기 k 의 샘플을 유지하면서, 임의의 하위 집합 합을 추정할 때 평균 분산을 최소화하는 새로운 온‑라인 리저버 샘플링 기법 VAROPTₖ 을 제안한다. VAROPTₖ는 모든 오프라인 k‑샘플링 방법보다 평균 분산이 작으며, 개별 하위 집합에 대한 최악‑케이스 분산도 기존 방법보다 더 강력하게 제한한다. 샘플 업데이트는 O(log k) 시간에 수행되며, 분산 최소화와 병렬/분산 환경에서의 샘플…

저자: Edith Cohen, Nick Duffield, Haim Kaplan

스트림에서 최적 분산을 보장하는 VAROPTₖ 샘플링
본 논문은 가중치가 부여된 대규모 데이터 스트림에서 제한된 메모리 k (리저버)만을 사용해 임의의 하위 집합 합을 정확히 추정하고자 하는 문제를 다룬다. 전통적인 리저버 샘플링은 스트림을 한 번만 통과하면서 샘플을 유지하지만, 추정 정확도(특히 분산) 측면에서 한계가 있었다. 저자들은 이러한 한계를 극복하기 위해 **VAROPTₖ** 라는 새로운 샘플링·추정 프레임워크를 제안한다. ### 1. 문제 정의 및 목표 - **스트림 모델**: 아이템 i 는 양의 가중치 wᵢ 를 가지고 순차적으로 도착한다. - **리저버**: 최대 k 개의 아이템을 저장하고, 각 저장 아이템에 보정 가중치 bᵢ 를 부여한다. - **추정 목표**: 임의의 집합 I⊆

원본 논문

고화질 논문을 불러오는 중입니다...

댓글 및 학술 토론

Loading comments...

의견 남기기