Skip to content

模型Model

插入流与 Turnstile 流

Insertion-only stream · Turnstile stream

以频率向量更新语义区分非负插入、严格 Turnstile 与一般正负流。

形式陈述 ​

三种更新语义 ​

在数据流模型中,固定正整数宇宙大小 n,以初始为零的整数频率向量 f∈Zn 表示累计状态。每条更新给出 i∈[n] 与整数 Δ,并令 fi←fi+Δ。Insertion-only 要求每次 Δ≥0;strict turnstile 允许负更新,但每个前缀后所有坐标仍非负;general turnstile 对中间及最终坐标的符号均不加限制。

库存入库是插入流;含出库且库存从不为负是 strict turnstile;两个数据源差值的更正可产生负频率,属于 general。严格模型约束每个时间前缀,仅最终向量非负仍不够。

直觉

一条序列的逐态判定 ​

从 fa=0 开始,序列

(a,+3),(a,−2)

使坐标依次成为 3、1,因而在 strict turnstile 合法。反序执行则经过 −2,1,只能属于 general turnstile。两条序列最终向量相同,允许的前缀集合却不同,算法的正确性与下界也可能随之改变。

若实现把负计数饱和截成 0,反序输入会先得到 0、再得到 3,而不是语义要求的 1。这个错误在最终只检查“非负”时不易发现,因此测试必须观察每次更新后的实际频率。

三种流更新语义
例子与边界

范数与查询定义 ​

Insertion-only 中 ‖f‖1=∑ifi 等于总更新质量并随时间单调。strict turnstile 允许它因删除下降,但坐标仍可解释为库存或次数。general 中正负坐标会在 ∑ifi 中抵消,heavy hitter 通常要按 |fi| 相对于 ℓ1 或 ℓ2 范数定义。

“支持删除”不能替代模型名称。Count–Min 的单边上界依赖当前频率非负,因此也适用于 strict turnstile;先 +3 再 −2 的碰撞键只留下 +1 的噪声。线性 sketch 的状态是 Af,更新接口可以接收正负 Δ,但这不自动保证其解码器适用于允许负频率的一般 turnstile。若要在多个时刻或自适应输入上使用概率界,还须另查随机性与失败概率约定。

推论与应用

分布式合并 ​

两个站点产生局部频率 f(1),f(2),全局向量是二者之和。若共享随机矩阵 A,linear sketch 可合并为

Af(1)+Af(2)=A(f(1)+f(2)).

若各站只见插入,合并后仍是插入流;若站点用正负日志互相抵消,全局接口就至少需要 turnstile 语义。

Misra–Gries 等非线性摘要需要专门 merge 后重新压缩,状态字节不能直接逐项相加。可合并也不等于撤销任意历史更新:算法只看净频率状态,未必保留哪条日志产生了它。

与动态集合的分界 ​

动态字典可随机访问并精确保存活动键,空间通常随宇宙中出现的键数增长;streaming 只保留次线性状态,删除后不能回看被遗忘信息。两者都使用“插入/删除”词汇,资源与接口并不相同。

模型还应说明更新值的位宽、流长是否已知、坐标宇宙能否动态增长,以及查询是一次性还是持续输出。这些参数会影响计数器空间和失败概率的合成。

参考资料
  • S. Muthukrishnan, “Data Streams: Algorithms and Applications,” Foundations and Trends in Theoretical Computer Science 1(2), 2005, pp. 117–236.
  • Graham Cormode and S. Muthukrishnan, “An Improved Data Stream Summary: The Count-Min Sketch and Its Applications,” Journal of Algorithms 55(1), 2005, pp. 58–75.
  • Noga Alon, Yossi Matias, and Mario Szegedy, “The Space Complexity of Approximating the Frequency Moments,” Journal of Computer and System Sciences 58(1), 1999, pp. 137–147.
关系图谱18 个相邻概念 · 2 类关系

拖动节点调整位置。

显示关系

显示:依赖

  1. 前置三跳
  2. 前置二跳
  3. 前置一跳
  4. 当前条目
  5. 后续一跳
  6. 后续二跳
  7. 后续三跳
文字版关系按与当前条目的最短距离分组
分类位置

上位 / 更一般

下位 / 直接特例

暂未标注直接特例。