← 返回概念术语索引
LIS WIKI / 概念术语

齐普夫定律

Zipf's Law

描述词频与词频排序之间关系的经验规律:在许多大规模文本中,第r位词的频率大致与其名次r成反比,少数高频词与大量低频词形成长尾分布。[1][2]

01 认识这个词条

排序关系

把词按出现次数由高到低排列,经典形式写作频率与名次的倒数近似成比例。Zipf在语言与人类行为研究中把这种分布联系到最省力原则。[1][2]

信息检索中的意义

长尾词频有助于理解停用词、高频功能词、稀有词和词汇表规模,也影响索引压缩、关键词选择与检索模型设计。[1]

拟合边界

实际文本常在最高频或最低频部分偏离简单反比关系;分词方法、语种、文本体裁和语料规模都会影响曲线。它适合描述总体模式,不宜替代具体数据检验。[1][2]

02 参考出处

以下为本条目使用的机构资料,可点击核对原文。

  1. 01
  2. 02
LIS WIKI