Log-likelihood ratio calculator 对数似然率计算器

本文由 xujiajin2009-04-27 发表於 "编程与工具开发" 讨论区

  1. 回复: Log-likelihood ratio calculator 对数似然率计算器

    多谢!
     
  2. 回复: Log-likelihood ratio calculator 对数似然率计算器

    谢谢许老师! 同时也想请问一下, 如果想用这个计算器计算一个词在两个corpora中的POS 的变化是否statistically significant ([FONT=verdana, arial]2x2 table)[/FONT], 应该怎样输入cells呢?
     
  3. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    pos的做法跟单词的做法是一样的。
     
  4. 回复: Log-likelihood ratio calculator 对数似然率计算器

    不好意思, 我想我表达的不够准确. 我是想问如果一个词有两种词性, 这两种词性在两个corpora中的频率都有变化. 能否用这个calculator计算statistical significance呢. 因为我看到这个计算器是进行一对一的比较, 那这样的话是应该把每种词性在不同corpora中的频率分别进行比较么. 但是这样的话会得到两个结果. SPSS中是做为一个整体比较的, 这样就只出来一个结果. 我觉得这个计算器非常方便, 但不知道能否像SPSS这样整体比较呢. 如果能的话就太好了啊.
     
  5. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    如果是一个词的两种词性,应该将两个词性的频数相加即可。
     
  6. 回复: Log-likelihood ratio calculator 对数似然率计算器

    谢谢许老师! 另外想请教一下, LL test对于一方frequency为5以下的情况是否适用? 只有Fisher's exact test 能计算frequency为5以下的吗? 还是为了结果的准确, 最好把frequency控制在5或10以上呢?
     
  7. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    可以用,但理论上来说,检验的可靠性差一些。
     
  8. 回复: Log-likelihood ratio calculator 对数似然率计算器

    明白了. 谢谢您了!
     
  9. 回复: Log-likelihood ratio calculator 对数似然率计算器

    真是雪中送炭啊!救了我一命!在这里要谢谢Prof. Xu以及所有的老师们,感谢你们允许我这样的菜鸟来这里潜水学习 少走了多少弯路啊!再次感谢!!!
     
  10. volfer

    volfer Moderator

  11. 回复: Log-likelihood ratio calculator 对数似然率计算器

    非常感谢
     
  12. 回复: Log-likelihood ratio calculator 对数似然率计算器

    请问如何解释图片中的0.000***—呢?
     
  13. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    这是显著性水平,跟其他统计检验的p值解读一样。
     
  14. 回复: Log-likelihood ratio calculator 对数似然率计算器

    简单而实用,感谢许老!
     
  15. armstrong

    armstrong 高级会员

    回复: Log-likelihood ratio calculator 对数似然率计算器

    如果使用LL对两个语料库的某个标点符号做检验,其中的corpus size应该是语料库的所有tokes还是所有的标点符号呢?我认为是后者?请专家指教.
    谢谢!
     
  16. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    应该是总的标点数比较对头。
     
  17. 回复: Log-likelihood ratio calculator 对数似然率计算器

    许老师,如果有两组数据,按照公式http://en.wikipedia.org/wiki/Likelihood-ratio_test 想实现模型优劣的比较。但只有两组models的likelihood值可供计算,没有您这个calculator中Freq。这应该怎么实现呢?Likelihood可否在excel中完成计算呢?谢谢您!
     
  18. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    “只有两组models的likelihood值可供计算”

    看不懂你这句话什么意思。
     
  19. 回复: Log-likelihood ratio calculator 对数似然率计算器

    我的意思是请参照http://en.wikipedia.org/wiki/Likelihood-ratio_test给出的公式,如果要计算显著性差异,只需要有null model和alternative model的likelihood值就可以。没有calculator中所需要的Freq。应该怎么实现LRT呢?另外,知道模型的AIC值,如何求其对应的Likelihood,可否在excel中完成计算?谢谢!
     
  20. xujiajin

    xujiajin 管理员 Staff Member

    回复: Log-likelihood ratio calculator 对数似然率计算器

    likelihood的显著性检验有different versions,我们这里讲的,以及提供的工具,针对的两个语料中某个词汇或检索项在的频数差异比较。我们的工具目的很单一,就只解决频数差异检验。

    另外,我不清楚你说的什么AIC什么意思。也不清楚你到底想做什么研究。看上去跟语料库没什么关系。这里讨论的话题和方法主要是跟语料库相关的研究。其他的问题,或许你可以到相关的网站去咨询。