请教如何统计一篇文章的类符数?How to count all word types in a text?

由于论文的需要,想要统计搜集的文章的总类符数,但不知道可以用什么软件统计,还请高人指点,在此先谢过了。:)
 
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

antconc

别问我type/token/lemma的区别啊。自己看书。
 
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

对于英语而言,很简单,在UltraEdit软件中先把空格替换成回车符,然后从“文件”中选择“(删除重复项)排序”就可以得到所有不同的类符数了(有多少行就是多少个类符,行数可在“视图”中选择显示出来)。
 
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

对于英语而言,很简单,在UltraEdit软件中先把空格替换成回车符,然后从“文件”中选择“(删除重复项)排序”就可以得到所有不同的类符数了(有多少行就是多少个类符,行数可在“视图”中选择显示出来)。
非常感谢!:)
 
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

4楼的办法恐怕过于简单化了 很多单词在文本中与某些其他符号连接在一起,有时又是独立的,这样计算结果会大于实际的类符数
 
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

4楼的办法恐怕过于简单化了 很多单词在文本中与某些其他符号连接在一起,有时又是独立的,这样计算结果会大于实际的类符数

请问,应该怎么做才可以准确的计算出文本的总类符数,如果用Antconc软件的话,实际操作应该怎么做呢?谢谢:)
 
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

Here you go.

做一个词表。就可以得到type和token的信息,建议选中Treat all data as lower case.
 

附件

  • type_tokens.jpg
    type_tokens.jpg
    61.4 KB · 浏览: 25
回复: 菜鸟提问:请教如何统计一篇文章的类符数?

没错,接下来,就该自己再做一次lemmatization(词目归并),如果有需要的话。
4楼的办法恐怕过于简单化了 很多单词在文本中与某些其他符号连接在一起,有时又是独立的,这样计算结果会大于实际的类符数
 
回复: 请教如何统计一篇文章的类符数?How to count all word types in a text?

我已经试了一下,真是个好东西,虽然暂时还用不着,先收藏起来,谢了。

当然,你也可以用Readability Analyzer计算,其中提供type,token,lemma,TTR,standardized TTR等各项数值。

Readability Analyzer 1.0(090830修正版)下载


Readability_Analyzer_Readme.doc

如何解读Readability Analyzer中的数据(有Readability_Analyzer_Readme下载)
 
回复: 请教如何统计一篇文章的类符数?How to count all word types in a text?

支持Word和txt格式。
 
回复: 请教如何统计一篇文章的类符数?How to count all word types in a text?

将语料中的单词都视作小写。

比如:The和the都视作小写the一个单词,否则会被作为两个单词分别统计。
 
回复: 请教如何统计一篇文章的类符数?How to count all word types in a text?

当然,你也可以用Readability Analyzer计算,其中提供type,token,lemma,TTR,standardized TTR等各项数值。

Readability Analyzer 1.0(090830修正版)下载


Readability_Analyzer_Readme.doc

如何解读Readability Analyzer中的数据(有Readability_Analyzer_Readme下载)
许博士:
您在帖子上给出的软件下载链接都无效了:mad:。我现在非常需要这个软件,能麻烦您发给我吗?我的邮箱是wpfreda@yahoo.cn 非常感谢!!:)
 
回复: 请教如何统计一篇文章的类符数?How to count all word types in a text?

当然,你也可以用Readability Analyzer计算,其中提供type,token,lemma,TTR,standardized TTR等各项数值。

Readability Analyzer 1.0(090830修正版)下载


Readability_Analyzer_Readme.doc

如何解读Readability Analyzer中的数据(有Readability_Analyzer_Readme下载)
许博士您好,我想采用这个软件的运行结果,并将结果用到自己的程序中,请问这个软件提供接口程序吗?
 
Back
顶部