求助:如何由两位研究者共同标注语料库?

请教大侠,如果语料库涉及到无法客观赋码,需要由研究者手工标注,再通过检索工具检索,为了保证标注的准确性,通常由两位或两位以上的研究者共同标注。请问,两位研究者应该怎样操作?谢谢!
 
回复: 求助:如何由两位研究者共同标注语料库?

(1)确定统一的标注集
(2)用同一语料进行标注,做一个pilot,观察一致性。
(3)调整标注,做一致性检验。
确保标注一致。
 
回复: 求助:如何由两位研究者共同标注语料库?

计算语料标注的一致性可以用 Cohen's Kappa。
 
回复: 求助:如何由两位研究者共同标注语料库?

谢谢。不过我不太了解这个,可以提供一些详细信息吗?:)
 
回复: 求助:如何由两位研究者共同标注语料库?

(1)确定统一的标注集
(2)用同一语料进行标注,做一个pilot,观察一致性。
(3)调整标注,做一致性检验。
确保标注一致。
非常感谢!:)
 
Back
顶部