论汉语手工分词与现存困难
论汉语手工分词与现存困难
摘要:词汇是语言三要素之一,是语言的建筑材料。汉语的词汇相当丰富,因此对汉语进行分词可以帮助区分语素和词;同时通过分词工作可以发现手工分词存在的问题,可以帮助进一步解决分词到位,避免歧义。本文试图通过对一篇社论的手工分词,发现手工分词的问题,并结合训诂学,讨论分词在训诂学中的应用问题。
关键词:汉语 手工分词 现存问题 训诂学
一、社论的手工分词
对社论进行手工分词,首先要制作分词标注集,然后才能进行分词。
(一)标注集
n名词 v动词 a形容词 d副词
p介词 c连词 h代词 e数量词
f助词 g标点符号 x系词