1-3 NLP为什么这么难做
主目录点这里
- 字词结构的复杂性
中文以汉字为基础单位,一个词通常由一个或多个汉字组成,而不像英语词汇单元由字母构成。这使得中文分词(切分句子为词语)成为一个具有挑战性的任务。 - 语言歧义性
中文中常常存在歧义,一个词语可以有多个意思,而且同样的发音的词汇在不同的上下文可能有不同的含义 - 语法结构的灵活性
中文语法结构相对较灵活,而且有时候在句子中的位置不像英文那样子严格。这增加了分析句子结构和理解语法的难度 - 语义表达方式的多样性
中文可以使用不同的词序和表达方式来表达相同的含义,这使得对于语义的理解变得更为复杂 - 多音字和同音字
中文存在大量的多音字和同音字,这增加了分词和语音识别的难度,因为同一个拼音可能对应多个实际的字词。 - 社会文化背景的影响
中文的使用受到深厚的社会文化影响,很多时候语境需要深入理解社会和文化的背景,这对于自然语言的处理增加难度。