Mar 9,2011 1:22:06 PM edu.stanford.nlp.process.PTBLexer next WARNING: Untokenizable: � (U+FFFD,decimal: 65533) Mar 9,decimal: 65533)
这些是当我想要将POS标签分配给句子时,我得到的错误.我从文件中读取句子.最初(几句话)我没有得到这个错误(即不可破译),但是在阅读一些句子后,这个错误就出现了.我使用v2.0(即2009年)的POS标签,模型是left3words.
