在Python中使用nltk时出现非ASCII字符错误

Question

我尝试使用以下链接中提供的解决方案代码：Unicode Tagging in Python NLTK

在omerbp给出的解决方案中：

from nltk.corpus import indian
from nltk.tag import tnt

train_data = indian.tagged_sents('hindi.pos')
tnt_pos_tagger = tnt.TnT()
tnt_pos_tagger.train(train_data) #Training the tnt Part of speech tagger with hindi data

print tnt_pos_tagger.tag(nltk.word_tokenize(word_to_be_tagged))

我收到以下错误：

  

＆＃39;语法错误：非ASCII字符＆＃39; \ xe0＆＃39;在第1行的文件q12.py中，但没有声明编码;有关详细信息，请参阅http://www.python.org/peps/pep-0263.html＆＃39;在第1行。

Answer 1

在文件顶部添加以下两行：

#!/usr/bin/python
# -*- coding: utf-8 -*-

他们将指示解释器将每个字符编码为UTF-8而不是ASCII。