Question

python去除停止词，停止词文件正确格式如何书写

下载的文件是一行一个停止词，但是print不出来，是不是用逗号隔开，

Answer 1

ss = "aa"
if not isinstance(ss,unicode):
    ss = ss.decode('utf-8')
print type(ss)
将str类型转换成utf8再比较

Answer 2

把你的代码，文件片段贴出来看看。

追问

这个是下载的停止词文件，我做的是分词，但是print出来的结果还是包括停止词

追答

你写的代码呢？去停止词连我都做过，不应该有什么问题……

追问

追答

我不清楚jieba这个库，代码逻辑是没问题的。你试试添加 print(segs[:100])看看seg是否符合你假设的格式。

Answer 3

因为你从stopword.txt这个文件里读出来的是是str类型的，str类型跟unicode不相等

追问

你好，请问这个问题如何解决呢，或者文件正确格式怎么书写呀！谢谢

追答

ss = "aa"
if not isinstance(ss,unicode):
    ss = ss.decode('utf-8')
print type(ss)
将str类型转换成utf8再比较

Answer 4

你好，可否将你的代码说一下？