我需要将HTML文件存储为文本文件。与web tittle同名。我的代码出了问题,所以它没有在目录的一侧创建文件。我有编写目录的权限。我使用的是Ubuntu 12.04LTS
目录/home/user1/
文件名
print name = Mathrubhumi Sports - ശ്രീനിക്ക്പച്ചക്കൊടി
文件名包含Unicode值
import os
from urllib import urlopen
from bs4 import BeautifulSoup
url= "http://www.mathrubhumi.com/sports/story.php?id=397111"
raw = urlopen(url).read()
soup = BeautifulSoup(raw,'lxml')
texts = soup.findAll(text=True)
name = soup.title.text
name= name+'.txt'
def contains_unicode(text):
try:
str(text)
except:
return True
return False
result = ''.join((text for text in texts if contains_unicode(text)))
# Output to a file
with open(os.path.join('/home/user1/textfiles',name,'w') as out:
out.write(result)
请帮我调试一下
答案 0 :(得分:1)
我试过这个并且它有效,它创建了一个名为Mathrub * .txt的文件,其中包含当前目录中的一些文本。
import codecs
import os
from urllib import urlopen
from bs4 import BeautifulSoup
url= "http://www.mathrubhumi.com/sports/story.php?id=397111"
raw = urlopen(url).read()
soup = BeautifulSoup(raw,'lxml')
texts = soup.findAll(text=True)
name = soup.title.string
name= name+'.txt'
def contains_unicode(text):
try:
str(text)
except:
return True
return False
result = ''.join((text for text in texts if contains_unicode(text)))
# Output to a file
with codecs.open(name,'w',encoding="utf-8") as out:
out.write(result)
在添加编解码器部分之前,它大声抱怨试图写一些不知道如何解释的字符。