Question

我有一个python脚本正在将网站抓取到csv文件中。我试图将其转换为mySQL插入语句。下面的代码是在我的表中插入NULL值。我怎样才能改变它？

注意：注释掉的行正在删除正在工作的CSV scrape。

#f = codecs.open('results.csv', 'w', encoding='UTF-8')
d = date.today()
todays_date = date.strftime(d, '%m/%d/%y')
#f.write("Date,Time,Away)
#f.write('\n')

def scrape_game_info():
    all_tbodies = driver.find_elements_by_tag_name('tr')
parsed_tbodies = [
    i for i in all_tbodies if 'ctl00_content_ctl00' in i.get_attribute('id')]
del parsed_tbodies[0]
dictionary = OrderedDict(itertools.izip_longest(
    *[iter(parsed_tbodies)] * 2, fillvalue=""))
for key, value in dictionary.items():
    tds = key.find_elements_by_tag_name('td')
    date = tds[0].text
    if date == todays_date:
         away=tds[2].text
         #f.write(date)
         #f.write(',')
         #f.write(time)
         #f.write(',')
         #f.write(away_rotation_number)
         #f.write(',')
pgp=("INSERT INTO pgp (Date, Time, Away)\
VALUES (date, time, Away)
cursor.execute(pgp)

**这是代码的一部分，但我相信足以帮助定义问题。

Answer 1

我使用Drew的建议来使用负载数据infile。我正常运行脚本创建了csv。然后我添加了在创建脚本后加载数据的代码。

将CSV Scrape转换为mySQL插入

1 个答案: