Question

无论python和sqlite是什么，我都会收到此错误。

  File "addbooks.py", line 77, in saveBook
  conn.commit()
  sqlite3.OperationalError: cannot commit transaction - SQL statements in progress

代码如下所示：

    conn = sqlite3.connect(fname)
cread = conn.cursor()

cread.execute('''select book_text from table''')
while True:
    row = cread.fetchone()
    if row is None:
        break
    ....
    for entry in getEntries(doc):
        saveBook(entry, conn)

无法执行fetchall（）因为表和列的大小很大，而且内存很少。

如果不采用肮脏的技巧（在内存中获取可能适合的rowid，然后逐个选择行），可以做些什么？？

Answer 1

问题是您已将连接保留为自动提交模式。在整个批次中包装一个事务，这样只有在完成所有更新后才会发生提交，并且它应该都可以正常工作。

Answer 2

不知道这是否算作“肮脏的伎俩”; - ）

我对此问题的解决方案是使用SELECT... LIMIT clause，假设您有主键整数字段id

current_id = 0
while True:    
    cread.execute('''select book_text from table where id > %s limit 2''' % current_id)
    results = cread.fetchall()
    if results is None:
        break;
    for row in results:
         ... (save book) ...
         current_id = row.id

Answer 3

问题是连接只能有一个活动游标。

解决方案是使用新连接进行更新。

不幸的是，我不记得我在哪里阅读文档的确切位置，所以我无法证明。

<强> UPD ：

以下代码适用于我的Windows XP：

import sqlite3
import os
conn1 = sqlite3.connect('test.db')
cursor1 = conn1.cursor()
conn2 = sqlite3.connect('test.db')
cursor2 = conn2.cursor()


cursor1.execute("CREATE TABLE my_table (a INT, b TEXT)")
cursor1.executemany("INSERT INTO my_table (a, b) VALUES (?, NULL);", zip(range(5)))
conn1.commit()

cursor1.execute("SELECT * FROM my_table")
for a, b in cursor1:
    cursor2.execute("UPDATE my_table SET b='updated' WHERE a = ?", (a, ))

conn2.commit()

print "results:"
print 10 * '-'
cursor1.execute("SELECT * FROM my_table")
for a, b in cursor1:
    print a, b
cursor1.close()
conn1.close()
cursor2.close()
conn2.close()
os.unlink('test.db')

按预期返回以下内容：

results:
----------
0 updated
1 updated
2 updated
3 updated
4 updated

如果我将conn2.commit()移动到for循环中，我会收到与您提到的相同的错误：

Traceback (most recent call last):
  File "concurent.py", line 16, in <module>
    conn2.commit()
sqlite3.OperationalError: database is locked

因此，解决方案是在结束时提交一次，而不是在每一行之后提交。

在SQLite中从（从另一个表）获取时插入行

3 个答案: