psycopg2:光标已关闭

Question

我正在使用psycopg2 2.6.1。我有一堆查询需要按顺序执行。

conn = psycopg2.connect(database=redshift_database,
                        user=redshift_user,
                        password=os.environ.get("PGPASSWORD"),
                        host=redshift_cluster,
                        port=redshift_port)
cursor = conn.cursor()

queries = [q1, q2, q3....] ## a list of queries 
for query in queries:
    try:
        cursor.execute(query)
    except:
        print e.message

假设q1因SSL connection has been closed unexpectedly而失败。然后我的其余查询也会因cursor already closed而失败。如何确保如果一个查询失败，则成功执行以下查询。

Answer 1

如果连接已断开，则可能需要重新建立连接并在异常处理程序中获取另一个光标：

for query in queries:
    try:
        cursor.execute(query)
    except Exception as e:
        print e.message
        conn = psycopg2.connect(....)
        cursor = conn.cursor()

你应该更具体一些，除了你捕捉到的例外。假设一个InterfaceError异常，如果游标以某种方式关闭，您可以这样捕获：

except psycopg2.InterfaceError as e:

可能还有其他不太严重的问题会阻止后续查询的执行，例如事务被中止。在这种情况下，您需要回滚当前事务，然后尝试下一个查询：

queries = ['select count(*) from non_existent_table', 'select count(*) from existing_table']
for query in queries:
    try:
        cursor.execute(query)
    except psycopg2.ProgrammingError as exc:
        print exc.message
        conn.rollback()
    except psycopg2.InterfaceError as exc:
        print exc.message
        conn = psycopg2.connect(....)
        cursor = conn.cursor()

这里尝试对不存在的表进行查询。引发了ProgrammingError异常，如果要尝试另一个查询，则必须回滚连接。第二个查询应该成功。

这掩盖了在异常处理程序本身中引发的其他异常的详细信息，例如connect(...)在尝试重新建立连接时可能会失败，因此您也应该处理它。

Answer 2

您应该明确地在except bloc中重新生成光标，以防在查询的较低级别出现错误：

for query in queries:
    try:
        cursor.execute(query)
    except:
        print e.message
        try:
            cursor.close()
            cursor = conn.cursor()
        except:
            conn.close()
            conn = psycopg2.connect(...)
        cursor = conn.cursor()