编程语言
首页 > 编程语言> > python postgres我可以fetchall()100万行吗?

python postgres我可以fetchall()100万行吗?

作者:互联网

我在python中使用psycopg2模块从postgres数据库中读取,我需要对列中的所有行进行一些操作,该行有超过100万行.

我想知道cur.fetchall()会失败还是导致我的服务器出现故障? (因为我的RAM可能不会那么大,无法保存所有数据)

q="SELECT names from myTable;"
cur.execute(q)
rows=cur.fetchall()
for row in rows:
    doSomething(row)

更聪明的方法是什么?

解决方法:

fetchall()最多可获取arraysize限制,因此为了防止对数据库造成大量攻击,您可以以可管理的批次获取行,或者只是单步执行游标直到其耗尽:

row = cur.fetchone()
while row:
   # do something with row
   row = cur.fetchone()

标签:python,postgresql,fetchall
来源: https://codeday.me/bug/20190930/1836098.html