什么是从远程服务器读/写万行的最有效方式？

Question

有人能指出我上有效的方法（以避免内存不足的错误OUT）从使用SQLAlchemy的和Python远程服务器读取/写入数百万行的？

感谢，读取数据时，所以你每次只用一个行处理例如，而不是拉动

Answer 1

遍历结果集中的整个数据集到内存中，然后实际处理它们。

而对于写作，做同样的。为了提高效率，一次只能处理一条记录。