Question

我有一个 SQLAlchemy ORM 模型, 我用这个模型将特定的行( 完整的对象图形) 从我们的生产数据库转到我们的测试和开发数据库。这非常有效, 直到我得到大量儿童依赖性的收藏, 并且我遇到了一个 < code> MemoryError 。我已经在对象等级的关键点设置了动态装入, 并且用不同的查询分别将孩子们加载到不同的查询中, 但是仍然有一些收藏, 有足够的孩子数据, 我正遇到记忆问题。

一次只装入一个收藏元素的最佳方式是什么, 这样我就能一次复制单个对象( 及其所有子行)?

Answer 1

在使用处理每个节点(与儿童一起)后,尝试清理会议。下面的样本代码打印了会议实例的数量 :

class Node(Base):
    __tablename__ =  node 
    id = Column(Integer, primary_key=True)
    parent_id = Column(Integer, ForeignKey( node.id ))
    name = Column(String(50))
    children = relationship("Node",
            backref=backref("parent", remote_side=[id],)
            )

def process_node(node, expunge=False, ident=1):
    print "Node: ", "-" * ident, node, " --> ", len(session.identity_map)
    for child in node.children:
        process_node(child, expunge, ident + 4)
        session.expunge(child)

roots = session.query(Node).filter(Node.parent == None)
for root in roots:
    process_node(root, True)

友情链接