如何禁用 SQLAlchemy 缓存?

2025-03-21 09:07:00
admin
原创
53
摘要:问题描述:我在使用时遇到缓存问题sqlalchemy。我使用sqlalchemy将数据插入MySQL数据库。然后,我让另一个应用程序处理该数据并直接更新它。但sqlalchemy总是返回旧数据而不是更新的数据。我认为sqlalchemy缓存了我的请求...那么...我应该如何禁用它?解决方案 1:除了通常的 ...

问题描述:

我在使用时遇到缓存问题sqlalchemy

我使用sqlalchemy将数据插入MySQL数据库。然后,我让另一个应用程序处理该数据并直接更新它。

sqlalchemy总是返回旧数据而不是更新的数据。我认为sqlalchemy缓存了我的请求...那么...我应该如何禁用它?


解决方案 1:

除了通常的 SQLAlchemy 身份映射(它位于事务本地)之外,人们认为其中存在“缓存”的常见原因是他们正在观察事务隔离的影响。SQLAlchemy 的会话默认以事务模式工作,这意味着它会等待直到session.commit()被调用,以便将数据持久保存到数据库。在此期间,其他地方正在进行的其他事务将看不到此数据。

但是,由于事务的隔离性质,还有一个额外的问题。正在进行的其他事务不仅在提交之前看不到您的事务数据,而且在某些情况下,它们在提交或回滚之前也看不到它(这与您的 close() 在此处产生的效果相同)。具有平均隔离度的事务将保留迄今为止已加载的状态,并继续为您提供与事务本地相同的状态,即使实际数据已更改 - 这在事务隔离术语中称为可重复读取。

http://en.wikipedia.org/wiki/Isolation_%28database_systems%29

解决方案 2:

这个问题确实让我很沮丧,但我终于弄明白了。

我有一个 Flask/SQLAlchemy 应用程序与一个较旧的 PHP 网站一起运行。PHP 网站会写入数据库,而 SQLAlchemy 不会察觉任何更改。

我尝试过 sessionmaker 设置 autoflush=True,但没有成功。在查询之前,我尝试过 db_session.flush()、db_session.expire_all() 和 db_session.commit(),但都不起作用。仍然显示过时的数据。

最后,我偶然发现了 SQLAlchemy 文档的这一部分:http://docs.sqlalchemy.org/en/latest/dialects/postgresql.html#transaction-isolation-level

设置isolation_level效果很好。现在我的Flask应用程序正在与PHP应用程序“对话”。以下是代码:

engine = create_engine(
    "postgresql+pg8000://scott:tiger@localhost/test",
    isolation_level="READ UNCOMMITTED"
)

当 SQLAlchemy 引擎以“READ UNCOMMITED”isolation_level 启动时,它将执行“脏读”,这意味着它将直接从数据库读取未提交的更改。

希望这有帮助


以下是 AaronD 在评论中提出的可能的解决方案

from flask.ext.sqlalchemy import SQLAlchemy

class UnlockedAlchemy(SQLAlchemy):
    def apply_driver_hacks(self, app, info, options):
        if "isolation_level" not in options:
            options["isolation_level"] = "READ COMMITTED"
    return super(UnlockedAlchemy, self).apply_driver_hacks(app, info, options)

解决方案 3:

除了zzzeek出色的答案之外,

我遇到了类似的问题。我通过使用简短的生活会话解决了这个问题。

with closing(new_session()) as sess:
    # do your stuff

我为每个任务、任务组或请求(在 Web 应用程序的情况下)使用了一个新的会话。这为我解决了“缓存”问题。

这些材料对我非常有用:

何时构造会话、何时提交会话、何时关闭会话

解决方案 4:

我已尝试过,session.commit(), session.flush()但都不起作用。

在查看了 sqlalchemy 源代码后,我找到了禁用缓存的解决方案。

设置query_cache_size=0有效create_engine

create_engine(connection_string, convert_unicode=True, echo=True, query_cache_size=0)

解决方案 5:

这发生在我的 Flask 应用程序中,我的解决方案是在每次请求之后使会话中的所有对象过期。

from flask.signals import request_finished
def expire_session(sender, response, **extra):
    app.db.session.expire_all()
request_finished.connect(expire_session, flask_app)

非常有效。

解决方案 6:

与其他人可能相关的一件事是,当您创建会话并且引擎时,要传递expire_on_commit=True到 sessionmaker 调用中。

sessionmaker(bind=engine, expire_on_commit=True)

我遇到了一些问题,其中 sqlalchemy 关系在创建和提交后没有开始刷新(因为在我的关系中我定义了一个order_by函数,但我的次要对象没有按照预期的顺序排列,这解决了这个问题。

解决方案 7:

首先,SQLAlchemy 没有缓存。根据你从数据库获取数据的方法,你应该在数据库被其他人更新后做一些测试,看看是否可以获取新数据。

(1) use connection:
connection = engine.connect()
result = connection.execute("select username from users")
for row in result:
    print "username:", row['username']
connection.close()
(2) use Engine ...
(3) use MegaData...

请按照以下步骤操作:http://docs.sqlalchemy.org/en/latest/core/connections.html

另一个可能的原因是您的 MySQL DB 未永久更新。重新启动 MySQL 服务并进行检查。

解决方案 8:

import sqlalchemy as db
db.create_engine(db_string, query_cache_size=0, pool_size=30, max_overflow=0, pool_pre_ping=True, echo=True, echo_pool=True)

运行代码片段Hide results展开片段

我们可以在 sqlalchemy 1.3.13 以上的版本中解决这个问题,低于这个版本不支持禁用语句缓存。

解决方案 9:

据我所知,SQLAlchemy不存储缓存,因此您需要查看日志输出。

相关推荐
  政府信创国产化的10大政策解读一、信创国产化的背景与意义信创国产化,即信息技术应用创新国产化,是当前中国信息技术领域的一个重要发展方向。其核心在于通过自主研发和创新,实现信息技术应用的自主可控,减少对外部技术的依赖,并规避潜在的技术制裁和风险。随着全球信息技术竞争的加剧,以及某些国家对中国在科技领域的打压,信创国产化显...
工程项目管理   2482  
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1533  
  PLM(产品生命周期管理)项目对于企业优化产品研发流程、提升产品质量以及增强市场竞争力具有至关重要的意义。然而,在项目推进过程中,范围蔓延是一个常见且棘手的问题,它可能导致项目进度延迟、成本超支以及质量下降等一系列不良后果。因此,有效避免PLM项目范围蔓延成为项目成功的关键因素之一。以下将详细阐述三大管控策略,助力企业...
plm系统   0  
  PLM(产品生命周期管理)项目管理在企业产品研发与管理过程中扮演着至关重要的角色。随着市场竞争的加剧和产品复杂度的提升,PLM项目面临着诸多风险。准确量化风险优先级并采取有效措施应对,是确保项目成功的关键。五维评估矩阵作为一种有效的风险评估工具,能帮助项目管理者全面、系统地评估风险,为决策提供有力支持。五维评估矩阵概述...
免费plm软件   0  
  引言PLM(产品生命周期管理)开发流程对于企业产品的全生命周期管控至关重要。它涵盖了从产品概念设计到退役的各个阶段,直接影响着产品质量、开发周期以及企业的市场竞争力。在当今快速发展的科技环境下,客户对产品质量的要求日益提高,市场竞争也愈发激烈,这就使得优化PLM开发流程成为企业的必然选择。缺陷管理工具和六西格玛方法作为...
plm产品全生命周期管理   0  
热门文章
项目管理软件有哪些?
曾咪二维码

扫码咨询,免费领取项目管理大礼包!

云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用