草庐IT

python sqlalchemy + postgresql程序卡住

coder 2023-05-25 原文

我遇到了一个奇怪的情况。我正在为我的程序编写一些测试用例。该程序被编写为在 sqllite 或 postgresqul 上工作，具体取决于偏好。现在我正在使用 unittest 编写我的测试代码。基本上我在做什么:

def setUp(self):
    """
        Reset the database before each test.
    """
    if os.path.exists(root_storage):
        shutil.rmtree(root_storage)
    reset_database()
    initialize_startup()
    self.project_service = ProjectService()
    self.structure_helper = FilesHelper()
    user = model.User("test_user", "test_pass", "test_mail@tvb.org",
                       True, "user")
    self.test_user = dao.store_entity(user)

在设置中，我删除了所有存在的文件夹(由一些测试创建)，然后我重置了我的数据库(基本上是删除表级联)，然后我再次初始化数据库并创建一些将用于测试的服务。 

def tearDown(self):
    """
        Remove project folders and clean up database.
    """
    created_projects = dao.get_projects_for_user(self.test_user.id)
    for project in created_projects:
        self.structure_helper.remove_project_structure(project.name)
    reset_database()

除了创建服务之外，Tear down 做同样的事情，因为这个测试模块与其他模块是同一个套件的一部分，我不希望某些测试留下一些东西。

现在我的所有测试都可以在 sqllite 上运行良好。使用 postgresql 我遇到了一个非常奇怪的情况:在执行的某个时刻，实际上与运行之间的差异很小(例如一两个额外的调用)，程序只是停止了。我的意思是没有产生错误，没有抛出异常，程序只是停止。

现在我唯一能想到的是，不知何故我忘记了某处打开的连接，并且在我超时并且发生了一些事情之后。但是我有很多联系，所以在我开始研究所有代码之前，我会很感激一些建议/意见。

什么可能导致这种行为？从哪里开始寻找？

问候， 波格丹

最佳答案

基于 PostgreSQL 的应用程序卡住，因为 PG 相当积极地锁定表，特别是如果在挂起的事务中打开任何连接，并且以任何方式访问该表(包括 SELECT)，它将不允许 DROP 命令继续。

如果您使用的是 unix 系统，命令“ps -ef | grep 'post'”将显示所有 Postgresql 进程，您将看到当前命令的状态，包括挂起的“DROP TABLE”或不管它是什么，它都卡住了。如果您从 pg_stat_activity View 中选择，也可以看到它。

所以关键是确保没有待处理的事务 - 这意味着在 DBAPI 级别上，任何结果游标都已关闭，并且当前打开的任何连接都调用了 rollback()，或以其他方式明确关闭。在 SQLAlchemy 中，这意味着任何带有待处理行的结果集(即 ResultProxy)都已完全耗尽，并且任何 Connection 对象都已被 close()d，它将它们返回到池中并在底层 DBAPI 连接上调用 rollback()。您需要确保有某种无条件的拆卸代码，以确保在发出任何 DROP TABLE 类型的命令之前发生这种情况。

就“我有很多人脉”而言，您应该控制它。当 SQLA 测试套件通过其 3000 项测试时，我们确保我们完全控制连接，并且通常一次只打开一个连接(不过，在 Pypy 上运行有一些仍然 导致 PG 挂起 .. 它很难)。有一个名为 AssertionPool 的池类，您可以使用它来确保一次只 check out 一个连接，否则会引发信息性错误(显示它被 check out 的位置)。

关于python sqlalchemy + postgresql程序卡住，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/6778942/

卡住postgresqlcodesection34pythonsqlalchemy

有关python sqlalchemy + postgresql程序卡住的更多相关文章

  1. ruby - 在 Ruby 程序执行时阻止 Windows 7 PC 进入休眠状态 - 2

    我需要在客户计算机上运行Ruby应用程序。通常需要几天才能完成(复制大备份文件)。问题是如果启用sleep，它会中断应用程序。否则，计算机将持续运行数周，直到我下次访问为止。有什么方法可以防止执行期间休眠并让Windows在执行后休眠吗？欢迎任何疯狂的想法;-) 最佳答案 Here建议使用SetThreadExecutionStateWinAPI函数，使应用程序能够通知系统它正在使用中，从而防止系统在应用程序运行时进入休眠状态或关闭显示。像这样的东西:require'Win32API'ES_AWAYMODE_REQUIRED=0x0

  2. ruby - 如何指定 Rack 处理程序 - 2

    Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时，rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack

  3. ruby - 在 Ruby 中编写命令行实用程序 - 2

    我想用ruby​​编写一个小的命令行实用程序并将其作为gem分发。我知道安装后，Guard、Sass和Thor等某些gem可以从命令行自行运行。为了让gem像二进制文件一样可用，我需要在我的gemspec中指定什么。 最佳答案 Gem::Specification.newdo|s|...s.executable='name_of_executable'...endhttp://docs.rubygems.org/read/chapter/20 关于ruby-在Ruby中编写命令行实用程序

  4. ruby-on-rails - Rails 应用程序之间的通信 - 2

    我构建了两个需要相互通信和发送文件的Rails应用程序。例如，一个Rails应用程序会发送请求以查看其他应用程序数据库中的表。然后另一个应用程序将呈现该表的json并将其发回。我还希望一个应用程序将存储在其公共(public)目录中的文本文件发送到另一个应用程序的公共(public)目录。我从来没有做过这样的事情，所以我什至不知道从哪里开始。任何帮助，将不胜感激。谢谢! 最佳答案 无论Rails是什么，几乎所有Web应用程序都有您的要求，大多数现代Web应用程序都需要相互通信。但是有一个小小的理解需要你坚持下去，网站不应直接访问彼此

  5. ruby - 无法运行 Rails 2.x 应用程序 - 2

    我尝试运行2.x应用程序。我使用rvm并为此应用程序设置其他版本的ruby​​:$rvmuseree-1.8.7-head我尝试运行服务器，然后出现很多错误:$script/serverNOTE:Gem.source_indexisdeprecated,useSpecification.Itwillberemovedonorafter2011-11-01.Gem.source_indexcalledfrom/Users/serg/rails_projects_terminal/work_proj/spohelp/config/../vendor/rails/railties/lib/r

  6. ruby-on-rails - 如何优雅地重启 thin + nginx？ - 2

    我的瘦服务器配置了nginx，我的ROR应用程序正在它们上运行。在我发布代码更新时运行thinrestart会给我的应用程序带来一些停机时间。我试图弄清楚如何优雅地重启正在运行的Thin实例，但找不到好的解决方案。有没有人能做到这一点？ 最佳答案 #Restartjustthethinserverdescribedbythatconfigsudothin-C/etc/thin/mysite.ymlrestartNginx将继续运行并代理请求。如果您将Nginx设置为使用多个上游服务器，例如server{listen80;server

  7. ruby-on-rails - Rails 应用程序中的 Rails : How are you using application_controller. rb 是新手吗？ - 2

    刚入门rails，开始慢慢理解。有人可以解释或给我一些关于在application_controller中编码的好处或时间和原因的想法吗？有哪些用例。您如何为Rails应用程序使用应用程序Controller？我不想在那里放太多代码，因为据我了解，每个请求都会调用此Controller。这是真的？ 最佳答案 ApplicationController实际上是您应用程序中的每个其他Controller都将从中继承的类(尽管这不是强制性的)。我同意不要用太多代码弄乱它并保持干净整洁的态度，尽管在某些情况下ApplicationContr

  8. ruby-on-rails - 如何在我的 Rails 应用程序 View 中打印 ruby​​ 变量的内容？ - 2

    我是一个Rails初学者，但我想从我的RailsView(html.haml文件)中查看Ruby变量的内容。我试图在ruby​​中打印出变量(认为它会在终端中出现)，但没有得到任何结果。有什么建议吗？我知道Rails调试器，但更喜欢使用inspect来打印我的变量。 最佳答案 您可以在View中使用puts方法将信息输出到服务器控制台。您应该能够在View中的任何位置使用Haml执行以下操作:-puts@my_variable.inspect 关于ruby-on-rails-如何在我的R

  9. ruby - 检查是否通过 require 执行或导入了 Ruby 程序 - 2

    如何检查Ruby文件是否是通过“require”或“load”导入的，而不是简单地从命令行执行的？例如:foo.rb的内容:puts"Hello"bar.rb的内容require'foo'输出:$./foo.rbHello$./bar.rbHello基本上，我想调用bar.rb以不执行puts调用。 最佳答案 将foo.rb改为:if__FILE__==$0puts"Hello"end检查__FILE__-当前ruby​​文件的名称-与$0-正在运行的脚本的名称。 关于ruby-检查是否

  10. ruby-on-rails - 如何在 Gem 中获取 Rails 应用程序的根目录 - 2

    是否可以在应用程序中包含的gem代码中知道应用程序的Rails文件系统根目录？这是gem来源的示例:moduleMyGemdefself.included(base)putsRails.root#returnnilendendActionController::Base.send:include,MyGem谢谢，抱歉我的英语不好 最佳答案 我发现解决类似问题的解决方案是使用railtie初始化程序包含我的模块。所以，在你的/lib/mygem/railtie.rbmoduleMyGemclassRailtie使用此代码，您的模块将在

随机推荐