草庐IT

python - 为什么 cURL 返回 "additional stuff not fine"？

coder 2023-05-24 原文

我正在编写一个通过 cURL 查询社交媒体 API 的 Python 应用程序。我查询的大多数不同服务器(Google+、Reddit、Twitter、Facebook 等)都有 cURL 提示:

additional stuff not fine transfer.c:1037: 0 0

不寻常的是，当应用程序第一次启动时，每个服务的响应都会抛出这一行或两次。几分钟后，这条线会出现几次。显然 cURL 正在识别它不喜欢的东西。大约半小时后，服务器开始超时，这条线重复了几十次，所以它显示出一个真正的问题。

我该如何诊断？我尝试使用 Wireshark 捕获请求和响应 header 以搜索可能导致 cURL 提示的异常，但对于所有 Wireshark 的复杂性，似乎没有办法隔离和仅显示 header 。

以下是代码的相关部分:

output = cStringIO.StringIO()
c = pycurl.Curl()
c.setopt(c.URL, url)
c.setopt(c.USERAGENT, 'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:17.0) Gecko/20100101 Firefox/17.0')
c.setopt(c.WRITEFUNCTION, output.write)
c.setopt(c.CONNECTTIMEOUT, 10) 
c.setopt(c.TIMEOUT, 15) 
c.setopt(c.FAILONERROR, True)
c.setopt(c.NOSIGNAL, 1)

try:
    c.perform()
    toReturn = output.getvalue()
    output.close()
    return toReturn

except pycurl.error, error:
    errno, errstr = error
    print 'The following cURL error occurred: ', errstr

最佳答案

我 99.99% 确定这实际上不在任何 HTTP header 中，而是由 libcurl 打印到 stderr。这可能发生在您记录 header 的过程中，这就是您感到困惑的原因。

无论如何，快速搜索 "additional stuff not fine"curl transfer.c 出现 a recent change in the source描述在哪里:

Curl_readwrite: remove debug output

The text "additional stuff not fine" text was added for debug purposes a while ago, but it isn't really helping anyone and for some reason some Linux distributions provide their libcurls built with debug info still present and thus (far too many) users get to read this info.

所以，这基本上是无害的，您看到它的唯一原因是您获得了启用了完整调试日志记录的 libcurl 构建(可能来自您的 linux 发行版)(尽管curl 作者认为这是个坏主意)。所以你有三个选择:

  1. 忽略它。
  2. 升级到更高版本的 libcurl。
  3. 在没有调试信息的情况下重新构建 libcurl。

您可以查看 transfer.c 的 libcurl 源代码(如上面的链接)，以尝试了解 curl 提示的内容，并且可能会在大约同一时间在邮件列表中查找线程，或者只是通过电子邮件发送列表并询问。

但是，我怀疑这实际上可能与真正的问题根本不相关，因为您甚至从一开始就看到了这一点。

这里有三个明显的地方可能会出错:

  1. curl 中的错误，或者您使用它的方式。
  2. 您的网络设置有问题(例如，您的 ISP 会因为您在 30 分钟内建立过多的传出连接或使用过多的字节而将您中断)。
  3. 您正在做的事情是让服务器认为您是垃圾邮件发送者/DoS 攻击者/其他任何人，他们正在阻止您。

第一个实际上似乎最不可能。如果你想排除它，只需捕获你发出的所有请求，然后编写一个简单的脚本，使用其他库来重放完全相同的请求，看看你是否得到相同的行为。如果是这样，问题显然不在于您如何提出请求。

您可以根据时间区分情况 2 和 3。如果所有服务同时超时——尤其是当您在不同时间开始点击它们时它们都超时(例如，您在 Facebook 后 15 分钟开始点击 Google+，但它们都在您点击 Facebook 30 分钟后超时) ，肯定是情况2。如果不是，可能是情况3。

如果您排除所有这三个，那么您可以开始寻找其他可能出错的地方，但我会从这里开始。

或者，如果您告诉我们更多关于您的应用的具体用途(例如，您是否尝试以尽可能快的速度一遍又一遍地访问服务器？您是否尝试代表大量不同的用户进行连接？是您使用的是开发 key 还是最终用户应用程序 key ？等等)，其他对这些服务有更多经验的人可能会猜到。

关于python - 为什么 cURL 返回 "additional stuff not fine"？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/13943181/

additionalampcodesection的pythoncurl

有关python - 为什么 cURL 返回 "additional stuff not fine"？的更多相关文章

  1. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法？ - 2

    类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

  2. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声？ - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题？更新问题，以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点？我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等)，但我确实想创建一个输出文件。

  3. ruby-on-rails - rails : "missing partial" when calling 'render' in RSpec test - 2

    我正在尝试测试是否存在表单。我是Rails新手。我的new.html.erb_spec.rb文件的内容是:require'spec_helper'describe"messages/new.html.erb"doit"shouldrendertheform"dorender'/messages/new.html.erb'reponse.shouldhave_form_putting_to(@message)with_submit_buttonendendView本身，new.html.erb，有代码:当我运行rspec时，它失败了:1)messages/new.html.erbshou

  4. ruby-on-rails - 由于 "wkhtmltopdf"，PDFKIT 显然无法正常工作 - 2

    我在从html页面生成PDF时遇到问题。我正在使用PDFkit。在安装它的过程中，我注意到我需要wkhtmltopdf。所以我也安装了它。我做了PDFkit的文档所说的一切......现在我在尝试加载PDF时遇到了这个错误。这里是错误:commandfailed:"/usr/local/bin/wkhtmltopdf""--margin-right""0.75in""--page-size""Letter""--margin-top""0.75in""--margin-bottom""0.75in""--encoding""UTF-8""--margin-left""0.75in""-

  5. ruby-on-rails - Rails - 子类化模型的设计模式是什么？ - 2

    我有一个模型:classItem项目有一个属性“商店”基于存储的值，我希望Item对象对特定方法具有不同的行为。Rails中是否有针对此的通用设计模式？如果方法中没有大的if-else语句，这是如何干净利落地完成的？ 最佳答案 通常通过Single-TableInheritance. 关于ruby-on-rails-Rails-子类化模型的设计模式是什么？，我们在StackOverflow上找到一个类似的问题： https://stackoverflow.co

  6. ruby - 什么是填充的 Base64 编码字符串以及如何在 ruby​​ 中生成它们？ - 2

    我正在使用的第三方API的文档状态:"[O]urAPIonlyacceptspaddedBase64encodedstrings."什么是“填充的Base64编码字符串”以及如何在Ruby中生成它们。下面的代码是我第一次尝试创建转换为Base64的JSON格式数据。xa=Base64.encode64(a.to_json) 最佳答案 他们说的padding其实就是Base64本身的一部分。它是末尾的“=”和“==”。Base64将3个字节的数据包编码为4个编码字符。所以如果你的输入数据有长度n和n%3=1=>"=="末尾用于填充n%

  7. ruby - 解析 RDFa、微数据等的最佳方式是什么，使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作，但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式，例如使用这个yaml文件，它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  8. ruby - 为什么 4.1%2 使用 Ruby 返回 0.0999999999999996？但是 4.2%2==0.2 - 2

    为什么4.1%2返回0.0999999999999996？但是4.2%2==0.2。 最佳答案 参见此处:WhatEveryProgrammerShouldKnowAboutFloating-PointArithmetic实数是无限的。计算机使用的位数有限(今天是32位、64位)。因此计算机进行的浮点运算不能代表所有的实数。0.1是这些数字之一。请注意，这不是与Ruby相关的问题，而是与所有编程语言相关的问题，因为它来自计算机表示实数的方式。 关于ruby-为什么4.1%2使用Ruby返

  9. ruby - 检查 "command"的输出应该包含 NilClass 的意外崩溃 - 2

    为了将Cucumber用于命令行脚本，我按照提供的说明安装了arubagem。它在我的Gemfile中，我可以验证是否安装了正确的版本并且我已经包含了require'aruba/cucumber'在'features/env.rb'中为了确保它能正常工作，我写了以下场景:@announceScenario:Testingcucumber/arubaGivenablankslateThentheoutputfrom"ls-la"shouldcontain"drw"假设事情应该失败。它确实失败了，但失败的原因是错误的:@announceScenario:Testingcucumber/ar

  10. ruby - ruby 中的 TOPLEVEL_BINDING 是什么？ - 2

    它不等于主线程的binding，这个toplevel作用域是什么？此作用域与主线程中的binding有何不同？>ruby-e'putsTOPLEVEL_BINDING===binding'false 最佳答案 事实是，TOPLEVEL_BINDING始终引用Binding的预定义全局实例，而Kernel#binding创建的新实例>Binding每次封装当前执行上下文。在顶层，它们都包含相同的绑定(bind)，但它们不是同一个对象，您无法使用==或===测试它们的绑定(bind)相等性。putsTOPLEVEL_BINDINGput

随机推荐