草庐IT

c++ - 完善相机参数并计算错误-OpenCV

coder 2023-11-15 原文

我一直在尝试使用CvLevMarq完善我的相机参数,但是在阅读之后,似乎会导致混合结果-这正是我所遇到的。我阅读了有关替代方案的介绍,并了解了EIGEN-并发现了利用它的this library

但是,上面的库似乎使用了不支持OpenCV的拼接类,可能会要求我将其移植到OpenCV

在继续进行之前,这可能不是一件容易的事,我想我先问一下,看看是否有人遇到同样的问题?

我正在使用:

1. 使用FASTFeatureDetector计算特征

Ptr<FeatureDetector> detector = new FastFeatureDetector(5,true);
detector->detect(firstGreyImage, features_global[firstImageIndex].keypoints); // Previous picture
detector->detect(secondGreyImage, features_global[secondImageIndex].keypoints); // New picture

2. 使用SIFTDescriptorExtractor提取功能
Ptr<SiftDescriptorExtractor> extractor = new SiftDescriptorExtractor();
extractor->compute(firstGreyImage, features_global[firstImageIndex].keypoints, features_global[firstImageIndex].descriptors); // Previous Picture
extractor->compute(secondGreyImage, features_global[secondImageIndex].keypoints, features_global[secondImageIndex].descriptors); // New Picture

3. BestOf2NearestMatcher的匹配功能
vector<MatchesInfo> pairwise_matches;
BestOf2NearestMatcher matcher(try_use_gpu, 0.50f);
matcher(features_global, pairwise_matches);
matcher.collectGarbage();

4.从设备传递的 CameraParams.R四元数(略有误差,这会导致问题)

5. CameraParams.Focal == 389.0f-以此值播放,389.0f是唯一与水平但垂直不匹配的图像的值。

6. Bundle Adjustment(cvLevMarqcalcErrorcalcJacobian)
Ptr<BPRefiner> adjuster = new BPRefiner();
adjuster->setConfThresh(0.80f);
adjuster->setMaxIterations(5);
(*adjuster)(features,pairwise_matches,cameras);

7. ExposureCompensator(GAIN)

8. OpenCV MultiBand Blender
到目前为止有效:
  • SeamFinder-在某种程度上可以工作,但要取决于cvLevMarq算法的结果。 IE。如果算法关闭,seamFinder也将关闭。
  • HomographyBasedEstimator效果很好。但是,由于它“依赖”功能,因此很遗憾,它不是我要寻找的方法。

  • 我不想依赖这些功能,因为我已经有了矩阵,如果有办法代替“优化”当前矩阵,那将是目标结果。

    到目前为止的结果:
    cvLevMarq“俄罗斯轮盘” 6/10:

    这就是我想要达到的10/10倍。但是4/10倍,看起来像这张照片下面的照片。



    只要简单地重新运行算法,结果就会改变。看起来是这样(或更糟)的4/10倍:
    cvLevMarq“俄罗斯轮盘” 4/10:



    所需结果:

    我想使用匹配的功能来“优化”相机参数-希望图像能够完美对齐。除了希望cvLevMarq为我做这件事(它不会做4/10次)之外,还有另一种方法来确保图像对齐吗?

    更新:

    我已经尝试过以下版本:

    OpenCV 3.1:在3.1中使用CVLevMarq就像玩俄罗斯轮盘一样。有时它可以使它们完美对齐,而有时它会将焦点估计为NAN,这会在MultiBand Blender中引起段错误(由于NAN,ROI = 0,0,1,1)

    OpenCV 2.4.9/2.4.13:不幸的是,在2.4.9或2.4.13中使用CvLevMarq是减去NAN问题的同一件事。它可以完美对齐图像的6/10倍,但其他4倍则完全关闭。

    我的推测/想法:

    使用OpenCV的
  • Template Matching。也许如果我模板匹配图像的末端(即x = 0,y = 0,height = image.height,width = 50)。有什么想法吗?
  • 我发现
  • 是一篇有关Levenberg Marquardt在同形学中应用的有趣论文。这看起来像可以解决我的问题的东西,因为该论文使用角点检测而不是其他方法来检测图像中的特征。有什么想法吗?
  • 也许问题出在CvLevMarq中,而不是BestOf2NearestMatcher中?但是,我已经搜索了几天,找不到另一个返回成对匹配并传递给BPRefiner的方法。
  • this检测第一张/第二张图像中的线条,并使用它们对齐图像。有什么想法吗? -一件事可能是,如果图像没有任何线条怎么办? IE。空墙?
  • 也许我过于简单了一些。.或者也许我不是吗?基本上,我正在尝试对齐一组图像,以便可以使它们变形而不会彼此重叠。如果没有意义,请发表评论:)

  • 8月12日更新:

    在尝试了各种组合之后,到目前为止,绝对最好的是CvLevMarq。唯一的问题是上图所示的混合结果。如果有人有任何意见,我将永远感激不已。

    最佳答案

    看来您的参数初始化是问题所在。我会先使用线性估算器,即忽略您的噪声传感器,然后将其用作非线性优化器的初始值。

    一种快速的方法是使用 getaffinetransform ,因为您大多数情况下会轮换使用。

    关于c++ - 完善相机参数并计算错误-OpenCV,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38861985/

    有关c++ - 完善相机参数并计算错误-OpenCV的更多相关文章

    1. ruby-on-rails - Rails 常用字符串(用于通知和错误信息等) - 2

      大约一年前,我决定确保每个包含非唯一文本的Flash通知都将从模块中的方法中获取文本。我这样做的最初原因是为了避免一遍又一遍地输入相同的字符串。如果我想更改措辞,我可以在一个地方轻松完成,而且一遍又一遍地重复同一件事而出现拼写错误的可能性也会降低。我最终得到的是这样的:moduleMessagesdefformat_error_messages(errors)errors.map{|attribute,message|"Error:#{attribute.to_s.titleize}#{message}."}enddeferror_message_could_not_find(obje

    2. ruby-on-rails - 如何在 ruby​​ 中使用两个参数异步运行 exe? - 2

      exe应该在我打开页面时运行。异步进程需要运行。有什么方法可以在ruby​​中使用两个参数异步运行exe吗?我已经尝试过ruby​​命令-system()、exec()但它正在等待过程完成。我需要用参数启动exe,无需等待进程完成是否有任何ruby​​gems会支持我的问题? 最佳答案 您可以使用Process.spawn和Process.wait2:pid=Process.spawn'your.exe','--option'#Later...pid,status=Process.wait2pid您的程序将作为解释器的子进程执行。除

    3. ruby-on-rails - 如何优雅地重启 thin + nginx? - 2

      我的瘦服务器配置了nginx,我的ROR应用程序正在它们上运行。在我发布代码更新时运行thinrestart会给我的应用程序带来一些停机时间。我试图弄清楚如何优雅地重启正在运行的Thin实例,但找不到好的解决方案。有没有人能做到这一点? 最佳答案 #Restartjustthethinserverdescribedbythatconfigsudothin-C/etc/thin/mysite.ymlrestartNginx将继续运行并代理请求。如果您将Nginx设置为使用多个上游服务器,例如server{listen80;server

    4. ruby - RSpec - 使用测试替身作为 block 参数 - 2

      我有一些Ruby代码,如下所示:Something.createdo|x|x.foo=barend我想编写一个测试,它使用double代替block参数x,这样我就可以调用:x_double.should_receive(:foo).with("whatever").这可能吗? 最佳答案 specify'something'dox=doublex.should_receive(:foo=).with("whatever")Something.should_receive(:create).and_yield(x)#callthere

    5. ruby-on-rails - 使用一系列等级计算字母等级 - 2

      这里是Ruby新手。完成一些练习后碰壁了。练习:计算一系列成绩的字母等级创建一个方法get_grade来接受测试分数数组。数组中的每个分数应介于0和100之间,其中100是最大分数。计算平均分并将字母等级作为字符串返回,即“A”、“B”、“C”、“D”、“E”或“F”。我一直返回错误:avg.rb:1:syntaxerror,unexpectedtLBRACK,expecting')'defget_grade([100,90,80])^avg.rb:1:syntaxerror,unexpected')',expecting$end这是我目前所拥有的。我想坚持使用下面的方法或.join,

    6. ruby - 如何在 Ruby 中拆分参数字符串 Bash 样式? - 2

      我正在为一个项目制作一个简单的shell,我希望像在Bash中一样解析参数字符串。foobar"helloworld"fooz应该变成:["foo","bar","helloworld","fooz"]等等。到目前为止,我一直在使用CSV::parse_line,将列分隔符设置为""和.compact输出。问题是我现在必须选择是要支持单引号还是双引号。CSV不支持超过一个分隔符。Python有一个名为shlex的模块:>>>shlex.split("Test'helloworld'foo")['Test','helloworld','foo']>>>shlex.split('Test"

    7. ruby - 检查方法参数的类型 - 2

      我不确定传递给方法的对象的类型是否正确。我可能会将一个字符串传递给一个只能处理整数的函数。某种运行时保证怎么样?我看不到比以下更好的选择:defsomeFixNumMangler(input)raise"wrongtype:integerrequired"unlessinput.class==FixNumother_stuffend有更好的选择吗? 最佳答案 使用Kernel#Integer在使用之前转换输入的方法。当无法以任何合理的方式将输入转换为整数时,它将引发ArgumentError。defmy_method(number)

    8. ruby-on-rails - 在默认方法参数中使用 .reverse_merge 或 .merge - 2

      两者都可以defsetup(options={})options.reverse_merge:size=>25,:velocity=>10end和defsetup(options={}){:size=>25,:velocity=>10}.merge(options)end在方法的参数中分配默认值。问题是:哪个更好?您更愿意使用哪一个?在性能、代码可读性或其他方面有什么不同吗?编辑:我无意中添加了bang(!)...并不是要询问nobang方法与bang方法之间的区别 最佳答案 我倾向于使用reverse_merge方法:option

    9. ruby-on-rails - 迷你测试错误 : "NameError: uninitialized constant" - 2

      我遵循MichaelHartl的“RubyonRails教程:学习Web开发”,并创建了检查用户名和电子邮件长度有效性的测试(名称最多50个字符,电子邮件最多255个字符)。test/helpers/application_helper_test.rb的内容是:require'test_helper'classApplicationHelperTest在运行bundleexecraketest时,所有测试都通过了,但我看到以下消息在最后被标记为错误:ERROR["test_full_title_helper",ApplicationHelperTest,1.820016791]test

    10. ruby-on-rails - 如何在 Rails View 上显示错误消息? - 2

      我是rails的新手,想在form字段上应用验证。myviewsnew.html.erb.....模拟.rbclassSimulation{:in=>1..25,:message=>'Therowmustbebetween1and25'}end模拟Controller.rbclassSimulationsController我想检查模型类中row字段的整数范围,如果不在范围内则返回错误信息。我可以检查上面代码的范围,但无法返回错误消息提前致谢 最佳答案 关键是您使用的是模型表单,一种显示ActiveRecord模型实例属性的表单。c

    随机推荐