我有一个服务器应用程序,它呈现一个 30 FPS 的视频流,然后将其实时编码和多路复用到一个 WebM Byte Stream 中。 .
在客户端,HTML5 页面向服务器打开一个 WebSocket,当连接被接受时服务器开始生成流。传递 header 后,每个后续的 WebSocket 帧都由一个 WebM SimpleBlock 组成。每 15 帧出现一个关键帧,当发生这种情况时,将启动一个新的集群。
客户端还创建了一个 MediaSource ,并在从 WS 接收到帧后,将内容附加到其事件缓冲区。 <video>附加第一帧后立即开始播放。
一切正常。我唯一的问题是网络抖动导致播放位置在一段时间后偏离实际时间。我目前的解决方案是 Hook updateend事件,检查 video.currentTime 之间的区别和传入集群上的时间码并手动更新 currentTime如果它超出了可接受的范围。不幸的是,这会导致播放过程中出现明显的停顿和跳转,令人不快。
该解决方案也感觉有点奇怪:我确切地知道最新的关键帧在哪里,但我必须将它转换为整秒(根据 W3C 规范),然后才能将其传递给 currentTime ,浏览器大概必须四处寻找最近的关键帧。
我的问题是:有没有办法让媒体元素始终寻找可用的最新关键帧,或者保持播放时间与系统时钟时间同步?
最佳答案
network jitter causes the playback position to drift
那不是你的问题。如果您在流中遇到丢失,则说明您在开始播放之前没有足够的缓冲,并且播放只有适当大小的缓冲区,即使比实时延迟几秒钟(这是正常的)。
My current solution is to hook into the updateend event, check the difference between the video.currentTime and the timecode on the incoming Cluster
这接近于正确的方法。我建议您忽略传入集群的时间码,而是检查您的缓冲时间范围。您在 WebM 集群上收到的内容和已解码的内容是两件不同的事情。
Unfortunately, this causes a noticeable pause and jump in the playback which is rather unpleasant.
否则你会怎么做?您可以跳转到实时,也可以提高播放速度以 catch 实时。无论哪种方式,如果您想 catch 实时,就必须及时跳过。
The solution also feels a bit odd: I know exactly where the latest keyframe is
您可以,但播放器必须等到该媒体被解码后才能播放。在任何情况下,关键帧都是无关紧要的……您可以寻找非关键帧位置。浏览器将根据需要提前解码 P/B 帧。
I have to convert it into a whole second (as per the W3C spec) before I can pass it into currentTime
这完全是错误的。 currentTime 指定为 double。 https://www.w3.org/TR/2011/WD-html5-20110113/video.html#dom-media-currenttime
My question is this: is there a way to tell the Media Element to always seek to the latest keyframe available, or keep the playback time synchronised with the system clock time?
它将自动播放最后一个缓冲区。你不需要做任何事情。您通过确保媒体数据到达缓冲区并将播放设置为尽可能接近合理来完成您的工作。如果网络条件发生变化允许您执行此操作,您始终可以将其向前推进,但坦率地说,这听起来好像您只是遇到了损坏的代码和损坏的缓冲策略。否则,播放会很流畅。
落后追赶不会自动发生,也不应该发生。如果播放器由于缓冲区耗尽而暂停,则需要在恢复播放之前再次建立缓冲区。这就是缓冲区的全部意义所在。
此外,您期望任何事物都与系统时钟保持同步不是一个好主意,也不合理。不同的设备具有不同的刷新率,将以不同的速率处理视频。只需点击播放,让它播放。如果您最终停顿了几秒钟,请继续设置 currentTime,但在执行此操作之前对您缓冲的内容非常有信心。
关于javascript - 如何保持实时 MediaSource 视频流同步?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23301496/
我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div
总的来说,我对ruby还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用
关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。
给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息? 最佳答案 在Rails3中,update_all不返回任何有意义的信息,除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru
我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t
我正在寻找执行以下操作的正确语法(在Perl、Shell或Ruby中):#variabletoaccessthedatalinesappendedasafileEND_OF_SCRIPT_MARKERrawdatastartshereanditcontinues. 最佳答案 Perl用__DATA__做这个:#!/usr/bin/perlusestrict;usewarnings;while(){print;}__DATA__Texttoprintgoeshere 关于ruby-如何将脚
Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时,rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack
在选择我想要运行操作的频率时,唯一的选项是“每天”、“每小时”和“每10分钟”。谢谢!我想为我的Rails3.1应用程序运行调度程序。 最佳答案 这不是一个优雅的解决方案,但您可以安排它每天运行,并在实际开始工作之前检查日期是否为当月的第一天。 关于ruby-如何每月在Heroku运行一次Scheduler插件?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions/8692687/
我有一个对象has_many应呈现为xml的子对象。这不是问题。我的问题是我创建了一个Hash包含此数据,就像解析器需要它一样。但是rails自动将整个文件包含在.........我需要摆脱type="array"和我该如何处理?我没有在文档中找到任何内容。 最佳答案 我遇到了同样的问题;这是我的XML:我在用这个:entries.to_xml将散列数据转换为XML,但这会将条目的数据包装到中所以我修改了:entries.to_xml(root:"Contacts")但这仍然将转换后的XML包装在“联系人”中,将我的XML代码修改为
我有一大串格式化数据(例如JSON),我想使用Psychinruby同时保留格式转储到YAML。基本上,我希望JSON使用literalstyle出现在YAML中:---json:|{"page":1,"results":["item","another"],"total_pages":0}但是,当我使用YAML.dump时,它不使用文字样式。我得到这样的东西:---json:!"{\n\"page\":1,\n\"results\":[\n\"item\",\"another\"\n],\n\"total_pages\":0\n}\n"我如何告诉Psych以想要的样式转储标量?解