草庐IT

event_scheduler

全部标签

java - Spring Scheduled 注解中的固定速率和固定延迟有什么区别?

我正在使用Spring实现计划任务,我看到有两种类型的时间配置选项可以从上次调用开始再次计划工作。这两种类型有什么区别?@Scheduled(fixedDelay=5000)publicvoiddoJobDelay(){//doanything}@Scheduled(fixedRate=5000)publicvoiddoJobRate(){//doanything} 最佳答案 fixedRate:让Spring定期运行任务,即使上次调用可能仍在运行。fixedDelay:具体控制下一次执行时间最后一次执行结束。在代码中:@Sched

java - Spring Scheduled 注解中的固定速率和固定延迟有什么区别?

我正在使用Spring实现计划任务,我看到有两种类型的时间配置选项可以从上次调用开始再次计划工作。这两种类型有什么区别?@Scheduled(fixedDelay=5000)publicvoiddoJobDelay(){//doanything}@Scheduled(fixedRate=5000)publicvoiddoJobRate(){//doanything} 最佳答案 fixedRate:让Spring定期运行任务,即使上次调用可能仍在运行。fixedDelay:具体控制下一次执行时间最后一次执行结束。在代码中:@Sched

java - Spring Scheduler 意外停止

我们在Tomcat6上有一个Spring3Web应用程序,它通过@Scheduled使用多个预定服务(主要用于每晚运行的作业)。现在看来,有时(很少,可能在两个月左右一次)调度程序线程停止工作,因此第二天晚上不会执行任何作业。我们的日志文件中没有异常或日志条目。有人知道为什么会这样吗?或者如何获取有关此问题的更多信息?有没有办法在应用程序中检测到这种情况并重新启动调度程序?目前,我们正在通过每5分钟运行一次并创建一个日志条目的日志记录作业来解决此问题。如果日志文件停止更新(由nagios监控),我们知道是时候重新启动tomcat了。在没有完全重启服务器的情况下重新启Action业会很好

java - Spring Scheduler 意外停止

我们在Tomcat6上有一个Spring3Web应用程序,它通过@Scheduled使用多个预定服务(主要用于每晚运行的作业)。现在看来,有时(很少,可能在两个月左右一次)调度程序线程停止工作,因此第二天晚上不会执行任何作业。我们的日志文件中没有异常或日志条目。有人知道为什么会这样吗?或者如何获取有关此问题的更多信息?有没有办法在应用程序中检测到这种情况并重新启动调度程序?目前,我们正在通过每5分钟运行一次并创建一个日志条目的日志记录作业来解决此问题。如果日志文件停止更新(由nagios监控),我们知道是时候重新启动tomcat了。在没有完全重启服务器的情况下重新启Action业会很好

hadoop - Flume: kafka channel 和 hdfs sink get unable to deliver event 错误

我想尝试这个新的Flafka流程:只使用kafkachannel将数据传输到hdfssink。我从更容易监控的kafkachannel和记录器接收器中尝试了它。我的配置文件是:#Namethecomponentsonthisagenta1.sinks=sink1a1.channels=channel1a1.channels.channel1.type=org.apache.flume.channel.kafka.KafkaChannela1.channels.channel1.brokerList=localhost:9093,localhost:9094a1.channels.cha

java - Apache Hadoop 2.7.4,配置 Fair Scheduler 导致错误

我配置了一个Hadoop2.7.4集群,其中有3个worker和1个master。我必须在集群上运行多个作业。一项工作需要很多时间才能完成,而其他工作则很小。我已经知道FairScheduler最适合我的情况。当我更新yarn-site.xmlFairSchedulerclass并重新启动集群,当我访问http://localhost:8088/cluster时会导致以下错误(资源管理器网页界面)HTTPERROR500Problemaccessing/cluster/.Reason:org.apache.hadoop.yarn.server.resourcemanager.sched

java - 在 Spring 测试@Scheduled

Spring提供了使用注释以特定时间间隔安排和执行任务的可能性,例如@Scheduled有没有一种方便的方法来对该行为进行单元测试?当然我可以自己调用bean的方法,但我想确保我不会遇到像multipleexecutionsduetomisconfiguration这样的问题等等。其他框架提供了自己快进时间的可能性。一个例子是Activiti你可以在哪里打电话org.activiti.engine.impl.util.ClockUtil.setCurrentTime(date)快进框架使用的时间。Spring有什么可比的吗?基本上我想要在单元测试中做这样的事情(使用SpringJUni

java - 在 Spring 测试@Scheduled

Spring提供了使用注释以特定时间间隔安排和执行任务的可能性,例如@Scheduled有没有一种方便的方法来对该行为进行单元测试?当然我可以自己调用bean的方法,但我想确保我不会遇到像multipleexecutionsduetomisconfiguration这样的问题等等。其他框架提供了自己快进时间的可能性。一个例子是Activiti你可以在哪里打电话org.activiti.engine.impl.util.ClockUtil.setCurrentTime(date)快进框架使用的时间。Spring有什么可比的吗?基本上我想要在单元测试中做这样的事情(使用SpringJUni

hadoop - 如何在 Hadoop Hive 中执行 "Order of Events"查询?

过去2个月我一直在学习Hive,但我无法弄清楚如何执行某些基于序列的查询。举个例子:我有一个包含用户操作的巨大日志每个用户操作都有一个日期字段,但由于来自不同机器的多个日志文件,显然可能不会按该顺序扫描每个日志都可以记录各种不同的事件。对于这个例子,我将它们表示为字母:A、B、C、D...问题:我该如何编写一个查询,询问“平均而言,事件A在事件B发生之前发生了多少次”?我知道如何对用户进行分组,只取已经完成A和B的用户,并对发生的A的数量进行平均,但是限制第一次出现的B似乎很困难。我认为我实际上可以通过将10个左右看起来令人讨厌的查询串在一起来做到这一点,但我想知道是否有一种我不知道的

Hadoop Fair Scheduler 没有将任务分配给某些节点

我正在尝试运行FairScheduler,但它没有将Map任务分配给某些节点,只有一个作业正在运行。我的理解是,公平调度程序将使用conf插槽限制,除非存在多个作业,此时公平计算开始。我还尝试在fair-中将所有队列设置为FIFO-scheduler.xml,但我得到了相同的结果。我已经使用mapreduce.jobtracker.taskscheduler参数在所有mapred-site.xml文件中设置了调度程序(尽管我相信只有JobTracker需要它)并且部分节点接收和运行Map任务没有问题。然而,其他节点要么永远不会获得任何Map任务,要么获得一轮Map任务(即,所有槽都被填