草庐IT

Flink提交任务

全部标签

Streampark集成Cloudera Flink、ldap、告警,以及部署常见问题

集成背景我们当前集群使用的是ClouderaCDP,Flink版本为ClouderaVersion1.14,整体Flink安装目录以及配置文件结构与社区版本有较大出入。直接根据Streampark官方文档进行部署,将无法配置FlinkHome,以及后续整体Flink任务提交到集群中,因此需要进行针对化适配集成,在满足使用需求上,尽量提供完整的Streampark使用体验。集成步骤版本匹配问题解决首先解决无法识别Cloudera中的FlinkHome问题,根据报错主要明确到的事情是无法读取到Flink版本、lib下面的jar包名称无法匹配。修改对象:修改源码:(解决无法匹配clouderajar

ruby-on-rails - 常量化通过浏览器提交的参数是不好的做法吗?

我有一个单表继承设置,我有一个Controller(我觉得有多个Controller会重复)。但是,对于某些方法,我想调用模型的子类。我想我可以让浏览器发送一个参数,我会针对该参数编写一个case语句。像这样的东西:case@model[:type]when"A"@results=Subclass1.search(params[:term])when"B"@results=Subclass2.search(params[:term])...end或者,我了解到Ruby的所有技巧都可以用字符串创建模型。像这样的东西:@results=params[:model].constantize.

ruby - 从用户提交的文本中提取关键字的好方法是什么?

我正在构建一个网站,该网站允许用户通过以图形方式表示支持和反对特定问题的论点来理解辩论。(Wrangl)我想对这些辩论进行分类,以便更容易找到它们并将它们联系起来。我不想让发起辩论的人在他们看到任何好处之前添加标签和类别,从而激怒他们,所以我正在寻找一种自动提取关键字的方法。有什么好的方法可以利用辩论的标题和描述(以及可能的论点本身的内容,一旦有的话)来提取,比如说,可以用作元数据将类似辩论联系在一起的十个强关键字,或者即使是在可以查看辩论的HTML页面头部的“元”关键字标记的内容。例如。DatamappervsActiveRecord该网站使用Ruby和Sinatra编码,使用Dat

ruby - 使用 Sinatra 时如何从 gem 导入 rake 任务?

我正在尝试向orientdbgem添加一些基本的rake任务,这将允许我创建数据库、创建数据库迁移和迁移数据库——类似于rails迁移。当我在本地执行rake任务时,我可以使用db:settings、db:create和db:create_migration,但是在将它们放入gem之后,我不知道如何从Sinatra访问它们使用“rake”时的应用。我有一种感觉,我要么是a)没有正确地组织gem中的文件和/或b)没有从Sinatra应用程序正确地调用东西。我的fork存储库的当前状态是https://github.com/ricaurte/orientdb-jruby我将任务文件放在li

ruby-on-rails - 多线程 rake 任务

我正在编写一个rake任务,它会由Whenever每分钟(将来可能每30秒)调用一次,并且它会联系一个轮询API端点(我们数据库中的每个用户)。显然,这样单线程运行效率不高,但是多线程有可能吗?如果没有,是否有一个好的基于事件的HTTP库可以完成这项工作? 最佳答案 I'mwritingaraketaskthatwouldbecalledeveryminute(possiblyevery30secondsinthefuture)byWhenever注意Rails启动时间,最好使用fork模型,例如Resque或Sidekiq,Res

ruby-on-rails - 在 rake 任务中需要 lib

我在lib/models/alert_import中有一个文件alert_import',我想在我的任务中使用这样的东西:task:send_automate_alerts=>:environmentdo#STDERR.puts"Pathis#{$:}"Rake.application.rake_require'../../lib/models/alert_import'ai=AlertImport::Alert.new(2)ai.send_email_with_notifcationsend在这段代码中出现错误:找不到../../lib/models/alert_import在Ale

ruby - 检查 Rakefile 中是否存在 rake 任务

我正在寻找一种方法来检查Rakefile中是否存在某个rake任务。我有一个任务依赖项,如果该任务可用,我只想将其作为依赖项包含在内。在这种特殊情况下,该任务仅在Rails项目中可用,但我希望我的rake任务也能在更通用的Ruby应用程序环境中工作(不仅仅是Rails)。我想做这样的事情:iftasks.includes?('assets:precompile')task:archive=>[:clean,:vendor_deps,'assets:precompile']...endelsetask:archive=>[:clean,:vendor_deps]...endend在rak

ruby-on-rails - Rails,如何提交带有文本链接的表单?

我正在尝试让此表单正确提交。这是我到目前为止所拥有的:update_user_setting_path,:remote=>true,:html=>{:method=>:post,:class=>"search_formgeneral_form"})do|f|%>按钮用这段代码呈现:SAVE"),:action=>'create'%>我正在使用actioncreate,这是否正确?这是呈现的表单标签:我错过了什么?感谢您的帮助! 最佳答案 不,您没有正确使用link_to。您需要使用submit标签来提交您的表单,而不是link_to

ruby-on-rails - 从 rake 任务调用 Controller

我想从rake任务中调用Controller操作。我的问题是准备http请求的最佳方法是什么?感谢所有提示。编辑:有人有其他提示吗?我试过这个但没有用:controller_obj=Controller.newcontroller.your_method我遇到了这个异常:rakeaborted!uninitializedconstantController编辑2:我试过:sess=ActionController::Integration::Session.newsess.post('/route','codes=3')但是我得到了(我在rake文件中需要'action_control

ruby - 带有字符串参数的 Sinatra 应用程序的 Heroku rake 任务失败

我刚刚将Sinatra应用程序部署到heroku,该应用程序包含两个rake任务:task:create_db,[:db_id,:db_name]task:destroy_db,[:db_id,:token]当我运行时herokurunrake-T在控制台中,Heroku打印以下响应:(in/app)rakecreate_db[db_id,db_name]#Creationcountdatabasetaskrakedestroy_db[db_id,token]#Destroydatabasetask但是当我运行时:herokurunrakecreate_db['test','testd