草庐IT

apache-traffic-server

全部标签

apache-spark - Yarn 的 "Application Type"在哪里/如何定义?

如果向ApacheYARN集群提交新作业,状态页面通常会指示作业实际是如何提交的(除其他事项外):ApplicationType:SPARK这表明用户很可能使用spark-submit向资源管理器发布了一个新作业。是否可以像更改应用程序名称一样通过参数更改该字符串的值? 最佳答案 应用类型在Spark设置yarn应用上下文时设置。AFAIK,无法更改某些配置的方式。如果它真的很重要,您将不得不在源代码中覆盖它。下面的实现,https://github.com/apache/spark/blob/01c3dfab158d40653f8

apache-spark - 齐柏林飞艇 : Not Showing Hive Database/tables in HDP3. 0

我已经安装了Hortonworkshdp3.0并配置了Zeppelin。当我运行spark或sql时,Zeppelin只显示默认数据库(这是Spark的默认数据库,位置为“/apps/spark/warehouse”,而不是Hive的默认数据库)。这可能是因为hive.metastore.warehouse.dir属性不是从hive-site.xml设置的,而zeppelin是从Spark配置(spark.sql.warehouse.dir)中选择的。我对spark也有类似的问题,这是由于spark-conf目录中的hive-site.xml文件,我能够通过将hive-site.xml

hadoop - 是否可以将 mapR 与纯 apache hadoop 结合起来?

我是hadoop的新手。我听说mapR是挂载hadoopHDFS的更好方法,而不是fuse。但大多数相关文章只是描述mapRhadoop而不是纯apachehadoop。有人有使用mapR安装纯apachehadoop的经验吗?提前致谢。 最佳答案 MapR不仅仅是一种挂载HDFS的方式。MapR包括Hadoop和许多Apache生态系统组件以及许多其他非Apache组件,例如Cascading。它还包括包含Solr的LucidWorks。MapR还包括HDFS的重新实现,称为MaprFS。MaprFS具有更高的性能,具有读写语义,

hadoop - 用于故障转移的 Apache HBase 复制

ApacheHBase:Replication:Slave/Replication集群是否也用于故障转移处理而不是单独的数据恢复? 最佳答案 是的。HBaseReplication可以用作灾难恢复解决方案,并有助于提供更高的可用性或故障转移。我假设您已经完成了这个page其中谈到了HBase复制。 关于hadoop-用于故障转移的ApacheHBase复制,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.co

java - apache avro 中的 mapred 和 mapreduce 包有什么区别?

我正在从事我的项目以整合apacheavro进入我的MapR程序。然而,我很困惑与ma​​pred相比,通过使用新的ma​​preduce包。latter详细说明如何使用在不同的情况下,新的信息较少。但是我知道的是,它们分别对应hadoop的新旧接口(interface)。有没有人有使用ma​​preduce接口(interface)的经验或例子对于输入为非Avro数据的作业(例如TextInputFormat)文件输出为avro文件。 最佳答案 这两个包代表相应的Hadoopmapred和mapreduceAPI的输入/输出格式、

hadoop - 错误主要 com.facebook.presto.server.PrestoServer null

我正在尝试在我的Ubuntu12.04LTS(32位)、Java1.7.0_25、Python2.7.3中配置presto。presto不能在32位系统中工作吗?请帮我解决这个问题。我收到以下错误。2013-11-14T14:37:54.165+0530DEBUGmaincom.facebook.presto.hive.RebindSafeMBeanServerio.airlift.node:name=NodeInfoalreadyboundtoio.airlift.node.NodeInfo[io.airlift.node:name=NodeInfo]2013-11-14T14:37

com.mysql.cj.exceptions.InvalidConnectionAttributeException: The server time zone value ‘Öйú±ê×解决方案

  大家好,我是爱编程的喵喵。双985硕士毕业,现担任全栈工程师一职,热衷于将数据思维应用到工作与生活中。从事机器学习以及相关的前后端开发工作。曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。喜欢通过博客创作的方式对所学的知识进行总结与归纳,不仅形成深入且独到的理解,而且能够帮助新手快速入门。  本文主要介绍了com.mysql.cj.exceptions.InvalidConnectionAttributeException:Theservertimezonevalue‘Öйú±ê׼ʱ¼ä’isunrecognizedorrepres

1251 - Client does not support authentication protocol requested by server; consider upgrading MySQL

1251-Clientdoesnotsupportauthenticationprotocolrequestedbyserver;considerupgradingMySQL这个错误表明您的MySQL客户端不支持MySQL服务器所请求的身份验证协议。这通常发生在MySQL服务器的密码插件与客户端不兼容的情况下。为了解决这个问题,您可以尝试以下几种方法:更新密码插件:登录到MySQL服务器,使用具有足够权限的用户帐户。运行以下查询以查看用户的密码插件:SELECTuser,host,pluginFROMmysql.userWHEREuser='your_user';如果插件是mysql_nati

SQL Server数据库数据文件的迁移

SQLServer数据库数据文件的迁移如何将一台电脑中的SQLServer数据库数据文件迁移到另一台电脑上?一、首先查看数据库文件保存在电脑中的位置;如下图所示:右键-》属性-》数据库设置;可以找到数据库文件保存位置;二、数据库分离;选择数据库,右键-》任务-》分离,然后确定;数据库分离是指将数据库文件从数据库服务器实例中分离出来,相当于关闭了数据库。数据库分离后,应用程序不能连接到该数据库,数据库文件可以被其它进程访问。通常分离数据库用于快速地将数据库迁移到另一个SQLSERVER实例。三、数据库分离后就可以将数据库文件复制到另一台电脑上了;这里注意,最好还是要放到sqlserver的dat

hadoop - Flume--找不到主类 : org. apache.flume.tools.GetJavaProperty

我正在使用clouderaCDH4.4。当我运行flumecmd时-"bin/flume-ngagent-nagentA-fconf/MultipleFlumes.properties-Dflume.root.logger=INFO,console"我遇到了一个错误:[cloudera@localhostFlume]$bin/flume-ngagent-nagentA-fconf/MultipleFlumes.properties-Dflume.root.logger=INFO,consoleWarning:Noconfigurationdirectoryset!Use--confto