草庐IT

date_accessed

全部标签

hadoop - 在 cloudera impala 1.2.3 中使用 date_sub() udf 从 View 查询时出现连接重置错误

我已经编写了一个查询来在Impala中创建一个View。该View包含一个字段record_date,它是格式为yyyy-MM-ddhh:mm:ss的字符串数据类型。在尝试执行使用date_sub('2014-01-3000:00:00',1)提取先前日期记录的查询时,我收到如下错误:错误:与impalad通信时出错:TSocket读取0个字节。如果我尝试对创建的表而不是View执行相同的查询,我会得到正确的输出。感谢任何帮助。谢谢 最佳答案 这是一个错误,请升级到最新版本的Impala,因为它似乎从1.2.3开始就已修复,这是很旧

hadoop - 将 MS Access 数据 Sqooping 到 HDFS - Hadoop

我有一个用例,我需要将MicrosoftAccess数据导入/Sqoop到hdfs。是否有任何驱动程序可用于MS访问Sqoop数据。有没有人遇到过这样的情况。请留下您的评论和意见。 最佳答案 看起来不支持访问。Here是sqoop支持的数据库列表。最近的是MicrosoftSQL服务器here.主要要求是连接到数据库的jdbc驱动程序。 关于hadoop-将MSAccess数据Sqooping到HDFS-Hadoop,我们在StackOverflow上找到一个类似的问题:

mongodb - 带有 $date 的 mongo.input.query 不过滤输入到 hadoop

我有一个分片输入集合,我想在将其发送到我的hadoop集群以进行mapreduce计算之前对其进行过滤。我的$hadoopjar-命令中有这个参数mongo.input.query='{_id.uuid:"device-964693"}'并且有效。输出不会mapreduce任何不满足此查询的数据。但这不起作用:mongo.input.query='{_id.day:{\\$lt:{\\$date:1388620740000}}}'没有数据作为输出产生。1388620740000表示日期WedJan01201423:59:00GMT+0000(GMT)。该设置使用的是hadoop2.2、

git报错==》remote: Check Access Error, please check your username and password!

问题描述git将本地代码提交远程仓库报密码错误。错误信息:remote:CheckAccessError,pleasecheckyourusernameandpassword!fatal:Authenticationfailedfor‘http://gitlab.xxx.com/xxx.git/’解决方案:gitconfig--globaluser.password'你的新密码'其他相关操作命令://更改用户名$gitconfig--globaluser.name"你的用户名"//更改邮箱$gitconfig--globaluser.email"你的邮箱地址"//更改密码$gitconfig-

Hadoop : Can't access "Tracking URL"

我将Hadoop环境构建为伪分布式模式(在OSX上)。以下片段是配置文件。○核心站点.xmlfs.defaultFShdfs://127.0.0.1:9000○mapred-site.xmlmapreduce.framework.nameyarnmapreduce.jobhistory.address127.0.0.1:10020mapreduce.jobhistory.webapp.address127.0.0.1:19888mapreduce.jobhistory.admin.address127.0.0.1:10033mapreduce.jobhistory.webapp.htt

PostgreSQL | EXTRACT / DATE_PART | 获取时间的年月日等字串

extractEXTRACT函数是PostgreSQL中用于从日期和时间类型中提取特定部分(如年、月、日、小时等)的函数。格式EXTRACT(fieldFROMsource)--field参数是要提取的部分,例如YEAR、MONTH、DAY、HOUR等。--source参数是包含日期或时间的表达式。示例例如,要从当前日期时间中提取年\月\日\,可以使用以下查询:SELECT EXTRACT(YEARFROMCURRENT_TIMESTAMP) AScurrent_year, EXTRACT(MONTHFROMCURRENT_TIMESTAMP) AScurrent_month, EXTRACT

date - 有两个不同的字符串代表两个不同的配置单元表中的日期,我想用它们来加入

所以我在Hadoop集群中的Hive中有两个外部表。一个表有一个(日期字符串)列,格式为'2019-05-2411:16:31.0'另一个有(dateSTRING)列,格式为'23/May/2019:22:15:04',它们都是字符串。我需要将它们转换为相同类型的日期格式并使用它们来连接这两个表。您将如何解决这个问题并在Hive中解决所有问题?可能吗?我是Hadoop的菜鸟,对Hive的可能性还不是很了解。Ps:我的hive版本不支持!hive--version命令来检查我正在使用的版本,所以我不太确定如何理解我正在使用的版本。不是我的集群,我也不是根用户。

date - 如何在 Hadoop Hive 中给定时间戳获取一周第一天的日期?

除了编写自定义UDF来支持此问题外,是否有任何已知的方法可以实现此目的?我目前正在使用Hive0.13。 最佳答案 从Hive1.2开始,你也可以这样做:selectnext_day(date_sub('2019-01-01',7),'MON')输出:2018-12-31 关于date-如何在HadoopHive中给定时间戳获取一周第一天的日期?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/que

Hadoop 计数器 : how to access the Reporter object outside map() and reduce()

要使用计数器,我需要有权访问Reporter对象。Reporter对象作为参数传递给map()和reduce(),因此我可以这样做:reporter.incrCounter(NUM_RECORDS,1);但是我需要在MultipleOutputFormat类中使用计数器(我正在使用方法生成文件名键值)问题:如何访问MultipleOutputFormat类中的Reporter对象? 最佳答案 您可以创建自己的MultipleOutputFormat类,MyMultipleOutputFormat(这听起来有点像你在做的)并创建一个接

idea一直提示Loaded classes are up to date. Nothing to reload

idea一直提示Loadedclassesareuptodate.Nothingtoreload.springboottomcat