我们使用相同的ODBC凭据从同一SQLServer源中提取数据,可以在我们的开发和测试环境中起作用。当我们一遍又一遍地运行工作时,他们总是在开发和测试中取得成功。当我们在产品服务器中运行作业时,它们成功或以50-50的机会失败,而没有任何更改。当作业失败时,他们会得到以下错误。这些工作有时如何成功,有时没有发生任何变化?如果有时可以找到数据源,我会让为什么它在其他时间找不到数据源感到困惑。READER_1_1_1>RR_4036Errorconnectingtodatabase[[DataDirect][ODBClib]Datasourcenamenotfoundandnodefaultdri
我正在使用Informatica版本10.2.1并使用BDM我想将文件从本地文件系统复制并粘贴到HDFS文件系统。我是BDM的新手,不知道该怎么做。目前我已经创建了一个对象并填充了Read和Write参数。我同时使用InputType和OutputType作为command并发出命令hdfsdfs-copyFromLocal-f/tmp/x。csv/tmp/x非常感谢任何帮助。编辑粘贴错误图片。 最佳答案 Informatica中的Command输入类型用于读取数据。像catfilename.txt流出数据以供Informatica
我可以选择使用Sqoop或Informatica大数据版将数据源导入HDFS。源系统是Tearadata、Oracle。我想知道哪个更好,以及背后的原因。注意:我当前的实用程序能够使用sqoop将数据拉入HDFS,创建Hive暂存表和归档外部表。Informatica是组织中使用的ETL工具。问候桑吉布 最佳答案 SqoopSqoop能够从Oracle/Teradata执行完整和增量加载。Sqoop从源系统并行复制数据。Sqoop脚本可以由Oozie自定义生成和安排。适用于任何规模集群的开源解决方案。无许可费用。信息学ETL行业中管
我正在从事一个项目,该项目涉及从相当大的Informatica日志文件创建一组可查询的数据。为此,使用Flume将文件导入到Hadoop集群中,该集群在我开始此项目之前已由同事配置。我的工作是根据日志中包含的数据创建一个表,以便可以轻松地执行查询。我遇到的问题与日志文件格式有关。日志的格式为:时间戳:严重性:(Pid|线程):(服务类型|服务名称):客户端节点:消息代码:消息问题是有时消息字段包含额外的冒号分隔注释,例如消息可能是[x:y:z]。使用HCatalog创建表时,我无法解释这种行为,而是会产生额外的列。有什么建议吗?通常我会使用Ruby来分隔字段或替换分隔符以在使用HCat
我有一个要求,必须将Informaticasessstarttime(DateTime)加载到SQLServer时间戳。当我尝试将DateTime连接到Timestamp时,我会发现错误不兼容的数据类型。 有什么建议如何实现? 谢谢看答案过去,我遇到了类似的问题,因为Informatica和SQLServer使用的日期/时间的精度有所不同,因此日期列没有被加载。您可以尝试此解决方法:更改目标定义中的数据类型(不在SQLServer表中,仅在Informatica目标定义中),然后Informatica在启动插入查询时将在“启动sqlServer”时以报价中的日期/时间值传递
如何同时提交Informatica工作流程以同时运行。我们开发了一个具有每个工作流程的所有PMCMD命令的文件。我们打算在脚本中调用此文件,该文件最终将击中WorkflowManager以执行INFA工作流程。我们面临的问题是,工作流程正在顺序运行。任何工作流程之间都没有依赖性,并且可以并行运行。我已经使用如下:./pmcmdstartworkflow-svintg_ser-ddomain_name-uuser-pwelcome123-usd本机-fsde_orar1213_adaptor-rinintg_serintg_sersde_ora_ora_inventorylotdimension
我计划在InformaticaBDM中使用KAFKA数据对象。我想每5分钟通过InformaticaBDM阅读KAFKA的数据。我几乎没有查询Kafka如何识别其必须加载的当前偏移量。我们可以设置Informatica需要从KAFKA数据对象加载增量或更改数据的主题的偏移吗???我找到了以下答案,您能否请您纠正以下内容的确切过程:1)Zookeeper是否存储当前偏移量,直到加载数据的位置。2)要在上次合作偏移量后读取消息,我们需要将消费者配置文件中的auto.offset.reset参数设置为最大。请建议我一种方法如何从Kafka获取数据。问候,斯利纳特看答案要回答你的问题,旧的消费者API
点击 Mr.绵羊的知识星球 解锁更多优质文章。目录一、环境二、注意事项三、安装流程四、遇到的坑说在前面:如何下载和安装下面的大佬文章中有。本文主要介绍我的安装总结和碰到的问题。可以结合下面的注意事项进行安装,避免踩坑。一、环境系统:windows1064bitoracle:oracle11g -下载地址:https://edelivery.oracle.com/osdc/faces/SoftwareDeliveryinformatica:(informaticaserver64bit+client32bit)(9.6.1) -下载地址:https://edelivery.oracle.com/
我们有一个使用Informatica的MySQL->OracleETL,它适用于除DELETE之外的所有语句。不幸的是,DELETE使记录消失,以至于Informatica再也看不到它以在Oracle中将其删除/过期。人们如何记录MySQLDELETE语句?这些表是InnoDB(符合ACID)的,所有记录都有唯一的主键(auto_increment)。我们在Windows上使用开源MySQL。出于性能原因,我们不希望使用一般查询日志。我们还希望保留常用的MySQL二进制文件,而不是重新编译我们自己的特殊DELETE语句。 最佳答案
文章目录前言一、安装前的准备1、数据库配置二、安装Informatica1、下载介质2.解压缩3、安装Informatica3.1、安装Server端3.2、Workflow配置3.3、创建集成服务3.4、安装客户端3.5、客户端测试总结前言informatica9.x是一款好用且功能强大的数据集成平台,主要进行各类数据库的管理操作,是使用相当广泛的一款ETL工具(注:ETL就是用来描述将数据从源端经过抽取(extract)、转换(transform)、加载(load)到目的端的过程)。本文主要为大家图文详细介绍Windows10下informaticapowercenter9.6.1安装与配