草庐IT

数仓一体化

全部标签

【SQL开发实战技巧】系列(二十五):数仓报表场景☞结果集中的重复数据只显示一次以及计算部门薪资差异高效的写法以及如何对数据进行快速分组

系列文章目录【SQL开发实战技巧】系列(一):关于SQL不得不说的那些事【SQL开发实战技巧】系列(二):简单单表查询【SQL开发实战技巧】系列(三):SQL排序的那些事【SQL开发实战技巧】系列(四):从执行计划讨论UNIONALL与空字符串&UNION与OR的使用注意事项【SQL开发实战技巧】系列(五):从执行计划看IN、EXISTS和INNERJOIN效率,我们要分场景不要死记网上结论【SQL开发实战技巧】系列(六):从执行计划看NOTIN、NOTEXISTS和LEFTJOIN效率,记住内外关联条件不要乱放【SQL开发实战技巧】系列(七):从有重复数据前提下如何比较出两个表中的差异数据及

富士胶片 激光一体机 ApeosPort 3410SD安装配置心得

您好,欢迎进来。这可能是全网最详细的ApeosPort3410SD安装配置教程了。基本上可以说是原创。因为,网上这方面配置信息基本上就没有。1.问题引入        最近为了替换家里使用的老打印机DocuPrintM268dw(以后简写为M268dw),所以入手了ApeosPort3410SD(以后简写为3410SD)。但接下来,就被挨了“几闷棍”:驱动找不到;不是我眼瞎,是这个官网真的很难找。网上好几个入口都是错的。当然了,懂的都懂,百度搜索嘛~~~就算找到了驱动,下载巨慢;就算下好了驱动,安装不懂;这里有坑!!后面会提!就算驱动装完了,配置不会;这里也超烦!        于是,我决定发

02.RDO一体化部署OpenStack详细步骤

Author:SickeyDate:2021-11-240.环境预备(CentOS7已经安装并配置静态IP)0.1指定DNS服务器的IP(SpecifiestheIPaddressoftheDNSserver)vim/etc/resolv.conf如上图,默认已经配置好了0.2IP与域名(或主机名)映射vim/etc/hosts192.168.233.133openstackrdo  0.3关闭防火墙systemctlstopfirewalldsystemctldisablefirewalld0.4关闭SELinuxvim/etc/selinux/config      #SELINUX=en

OceanBase 4.0:当我们谈单机分布式一体化架构时,我们在说什么?

关于作者:杨传辉,OceanBaseCTO。2010年作为创始成员之一加入OceanBase团队,主导了OceanBase历次架构设计和技术研发,从无到有实现OceanBase在蚂蚁集团全面落地。同时,他也主导了两次OceanBaseTPC-C测试并打破世界纪录,著有《大规模分布式存储系统:原理与实践》。目前,杨传辉带领OceanBase技术团队致力于打造更加开放、灵活、高效、易用的下一代企业级分布式数据库。2022年8月10日,OceanBase4.0小鱼在年度发布会亮相,单机分布式一体化架构也正式和大家见面。从我的角度看,OceanBase总共经历了三次大的架构升级:第一次架构升级是Oce

助力工业物联网,工业大数据之数仓维度层DWS层构建【十二】

文章目录数仓维度层DWS层构建01:项目回顾02:项目目标03:维度建模回顾:建模流程04:维度建模回顾:维度设计05:维度建模回顾:维度模型数仓维度层DWS层构建01:项目回顾ODS层与DWD层的功能与区别是什么?ODS:原始数据层存储格式:AVRO数据内容:基本与原始数据是一致的DWD:明细数据层存储格式:Orc数据内容:基于与ODS层是一致的ODS层的需求是什么?自动化建库建表建表createtableone_make_ods.表名tableproperties(schema文件)表名表的注释表对应的HDFS地址Schema文件的地址DWD层的需求是什么?自动化建库建表建表createt

【SQL开发实战技巧】系列(三十七):数仓报表场景☞从表内始终只有近两年的数据,要求用两列分别显示其中一年的数据聊行转列隐含信息的重要性

系列文章目录【SQL开发实战技巧】系列(一):关于SQL不得不说的那些事【SQL开发实战技巧】系列(二):简单单表查询【SQL开发实战技巧】系列(三):SQL排序的那些事【SQL开发实战技巧】系列(四):从执行计划讨论UNIONALL与空字符串&UNION与OR的使用注意事项【SQL开发实战技巧】系列(五):从执行计划看IN、EXISTS和INNERJOIN效率,我们要分场景不要死记网上结论【SQL开发实战技巧】系列(六):从执行计划看NOTIN、NOTEXISTS和LEFTJOIN效率,记住内外关联条件不要乱放【SQL开发实战技巧】系列(七):从有重复数据前提下如何比较出两个表中的差异数据及

【SQL开发实战技巧】系列(三十七):数仓报表场景☞从表内始终只有近两年的数据,要求用两列分别显示其中一年的数据聊行转列隐含信息的重要性

系列文章目录【SQL开发实战技巧】系列(一):关于SQL不得不说的那些事【SQL开发实战技巧】系列(二):简单单表查询【SQL开发实战技巧】系列(三):SQL排序的那些事【SQL开发实战技巧】系列(四):从执行计划讨论UNIONALL与空字符串&UNION与OR的使用注意事项【SQL开发实战技巧】系列(五):从执行计划看IN、EXISTS和INNERJOIN效率,我们要分场景不要死记网上结论【SQL开发实战技巧】系列(六):从执行计划看NOTIN、NOTEXISTS和LEFTJOIN效率,记住内外关联条件不要乱放【SQL开发实战技巧】系列(七):从有重复数据前提下如何比较出两个表中的差异数据及

数据治理系列:数仓建模之数仓主题与主题域

背景:数据仓库之父BillInmon将数据仓库描述为一个面向主题的、集成的、稳定的、反应历史变化的数据集合,用于支持管理者的决策过程。从上面的引言里面,我们其实可以知道主题在数仓建设里面绝对是很重要的一环,这的确是的。数仓在建设过程中,对数据的组织管理上,不仅仅要进行横向的分层,也需要根据业务情况进行纵向的主题域划分。看到这里可能就有疑问了,上面明明说的是面向主题,怎么又突然说到主题域了,这里就延伸出主题和主题域的关系了。下面我就围绕数仓主题、主题域以及两者之间关系、划分方式等,进行更详细的阐述。 一、数仓主题是什么?主题域又是什么?1.数仓主题是什么?数仓主题(Subject)是在较高层次上

数据治理系列:数仓建模之数仓主题与主题域

背景:数据仓库之父BillInmon将数据仓库描述为一个面向主题的、集成的、稳定的、反应历史变化的数据集合,用于支持管理者的决策过程。从上面的引言里面,我们其实可以知道主题在数仓建设里面绝对是很重要的一环,这的确是的。数仓在建设过程中,对数据的组织管理上,不仅仅要进行横向的分层,也需要根据业务情况进行纵向的主题域划分。看到这里可能就有疑问了,上面明明说的是面向主题,怎么又突然说到主题域了,这里就延伸出主题和主题域的关系了。下面我就围绕数仓主题、主题域以及两者之间关系、划分方式等,进行更详细的阐述。 一、数仓主题是什么?主题域又是什么?1.数仓主题是什么?数仓主题(Subject)是在较高层次上

性能测试平台 - 集分布式压测、服务器资源监控、远程连接Linux于一体的平台

前情提要:  网上搜了一下开源性能测试平台或全链路压测平台,只找到了一个stressTestSystem,其他的都是一些垃圾公司的广告。至于使用体验,stressTestSystem没用过,不好评价。本文开源的性能测试平台,在实现功能的前提下,极大地考虑到了使用体验,功能“强大”且部署及其简单。写在最前面:  这次带来一个主要用于性能测试的平台(当然也可以不用于性能测试),下面就介绍一下这个平台:;具有的功能1、服务器管理,可以统一查看服务器的基本信息2、Shell远程连接,支持本地和服务器之间的文件上传和下载3、服务器资源监控4、Nginx访问日志流量收集5、性能测试工具,提供自动化压测和分