草庐IT

数仓建设

全部标签

网络原来如此之智能无线网络建设经验分享

引言  近年来G行围绕业务数字化转型打造财富管理银行的战略目标,提出了“123+N”数字银行发展体系支撑业务数字化转型和长远发展,金融科技板块结合各类需求,无论是对外服务还是内部运营,使用数字化手段融入更多的内外部场景,科技赋能服务更多的内外部客户。在内部网络运营方面,2022年起G行开展了基于WiFi6技术的无线网络建设,融合智能无线运维、一体化认证系统等全新无线网络和智能运维技术,展现了G行推进数字化转型、智能化应用的能力,现将本次无线网络的建设经验分享给大家。  WiFi6(原称:IEEE802.11ax)即第六代无线网络技术,是WiFi标准的名称,是WiFi联盟创建于IEEE802.1

省级税务大数据平台应用建设的分析与思考

  随着2018年国务院机构改革方案中省级和省级以下国地税机构合并要求的落地,各省级税务局成立了税收大数据和风险管理局,省级大数据平台应用建设变得比以往任何时候都紧迫。大数据平台能做什么?税务人员需要的数据平台是什么样的?省级税务大数据平台如何建设?这些问题是每个计划建设大数据平台的单位都需要认真思考的,本文结合自身建设需要,就省级大数据平台建设做了一些探讨。一、大数据平台的建设是全局战略性项目  大数据平台建设项目一般都规模大、周期长、涉及部门多,成效体现慢。同时建成后,数据运维、模型改进、应用深入等方面还需要持续投入。  因此大数据平台建设项目的风险很大,这风险来自方方面面,既有技术、方案

政务云建设提速,天翼云夯实智慧政务数字底座

5月30日,2023数字政府高质量发展论坛在北京举办,大会聚焦业界关注的政策、技术、应用、标准、发展等议题,邀请政产学研各界共议政府数字化转型之路。现场重磅发布了由中国电信联合中国信息通信研究院云计算与大数据研究所共同撰写的《安全可信政务云一体化建设白皮书》(以下简称“白皮书”),中国信息通信研究院云计算与大数据研究所政企数字化转型部主任徐恩庆、中国电信天翼云科技有限公司政务行业中心总经理张星出席发布仪式。 中国电信天翼云科技有限公司政务行业中心总经理 张星(左一)中国信息通信研究院云计算与大数据研究所政企数字化转型部主任 徐恩庆(右一) 白皮书从行业政策、技术、案例、发展等角度对政务云一体化

助力工业物联网,工业大数据之数仓维度层DWS层构建【十二】

文章目录数仓维度层DWS层构建01:项目回顾02:项目目标03:维度建模回顾:建模流程04:维度建模回顾:维度设计05:维度建模回顾:维度模型数仓维度层DWS层构建01:项目回顾ODS层与DWD层的功能与区别是什么?ODS:原始数据层存储格式:AVRO数据内容:基本与原始数据是一致的DWD:明细数据层存储格式:Orc数据内容:基于与ODS层是一致的ODS层的需求是什么?自动化建库建表建表createtableone_make_ods.表名tableproperties(schema文件)表名表的注释表对应的HDFS地址Schema文件的地址DWD层的需求是什么?自动化建库建表建表createt

【SQL开发实战技巧】系列(三十七):数仓报表场景☞从表内始终只有近两年的数据,要求用两列分别显示其中一年的数据聊行转列隐含信息的重要性

系列文章目录【SQL开发实战技巧】系列(一):关于SQL不得不说的那些事【SQL开发实战技巧】系列(二):简单单表查询【SQL开发实战技巧】系列(三):SQL排序的那些事【SQL开发实战技巧】系列(四):从执行计划讨论UNIONALL与空字符串&UNION与OR的使用注意事项【SQL开发实战技巧】系列(五):从执行计划看IN、EXISTS和INNERJOIN效率,我们要分场景不要死记网上结论【SQL开发实战技巧】系列(六):从执行计划看NOTIN、NOTEXISTS和LEFTJOIN效率,记住内外关联条件不要乱放【SQL开发实战技巧】系列(七):从有重复数据前提下如何比较出两个表中的差异数据及

【SQL开发实战技巧】系列(三十七):数仓报表场景☞从表内始终只有近两年的数据,要求用两列分别显示其中一年的数据聊行转列隐含信息的重要性

系列文章目录【SQL开发实战技巧】系列(一):关于SQL不得不说的那些事【SQL开发实战技巧】系列(二):简单单表查询【SQL开发实战技巧】系列(三):SQL排序的那些事【SQL开发实战技巧】系列(四):从执行计划讨论UNIONALL与空字符串&UNION与OR的使用注意事项【SQL开发实战技巧】系列(五):从执行计划看IN、EXISTS和INNERJOIN效率,我们要分场景不要死记网上结论【SQL开发实战技巧】系列(六):从执行计划看NOTIN、NOTEXISTS和LEFTJOIN效率,记住内外关联条件不要乱放【SQL开发实战技巧】系列(七):从有重复数据前提下如何比较出两个表中的差异数据及

【共读】企业信息安全建设与运维指南(二)

接上篇继续往下:【共读】企业信息安全建设与运维指南(一)三、IDC基础安全体系建设:IDC(InternetDataCenter)即互联网数据中心,为企业用户或客户提供服务,如网站应用服务、App应用后台服务等等,IDC中存储着各类敏感信息和数据资产,所以IDC安全是企业信息安全的重中之重,需重点投入进行建设和运营。3.1安全区域划分和访问控制策略3.1.1安全域简介及划分原则安全域是指同一系统内有相同的安全保护需求,互相信任,并具有相同的安全访问控制策略和边界控制策略的子网或网络。相同的网络安全共享一样的安全策略。划分遵循的安全原则:等级保护原则:安全域的信息资产价值相近,具有相同或相近的安

数据治理系列:数仓建模之数仓主题与主题域

背景:数据仓库之父BillInmon将数据仓库描述为一个面向主题的、集成的、稳定的、反应历史变化的数据集合,用于支持管理者的决策过程。从上面的引言里面,我们其实可以知道主题在数仓建设里面绝对是很重要的一环,这的确是的。数仓在建设过程中,对数据的组织管理上,不仅仅要进行横向的分层,也需要根据业务情况进行纵向的主题域划分。看到这里可能就有疑问了,上面明明说的是面向主题,怎么又突然说到主题域了,这里就延伸出主题和主题域的关系了。下面我就围绕数仓主题、主题域以及两者之间关系、划分方式等,进行更详细的阐述。 一、数仓主题是什么?主题域又是什么?1.数仓主题是什么?数仓主题(Subject)是在较高层次上

数据治理系列:数仓建模之数仓主题与主题域

背景:数据仓库之父BillInmon将数据仓库描述为一个面向主题的、集成的、稳定的、反应历史变化的数据集合,用于支持管理者的决策过程。从上面的引言里面,我们其实可以知道主题在数仓建设里面绝对是很重要的一环,这的确是的。数仓在建设过程中,对数据的组织管理上,不仅仅要进行横向的分层,也需要根据业务情况进行纵向的主题域划分。看到这里可能就有疑问了,上面明明说的是面向主题,怎么又突然说到主题域了,这里就延伸出主题和主题域的关系了。下面我就围绕数仓主题、主题域以及两者之间关系、划分方式等,进行更详细的阐述。 一、数仓主题是什么?主题域又是什么?1.数仓主题是什么?数仓主题(Subject)是在较高层次上

工控网络安全分支-电力行业网络安全建设

工控网络安全分支-电力行业网络安全建设前言一、标准要求二、解决方案1.核心原则2.合规解决方案前言长期以来,传统工业系统的设备专有性与天然隔离性使得人们忽视了信息安全隐患的存在,管理者与工程师们往往将安全关注的焦点和资金预算都投放在设备安全和生产安全方面,预防发生工业事故造成人员、财产、或环境损失。然而,信息技术的发展已经打破了传统的“物理隔离神话”,为确保能源和关键性基础设施行业控制系统的安全稳定运行,研究工业网络安全的关键问题,建立有针对性的安全防护体系已经迫在眉睫。一、标准要求所有电力系统的归口单位为国家能源局,网络安全相关要求都遵循以下要求:电监会第5号令《电力二次系统安全防护规定》电