草庐IT

无锡云数

全部标签

Teradata在华落幕,国产化崛起,袋鼠云数栈会是更好的选择吗?

2月15日,数仓软件巨头Teradata宣布根据其对中国当前和未来商业环境的慎重评估,将逐步结束在中国的直接运营,后续进入中国公司的关闭程序。一石激起千层浪,这一消息,在国内的ToB市场引起了广泛关注。Teradata这家进入中国市场26年,为国内数仓发展带来重要启蒙,奠定数据服务人才基础,被业界称之为“数仓人才黄埔军校”的数据软件巨头如今在华落幕,令人感叹。近些年来,国产大数据基础建设百花齐放、发展蓬勃,中国软件企业在信创产业政策的助攻下,迎来了发展的黄金期,技术和产品能力快速提升,凭借自主可控、创新安全等优势,已经逐步实现对Teradata等国外主流软件的成功替换。其中包括以Hadoop体

详细剖析|袋鼠云数栈前端框架Antd 3.x 升级 4.x 的踩坑之路

袋鼠云数栈从2016年发布第⼀个版本开始,就始终坚持着以技术为核⼼、安全为底线、提效为⽬标、中台为战略的思想,坚定不移地⾛国产化信创路线,不断推进产品功能迭代、技术创新、服务细化和性能升级。在数栈过去的产品迭代中受限于当前组件的版本,积累了很多待解决的问题,随着新的功能需求不断增加,很多原先的组件以及交互设计需要进行优化。2月,伴随着数栈UI5.0的焕新升级,数栈前端团队一起将组件框架antd从v3.x升级到了v4.x,更新组件的UI,提升产品的交互体验,使数栈产品能够更加灵活地适应未来产品功能迭代的需求。本文将总结归纳袋鼠云数栈前端框架Antd从3.x升级到4.x的相关步骤,及在这个过程中踩

详细剖析|袋鼠云数栈前端框架Antd 3.x 升级 4.x 的踩坑之路

袋鼠云数栈从2016年发布第⼀个版本开始,就始终坚持着以技术为核⼼、安全为底线、提效为⽬标、中台为战略的思想,坚定不移地⾛国产化信创路线,不断推进产品功能迭代、技术创新、服务细化和性能升级。在数栈过去的产品迭代中受限于当前组件的版本,积累了很多待解决的问题,随着新的功能需求不断增加,很多原先的组件以及交互设计需要进行优化。2月,伴随着数栈UI5.0的焕新升级,数栈前端团队一起将组件框架antd从v3.x升级到了v4.x,更新组件的UI,提升产品的交互体验,使数栈产品能够更加灵活地适应未来产品功能迭代的需求。本文将总结归纳袋鼠云数栈前端框架Antd从3.x升级到4.x的相关步骤,及在这个过程中踩

人工智能打造充满创造力的新世界,华为云开发者日无锡站成功举办

摘要:近日,华为云开发者日HDC.CloudDay无锡站成功举行,开发者不仅聆听了华为云技术专家在生成式AI、元宇宙、AIoT、工业互联网等领域的前沿技术分享,还在KooLabs工作坊、展台等环节,亲身体验华为云产品的技术魅力。3月21日,华为云开发者日HDC.CloudDay无锡站成功举行,开发者不仅聆听了华为云技术专家在生成式AI、元宇宙、AIoT、工业互联网等领域的前沿技术分享,还在KooLabs工作坊、展台等环节,亲身体验华为云产品的技术魅力。华为云开发者日是面向全球开发者的旗舰活动,汇聚来自千行百业、高校、及科研院所的开发人员。全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商

人工智能打造充满创造力的新世界,华为云开发者日无锡站成功举办

摘要:近日,华为云开发者日HDC.CloudDay无锡站成功举行,开发者不仅聆听了华为云技术专家在生成式AI、元宇宙、AIoT、工业互联网等领域的前沿技术分享,还在KooLabs工作坊、展台等环节,亲身体验华为云产品的技术魅力。3月21日,华为云开发者日HDC.CloudDay无锡站成功举行,开发者不仅聆听了华为云技术专家在生成式AI、元宇宙、AIoT、工业互联网等领域的前沿技术分享,还在KooLabs工作坊、展台等环节,亲身体验华为云产品的技术魅力。华为云开发者日是面向全球开发者的旗舰活动,汇聚来自千行百业、高校、及科研院所的开发人员。全方位服务与赋能开发者围绕华为云生态“知、学、用、创、商

无锡广电新媒体云原生容器化平台实践

作者:毛伟,现任无锡广电集团新媒体中心系统架构师,曾负责全国多个省级、市级、区县融媒体平台设计建设,有着丰富的新媒体行业建设系统架构设计经验。现主要从事无锡博报系列新媒体平台建设,推动各业务产品线向云原生转型,并在此领域开展相关布道工作。单位简介无锡广播电视集团成立于1999年,为全国首家广电集团。2007年底组建成立无锡广播电视台(与无锡广播电视集团两块牌子、一套班子)。集团作为主流媒体和市属文化国企,承担宣传与经营双重职能:一方面为市委市政府中心工作和全市改革发展稳定大局提供舆论服务,一方面通过保持提升经营效益,为宣传工作提供支撑,为全市文化产业发展贡献力量。集团目前拥有6个广播频率、7个

无锡广电新媒体云原生容器化平台实践

作者:毛伟,现任无锡广电集团新媒体中心系统架构师,曾负责全国多个省级、市级、区县融媒体平台设计建设,有着丰富的新媒体行业建设系统架构设计经验。现主要从事无锡博报系列新媒体平台建设,推动各业务产品线向云原生转型,并在此领域开展相关布道工作。单位简介无锡广播电视集团成立于1999年,为全国首家广电集团。2007年底组建成立无锡广播电视台(与无锡广播电视集团两块牌子、一套班子)。集团作为主流媒体和市属文化国企,承担宣传与经营双重职能:一方面为市委市政府中心工作和全市改革发展稳定大局提供舆论服务,一方面通过保持提升经营效益,为宣传工作提供支撑,为全市文化产业发展贡献力量。集团目前拥有6个广播频率、7个

从5分钟到60秒,袋鼠云数栈在热重启技术上的提效探索之路

更好地提高效率一直以来是袋鼠云数栈产品的主要目标之一。当前数栈客户的实时任务都是基于Per-Job模式运行的,客户在进行一些任务参数的修改之后,只能先取消当前任务,再选择CheckPoint恢复或者重新运行,整个过程需要3-5分钟,比较浪费时间。为了达到提高效率的目的,我们针对Per-Job任务的整体流程分析,进行了相关探索。下文和大家聊聊数栈在热重启技术方面的探索之路。热重启是什么?热重启技术旨在复用当前Per-Job集群的相关资源,减少重新创建集群以及申请资源的耗时,同时通过CheckPoint机制保障数据的正确性。Flink的Per-Job模式是指每个任务都会对应一个独立的Flink集群

从5分钟到60秒,袋鼠云数栈在热重启技术上的提效探索之路

更好地提高效率一直以来是袋鼠云数栈产品的主要目标之一。当前数栈客户的实时任务都是基于Per-Job模式运行的,客户在进行一些任务参数的修改之后,只能先取消当前任务,再选择CheckPoint恢复或者重新运行,整个过程需要3-5分钟,比较浪费时间。为了达到提高效率的目的,我们针对Per-Job任务的整体流程分析,进行了相关探索。下文和大家聊聊数栈在热重启技术方面的探索之路。热重启是什么?热重启技术旨在复用当前Per-Job集群的相关资源,减少重新创建集群以及申请资源的耗时,同时通过CheckPoint机制保障数据的正确性。Flink的Per-Job模式是指每个任务都会对应一个独立的Flink集群

袋鼠云数栈基于CBO在Spark SQL优化上的探索

原文链接:袋鼠云数栈基于CBO在SparkSQL优化上的探索一、SparkSQLCBO选型背景SparkSQL的优化器有两种优化方式:一种是基于规则的优化方式(Rule-BasedOptimizer,简称为RBO);另一种是基于代价的优化方式(Cost-BasedOptimizer,简称为CBO)。1、RBO是传统的SQL优化技术RBO是发展比较早且比较成熟的一项SQL优化技术,它按照制定好的一系列优化规则对SQL语法表达式进行转换,最终生成一个最优的执行计划。RBO属于一种经验式的优化方法,严格按照既定的规则顺序进行匹配,所以不同的SQL写法直接决定执行效率不同。且RBO对数据不敏感,在表大