原文链接：袋鼠云数栈基于CBO在SparkSQL优化上的探索一、SparkSQLCBO选型背景SparkSQL的优化器有两种优化方式：一种是基于规则的优化方式(Rule-BasedOptimizer，简称为RBO)；另一种是基于代价的优化方式(Cost-BasedOptimizer，简称为CBO)。1、RBO是传统的SQL优化技术RBO是发展比较早且比较成熟的一项SQL优化技术，它按照制定好的一系列优化规则对SQL语法表达式进行转换，最终生成一个最优的执行计划。RBO属于一种经验式的优化方法，严格按照既定的规则顺序进行匹配，所以不同的SQL写法直接决定执行效率不同。且RBO对数据不敏感，在表大
原文链接：袋鼠云数栈基于CBO在SparkSQL优化上的探索一、SparkSQLCBO选型背景SparkSQL的优化器有两种优化方式：一种是基于规则的优化方式(Rule-BasedOptimizer，简称为RBO)；另一种是基于代价的优化方式(Cost-BasedOptimizer，简称为CBO)。1、RBO是传统的SQL优化技术RBO是发展比较早且比较成熟的一项SQL优化技术，它按照制定好的一系列优化规则对SQL语法表达式进行转换，最终生成一个最优的执行计划。RBO属于一种经验式的优化方法，严格按照既定的规则顺序进行匹配，所以不同的SQL写法直接决定执行效率不同。且RBO对数据不敏感，在表大
数栈作为袋鼠云打造的一站式数据开发与治理平台，从2016年发布第⼀个版本开始，就始终坚持着以技术为核⼼、安全为底线、提效为⽬标、中台为战略的思想，坚定不移地⾛国产化信创路线，不断推进产品功能迭代、技术创新、服务细化和性能升级。伴随业务的⻜速发展，数栈设计团队也启动了针对数栈产品的体验升级计划，从开始策划到最后应⽤到各个⼦产品，共经历了五个阶段：策划⽅案制定、设计⽅案落地、转化设计语⾔、Theme&RC升级、⼦产品实施。本⽂将为大家详细聊聊在数栈UI5.0体验升级中，数栈设计团队的设计思路。主要从产品升级策划、确⽴设计⽬标和解决⽅向、数栈设计语⾔、设计提升点、情感化设计五个⽅⾯分享数栈DTins
数栈作为袋鼠云打造的一站式数据开发与治理平台，从2016年发布第⼀个版本开始，就始终坚持着以技术为核⼼、安全为底线、提效为⽬标、中台为战略的思想，坚定不移地⾛国产化信创路线，不断推进产品功能迭代、技术创新、服务细化和性能升级。伴随业务的⻜速发展，数栈设计团队也启动了针对数栈产品的体验升级计划，从开始策划到最后应⽤到各个⼦产品，共经历了五个阶段：策划⽅案制定、设计⽅案落地、转化设计语⾔、Theme&RC升级、⼦产品实施。本⽂将为大家详细聊聊在数栈UI5.0体验升级中，数栈设计团队的设计思路。主要从产品升级策划、确⽴设计⽬标和解决⽅向、数栈设计语⾔、设计提升点、情感化设计五个⽅⾯分享数栈DTins
在当前的数字化转型浪潮下，“基础设施、配套设备、应用探索”的数字校园1.0阶段即将步入尾声、亦或已经完结，不同地区和类型的高校通过各类信息化系统和基础设施已经初步实现了业务数字化，整个数字校园的信息基础设施底座已有一定基础、信息时代教育治理新模式正在逐步呈现、信息技术支持科研创新初见成效。接下来，数字校园2.0阶段需要通过数据价值挖掘实现数据业务化，实现数字技术应用于教学，到技术与教育教学深度融合的跨越，形成新的数字时代的教育体系。《中国教育现代化2035》提出：建设智慧校园，统筹建设一体化、智能化教学、管理与服务平台，要坚持在数字化背景沐浴下的教育行业，不仅仅是简单的高校数据汇聚分析，更多是
在当前的数字化转型浪潮下，“基础设施、配套设备、应用探索”的数字校园1.0阶段即将步入尾声、亦或已经完结，不同地区和类型的高校通过各类信息化系统和基础设施已经初步实现了业务数字化，整个数字校园的信息基础设施底座已有一定基础、信息时代教育治理新模式正在逐步呈现、信息技术支持科研创新初见成效。接下来，数字校园2.0阶段需要通过数据价值挖掘实现数据业务化，实现数字技术应用于教学，到技术与教育教学深度融合的跨越，形成新的数字时代的教育体系。《中国教育现代化2035》提出：建设智慧校园，统筹建设一体化、智能化教学、管理与服务平台，要坚持在数字化背景沐浴下的教育行业，不仅仅是简单的高校数据汇聚分析，更多是
新的一年我们加紧了更新迭代的速度，增加了数据湖平台EasyLake和大数据基础平台EasyMR，超40项功能升级优化。我们将继续保持产品升级节奏，满足不同行业用户的更多需求，为用户带来极致的产品使用体验。以下为袋鼠云产品功能更新报告第四期内容，更多探索，请继续阅读。数据湖平台1.【元数据管理】Catalog创建在【元数据管理】页创建一个Catalog，填写Catalog名称、HiveMetaStore、SparkThrift。一个Calalog只允许绑定一个HiveMetaStore，SparkThrift用于Iceberg表创建、数据入湖转表任务，用户可以使用Calalog进行业务部门数据隔
新的一年我们加紧了更新迭代的速度，增加了数据湖平台EasyLake和大数据基础平台EasyMR，超40项功能升级优化。我们将继续保持产品升级节奏，满足不同行业用户的更多需求，为用户带来极致的产品使用体验。以下为袋鼠云产品功能更新报告第四期内容，更多探索，请继续阅读。数据湖平台1.【元数据管理】Catalog创建在【元数据管理】页创建一个Catalog，填写Catalog名称、HiveMetaStore、SparkThrift。一个Calalog只允许绑定一个HiveMetaStore，SparkThrift用于Iceberg表创建、数据入湖转表任务，用户可以使用Calalog进行业务部门数据隔
2月15日，数仓软件巨头Teradata宣布根据其对中国当前和未来商业环境的慎重评估，将逐步结束在中国的直接运营，后续进入中国公司的关闭程序。一石激起千层浪，这一消息，在国内的ToB市场引起了广泛关注。Teradata这家进入中国市场26年，为国内数仓发展带来重要启蒙，奠定数据服务人才基础，被业界称之为“数仓人才黄埔军校”的数据软件巨头如今在华落幕，令人感叹。近些年来，国产大数据基础建设百花齐放、发展蓬勃，中国软件企业在信创产业政策的助攻下，迎来了发展的黄金期，技术和产品能力快速提升，凭借自主可控、创新安全等优势，已经逐步实现对Teradata等国外主流软件的成功替换。其中包括以Hadoop体
2月15日，数仓软件巨头Teradata宣布根据其对中国当前和未来商业环境的慎重评估，将逐步结束在中国的直接运营，后续进入中国公司的关闭程序。一石激起千层浪，这一消息，在国内的ToB市场引起了广泛关注。Teradata这家进入中国市场26年，为国内数仓发展带来重要启蒙，奠定数据服务人才基础，被业界称之为“数仓人才黄埔军校”的数据软件巨头如今在华落幕，令人感叹。近些年来，国产大数据基础建设百花齐放、发展蓬勃，中国软件企业在信创产业政策的助攻下，迎来了发展的黄金期，技术和产品能力快速提升，凭借自主可控、创新安全等优势，已经逐步实现对Teradata等国外主流软件的成功替换。其中包括以Hadoop体
