近年来，国际形势的风云变幻，中美双边关系的恶化，自2013年“棱镜门”事件之后，又一次警示国人，对于科技领域，只有自己掌握核心关键技术，实现自主可控，才能摆脱越来越频繁的“卡脖子事件”，保证企业和国家信息安全。俗话说“基础不牢，地动山摇“。大数据基础平台什么？是打地基的，是重中之重，地基扎得越深、打得越牢，上面的建筑才能越稳定。可以说，数字化转型的“万丈高楼”起于基础平台，具备自主可控的平台建设能力，是真正意义上一切的前提。袋鼠云今年7月最新推出自研大数据基础平台EasyMR，该产品提供Hadoop、Hive、Spark、Trino、HBase、Kafka等组件的自动化安装、中心化管理与集群监
近年来，国际形势的风云变幻，中美双边关系的恶化，自2013年“棱镜门”事件之后，又一次警示国人，对于科技领域，只有自己掌握核心关键技术，实现自主可控，才能摆脱越来越频繁的“卡脖子事件”，保证企业和国家信息安全。俗话说“基础不牢，地动山摇“。大数据基础平台什么？是打地基的，是重中之重，地基扎得越深、打得越牢，上面的建筑才能越稳定。可以说，数字化转型的“万丈高楼”起于基础平台，具备自主可控的平台建设能力，是真正意义上一切的前提。袋鼠云今年7月最新推出自研大数据基础平台EasyMR，该产品提供Hadoop、Hive、Spark、Trino、HBase、Kafka等组件的自动化安装、中心化管理与集群监
近日，在“开源中国（OSCHINA）”开展的年度评选中，袋鼠云数栈技术团队凭借在2022年间的技术分享频率及质量、运营积极性等多方面的表现，荣获“2022年度优秀开源技术团队”的称号，这也是袋鼠云数栈技术团队连续第二年获得此奖项。开源中国作为国内最大的开源技术交流社区，一直不遗余力地助力着国内开源发展，不断向开发者传播最新开源与开发技术信息，让更多开发者关注到优秀的开源项目与技术。袋鼠云数栈技术团队本次能有幸入选“2022年度优秀开源技术团队”，这不仅是团队本身的努力，更是所有社区成员与我们共同建设的成果。在此感谢广大开发者对袋鼠云开源的不断支持，社区获得的一切成绩属于你们！作为全链路数字化技
近日，在“开源中国（OSCHINA）”开展的年度评选中，袋鼠云数栈技术团队凭借在2022年间的技术分享频率及质量、运营积极性等多方面的表现，荣获“2022年度优秀开源技术团队”的称号，这也是袋鼠云数栈技术团队连续第二年获得此奖项。开源中国作为国内最大的开源技术交流社区，一直不遗余力地助力着国内开源发展，不断向开发者传播最新开源与开发技术信息，让更多开发者关注到优秀的开源项目与技术。袋鼠云数栈技术团队本次能有幸入选“2022年度优秀开源技术团队”，这不仅是团队本身的努力，更是所有社区成员与我们共同建设的成果。在此感谢广大开发者对袋鼠云开源的不断支持，社区获得的一切成绩属于你们！作为全链路数字化技
“智能标签平台上线后，支行及业务部门已创建多个客群用于营销，为我行客户精细化管理打下了良好基础。”杭州联合银行始终以服务市民、小微企业、经济组织和地方经济发展为己任，本着“做小、做散、做深”的原则，通过促进机制转型、优化业务流程、丰富产品体系、强化风险管控、等一系列手段，逐步形成了具有自身特色的“社区银行”发展战略，获得了良好的社会效益和经营效益。2021年，联合银行就已搭建了大数据基础平台，围绕平台搭建了数据研发平台、大数据调度平台及大数据服务平台，提高了数据管理与服务效率。为进一步发挥大数据平台优势与数据价值，为大零售转型项目及十四五战略落地提供数据能力，快速响应业务需求，联合银行启动数据
“智能标签平台上线后，支行及业务部门已创建多个客群用于营销，为我行客户精细化管理打下了良好基础。”杭州联合银行始终以服务市民、小微企业、经济组织和地方经济发展为己任，本着“做小、做散、做深”的原则，通过促进机制转型、优化业务流程、丰富产品体系、强化风险管控、等一系列手段，逐步形成了具有自身特色的“社区银行”发展战略，获得了良好的社会效益和经营效益。2021年，联合银行就已搭建了大数据基础平台，围绕平台搭建了数据研发平台、大数据调度平台及大数据服务平台，提高了数据管理与服务效率。为进一步发挥大数据平台优势与数据价值，为大零售转型项目及十四五战略落地提供数据能力，快速响应业务需求，联合银行启动数据
“数据湖”、“湖仓一体”及“流批一体”等概念，是近年来大数据领域热度最高的词汇，在各大互联网公司掀起了一波波的热潮，各家公司纷纷推出了自己的技术方案，其中作为全链路数字化技术与服务提供商的袋鼠云，在探索数据湖架构的早期，就调研并选用了Iceberg作为基础框架，在落地过程中深度使用了Iceberg并进行了部分改造，在这个过程中，我们积累出了一些经验和探索实践，希望通过本篇文章与大家分享，也欢迎大家一起共同讨论。一、为什么选择IcebergIceberg作为Apache基金会下的一个顶级项目，是业界公认的开源数据湖实现方案之一，考虑到任何概念的提出本质上是源于底层软硬件技术或架构上取得了新的突破
“数据湖”、“湖仓一体”及“流批一体”等概念，是近年来大数据领域热度最高的词汇，在各大互联网公司掀起了一波波的热潮，各家公司纷纷推出了自己的技术方案，其中作为全链路数字化技术与服务提供商的袋鼠云，在探索数据湖架构的早期，就调研并选用了Iceberg作为基础框架，在落地过程中深度使用了Iceberg并进行了部分改造，在这个过程中，我们积累出了一些经验和探索实践，希望通过本篇文章与大家分享，也欢迎大家一起共同讨论。一、为什么选择IcebergIceberg作为Apache基金会下的一个顶级项目，是业界公认的开源数据湖实现方案之一，考虑到任何概念的提出本质上是源于底层软硬件技术或架构上取得了新的突破
年底啦～2022年即将走到尾声，不过袋鼠云对产品品质的坚持始终如一，这段时间我们对产品本身以及客户反馈的一些问题进行了持续的更新和优化，例如新增任务告警，进行了Connector相关功能优化，以及支持跨时间分区圈群等。以下为袋鼠云产品功能更新报告第三期内容，更多探索，请继续查阅。离线开发平台1.任务诊断用户痛点：任务一直在等待提交或者等待运行，用户看不到原因，不知道该如何处理能让任务尽快跑起来；任务运行了很久都没有出结果，不知道是什么原因导致，不能有针对性地进行改善。新增功能说明：对周期和补数据实例将按实例所涉及流程进行诊断，提示异常原因，给出建议方案。另外针对SparkSQL任务还支持根据参
年底啦～2022年即将走到尾声，不过袋鼠云对产品品质的坚持始终如一，这段时间我们对产品本身以及客户反馈的一些问题进行了持续的更新和优化，例如新增任务告警，进行了Connector相关功能优化，以及支持跨时间分区圈群等。以下为袋鼠云产品功能更新报告第三期内容，更多探索，请继续查阅。离线开发平台1.任务诊断用户痛点：任务一直在等待提交或者等待运行，用户看不到原因，不知道该如何处理能让任务尽快跑起来；任务运行了很久都没有出结果，不知道是什么原因导致，不能有针对性地进行改善。新增功能说明：对周期和补数据实例将按实例所涉及流程进行诊断，提示异常原因，给出建议方案。另外针对SparkSQL任务还支持根据参
