草庐IT

终于有人把不同标签的加工内容与落库讲明白了丨DTVision分析洞察篇

上一篇文章详细给大家介绍了标签的设计与加工,在标签生命周期流程中,标签体系设计完成后,便进入标签加工与上线运行阶段,一般来说数据开发团队会主导此过程,但我们需要关心以下几个问题:·标签如何快速创建和实现标签逻辑的在线化管理·业务人员怎么参与到标签建设流程中·百万级别的标签如何落表一、加工方式:传统VS在线当企业无标签系统时,一般由数据开发在离线数仓中完成标签的加工和运行,运营或市场同学需要某个标签需要通过产品经理向数据开发提需求,这个过程存在很多问题:·标签资产不可见:标签是存在于表里的字段,业务人员不清楚现在有多少标签;标签的加工逻辑与业务逻辑是否一致只能查看SQL代码;新上线的标签只有部分

终于有人把不同标签的加工内容与落库讲明白了丨DTVision分析洞察篇

上一篇文章详细给大家介绍了标签的设计与加工,在标签生命周期流程中,标签体系设计完成后,便进入标签加工与上线运行阶段,一般来说数据开发团队会主导此过程,但我们需要关心以下几个问题:·标签如何快速创建和实现标签逻辑的在线化管理·业务人员怎么参与到标签建设流程中·百万级别的标签如何落表一、加工方式:传统VS在线当企业无标签系统时,一般由数据开发在离线数仓中完成标签的加工和运行,运营或市场同学需要某个标签需要通过产品经理向数据开发提需求,这个过程存在很多问题:·标签资产不可见:标签是存在于表里的字段,业务人员不清楚现在有多少标签;标签的加工逻辑与业务逻辑是否一致只能查看SQL代码;新上线的标签只有部分

微服务洞察,让微服务更透明

  微服务作为云原生时代下一种开发软件的架构和组织方法,通过将明确定义的功能分成更小的服务,并让每个服务独立迭代,增加了应用程序的灵活性,允许开发者根据需要更轻松地更改部分应用程序。同时每个微服务可以由单独的团队进行管理,使用适当的语言编写,并根据需要进行独立扩缩容。但微服务同样也并非“银弹”,在带来如此多的优势的同时,逐渐膨胀的微服务数量也为系统带来了空前的复杂度,服务之间错综复杂的调用、协作关系如同一层迷雾笼罩在系统之上,借助Trace、Log、Metric三驾马车我们的系统具备了一定的可观测性,但所能得到信息是标准化且固定的,往往不能够满足复杂场景下的观测需求,比如微服务引擎MSE(Mi

微服务洞察,让微服务更透明

  微服务作为云原生时代下一种开发软件的架构和组织方法,通过将明确定义的功能分成更小的服务,并让每个服务独立迭代,增加了应用程序的灵活性,允许开发者根据需要更轻松地更改部分应用程序。同时每个微服务可以由单独的团队进行管理,使用适当的语言编写,并根据需要进行独立扩缩容。但微服务同样也并非“银弹”,在带来如此多的优势的同时,逐渐膨胀的微服务数量也为系统带来了空前的复杂度,服务之间错综复杂的调用、协作关系如同一层迷雾笼罩在系统之上,借助Trace、Log、Metric三驾马车我们的系统具备了一定的可观测性,但所能得到信息是标准化且固定的,往往不能够满足复杂场景下的观测需求,比如微服务引擎MSE(Mi

开发者必读:2022年移动应用趋势洞察白皮书

华为开发者联盟与艾瑞咨询联合发布《2022年移动应用趋势洞察白皮书》,本白皮书主要分析移动应用行业发展现状和趋势,并对影音娱乐、通讯社交、电商生活、运动健康、出行导航等细分行业场景进行分析,把握移动应用细分行业发展特色和趋势,为广大开发者的开发和运营决策提供参考。华为开发者联盟一直致力于全方位联接全球开发者,以领先技术和开放能力赋能开发者创新,以丰富多元的运营推广资源加速开发者商业成功,携手全球开发者共建HMS生态沃土。以下内容摘自白皮书。

开发者必读:2022年移动应用趋势洞察白皮书

华为开发者联盟与艾瑞咨询联合发布《2022年移动应用趋势洞察白皮书》,本白皮书主要分析移动应用行业发展现状和趋势,并对影音娱乐、通讯社交、电商生活、运动健康、出行导航等细分行业场景进行分析,把握移动应用细分行业发展特色和趋势,为广大开发者的开发和运营决策提供参考。华为开发者联盟一直致力于全方位联接全球开发者,以领先技术和开放能力赋能开发者创新,以丰富多元的运营推广资源加速开发者商业成功,携手全球开发者共建HMS生态沃土。以下内容摘自白皮书。

从技术体系到商业洞察,中小研发团队架构实践之收尾篇

  本篇主要讲从技术体系到商业洞察,分为五个小节,新一代开发范式云原生、建立自己的技术体系、技术判断力、技术业务产业周期,技术与商业洞察。对于新一代开发范式和技术体系的建立,文字部分我就不再补充,具体可以看看PPT。这里我想讲技术判断力和商业洞察,这是建立技术体系之后,对关键点的判断和洞察,是从点到面再到点的过程,是体系之上点的力量。商业洞察需要理解信息、理解技术,看懂社会和商机。  理解信息,理解信息形式和媒体的真正力量。信息影响着人的意识,谁掌握了信息分发和信息推荐,谁就在一定上掌握着社会舆论。电台总统罗斯福、电视总统肯尼迪、社交总统奥巴马、推特总统特朗普,皆是如此。  理解信息技术,信息

从技术体系到商业洞察,中小研发团队架构实践之收尾篇

  本篇主要讲从技术体系到商业洞察,分为五个小节,新一代开发范式云原生、建立自己的技术体系、技术判断力、技术业务产业周期,技术与商业洞察。对于新一代开发范式和技术体系的建立,文字部分我就不再补充,具体可以看看PPT。这里我想讲技术判断力和商业洞察,这是建立技术体系之后,对关键点的判断和洞察,是从点到面再到点的过程,是体系之上点的力量。商业洞察需要理解信息、理解技术,看懂社会和商机。  理解信息,理解信息形式和媒体的真正力量。信息影响着人的意识,谁掌握了信息分发和信息推荐,谁就在一定上掌握着社会舆论。电台总统罗斯福、电视总统肯尼迪、社交总统奥巴马、推特总统特朗普,皆是如此。  理解信息技术,信息

风险洞察之事件总线的探索与演进

作者:京东科技刘红申一、事件总线介绍事件总线,或称其为数据管道,作为整个风险洞察数据流转的重要一环,它承担着风险实时数据统一标准化的重要职责。在面对复杂多样的上游数据,事件总线可以将复杂数据进行解析、转换,富化、分发等操作。底层核心算子抽象为source、transform、sink三层架构,支持各层算子插件式扩展,并支持groovy、python等脚本语言自定义配置,以及自定义jar包的上传,拥有将上游数据单向接入多向输出的能力,在数仓与上层应用的开展中,起着承上启下的作用。二、事件总线-遇到的技术挑战与解决方案技术难点与挑战风险洞察平台运行初期,业务数据接入完全采用定制化代码处理,通过代码

风险洞察之事件总线的探索与演进

作者:京东科技刘红申一、事件总线介绍事件总线,或称其为数据管道,作为整个风险洞察数据流转的重要一环,它承担着风险实时数据统一标准化的重要职责。在面对复杂多样的上游数据,事件总线可以将复杂数据进行解析、转换,富化、分发等操作。底层核心算子抽象为source、transform、sink三层架构,支持各层算子插件式扩展,并支持groovy、python等脚本语言自定义配置,以及自定义jar包的上传,拥有将上游数据单向接入多向输出的能力,在数仓与上层应用的开展中,起着承上启下的作用。二、事件总线-遇到的技术挑战与解决方案技术难点与挑战风险洞察平台运行初期,业务数据接入完全采用定制化代码处理,通过代码