草庐IT

Denodo预测2023年数据管理和分析的未来

至顶网 2023-03-28 原文
然新冠肺炎疫情加速推进了企业的数字化转型，但普遍的共识是，数字业务模式已经在很多企业（以传统企业为主）一劳永逸地建立起来。即便传统企业已全面恢复生产经营，其大量业务交易仍将以数字方式进行。事实上，数字和数据驱动的业务创新可能会使领先者从竞争中脱颖而出。

数据是数字业务的核心，通过实施适当的策略和规划来管理数据及相关基础设施，将是企业成功的关键。正因如此，我们可以看到，在与数据管理基础设施和架构相关的领域内出现了很多创新。以下是Denodo认为将在 2023 年产生最大影响的五大趋势，这些趋势与数据和分析有关。

趋势 1：随着经济即将进入衰退周期的风险升高，公司将寻求优化基础设施成本

无论北美地区目前是否处于衰退，各公司都在积极削减成本，减少 IT 基础设施。这些措施对于首席执行官而言都已经习以为常。虽然可以通过使用云继续降低计算和存储成本，但由于在数据和分析基础设施方面投入巨大，向云端迁移仍有可能给组织带来高昂的成本和支出。部分得益于存储、计算和应用程序方面的广泛选择，公司通常采用淘汰并更换的策略来实现数据和分析工作的现代化。这种方法不仅成本高昂，而且通常会导致 IT 部门运营中断。

Denodo认为2023 年，更多公司的 IT 部门将专注于以现代化、无中断的方式来更新其 IT 基础设施，无论其数据是完全驻留在单个云、多个云中，还是驻留在包括本地在内的混合环境中。

趋势 2 – 数据治理将更加重视对业务而言最重要的数据

随着数据量的增长、行为数据等新数据类型的出现以及数据环境的分布式趋势日益增强，企业数据治理仍然是企业面临的首要挑战。在跨整个企业管理数据标准和访问策略的同时，确保用户能够访问可靠且与目标相符的业务数据，正变得越来越复杂和具有挑战性。最近多起数据泄露事件引发了关于应该保留多少数据以及应该保留哪些数据的思考，并凸显了监控企业数据使用情况的必要性。

很多组织都依赖技术和数据治理平台帮助他们解决这些数据管理难题。他们希望找到的解决方案能在异构和碎片化的数据生态系统中提供集中管理和控制，同时支持数据的发现、访问和理解。“数据公民”希望确保数据值得信赖并与业务目标相符，而组织则希望更好地了解数据使用模式，以便更好地满足业务部门对提供数据智能的数据需求。

在接下来的一年中，很多组织将开始关注对业务而言最重要的数据，并将采用适当的治理级别。

趋势 3：加速采用数据编织和数据网格

在过去二十年间，数据管理经历了集中化与分散化的循环，其中涉及的技术包括数据库、数据仓库、云数据存储、数据湖等。虽然在哪种方法最好的争论中，支持者和反对者势均力敌，但过去几年已经证明，对于大多数组织而言，数据更加分散而非集中。部署企业数据架构有多种选择，但在 2022 年，为了更好地管理和访问分布式数据，两种数据架构方法（数据编织和数据网格）的采用速度明显加快。虽然两者之间存在固有差异，数据编织是多种数据管理技术组成的可组合体系，而数据网格是流程导向，旨在让一组分布式团队在他们适合的领域管理企业数据。但对于希望更好地管理数据的企业而言，二者都至关重要。轻松访问数据并确保其受到治理和安全保护，对于每个数据利益相关者（从数据科学家一直到高管）来说都很重要。毕竟，它对于仪表板和报告、高级分析、机器学习和 AI 项目都至关重要。

如果通过部署正确的数据基础设施进行适当构建，数据编织和数据网格都可以在企业范围的数据访问、集成、管理及交付中发挥关键作用。因此，Denodo预计在 2023 年，大中型企业对这两种架构方法的采用将迅速增加。

趋势 4：随着基于 AI 的决策在商业领域的采用增加，符合伦理要求的 AI 将变得至关重要

各行各业的很多公司都在加速使用 AI 进行基于数据的决策，无论是社交媒体平台控制帖子、帮助医疗保健专业人员与患者建立联系，还是大型财富管理银行向其最终消费者提供信贷。然而，当最终结果由人工智能决定时，目前尚无办法抑制算法中的固有偏差。正因如此，拟议中的《欧盟人工智能法案》和《加拿大 C-27 法案》（如果颁布，可能会成为《人工智能和数据法案》）等新兴法规开始围绕人工智能在商业组织中的使用建立监管框架。这些新法规将人工智能应用程序的风险分为“不可接受”、“高”、“中”或“低”风险，并相应禁止或管控这些应用程序的使用。

在 2023 年，组织需要能够遵守这些拟议中的法规，包括关于隐私和数据治理、算法透明、公平和无歧视、问责制及可审核性的规定。考虑到这一点，组织必须实施自己的框架，为符合伦理要求的 AI 提供支持，例如可信赖 AI 的指导方针、同行评审框架，以及 AI 伦理委员会。随着越来越多的公司开始使用 AI，符合伦理要求的 AI 在未来一年必将变得比以往任何时候都更加重要。

趋势 5： 增强数据质量、数据准备、元数据管理和分析

虽然很多数据管理工作的最终结果是为高级分析提供数据并支持 AI 和 ML，但适当的数据管理本身对于组织的成功至关重要。数据常被称为新石油，因为基于数据和分析的见解能够不断推动业务创新。随着组织使用数据的速度不断提高，公司密切关注数据治理、数据质量和元数据管理也变得至关重要。然而，随着数据量、种类以及产生和使用速度的持续增长，数据管理的方方面面也变得非常复杂，为大规模管理造成严重困难。您可以思考一下数据科学家和数据工程师在开始利用数据之前查找和准备数据所花费的时间。正因如此，各种数据管理供应商最近开始采用增强型数据管理方法，通过使用 AI，众多组织能够自动完成很多数据管理任务。

根据一些顶级分析公司的说法，数据编织的每一层（即数据摄取、数据处理、数据编排、数据治理等）均应将 AI/ML 融入其中，以实现数据管理过程每个阶段的自动化。在 2023 年，增强型数据管理将获得强大的市场牵引力，帮助数据管理专业人员专注于提供数据驱动的见解，而不是被日常管理任务所阻碍。

这些是Denodo认为的最重要的五个趋势，数据和分析实践的其他领域也对数字业务在 2023 年及以后的生存和蓬勃发展有所影响。过去两到三年的经验明确告诉我们，线下模式也并非一直可行，因此数字业务并非后备选项，而是未来所在。

Denodo2023数据的和数大数据数据分析$数据管理

有关Denodo预测2023年数据管理和分析的未来的更多相关文章

  1. ruby - i18n Assets 管理/翻译 UI - 2

    我正在使用i18n从头开始​​构建一个多语言网络应用程序，虽然我自己可以处理一大堆yml文件，但我说的语言(非常)有限，最终我想寻求外部帮助帮助。我想知道这里是否有人在使用UI插件/gem(与django上的django-rosetta不同)来处理多个翻译器，其中一些翻译器不愿意或无法处理存储库中的100多个文件，处理语言数据。谢谢&问候，安德拉斯(如果您已经在ruby​​onrails-talk上遇到了这个问题，我们深表歉意) 最佳答案 有一个rails3branchofthetolkgem在github上。您可以通过在Gemfi

  2. ruby - 解析 RDFa、微数据等的最佳方式是什么，使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作，但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式，例如使用这个yaml文件，它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  3. ruby - Ruby 有 `Pair` 数据类型吗？ - 2

    有时我需要处理键/值数据。我不喜欢使用数组，因为它们在大小上没有限制(很容易不小心添加超过2个项目，而且您最终需要稍后验证大小)。此外，0和1的索引变成了魔数(MagicNumber)，并且在传达含义方面做得很差(“当我说0时，我的意思是head...”)。散列也不合适，因为可能会不小心添加额外的条目。我写了下面的类来解决这个问题:classPairattr_accessor:head,:taildefinitialize(h,t)@head,@tail=h,tendend它工作得很好并且解决了问题，但我很想知道:Ruby标准库是否已经带有这样一个类？ 最佳

  4. ruby-on-rails - 获取 inf-ruby 以使用 ruby​​ 版本管理器 (rvm) - 2

    我安装了ruby​​版本管理器，并将RVM安装的ruby​​实现设置为默认值，这样'哪个ruby'显示'~/.rvm/ruby-1.8.6-p383/bin/ruby'但是当我在emacs中打开inf-ruby缓冲区时，它使用安装在/usr/bin中的ruby​​。有没有办法让emacs像shell一样尊重ruby​​的路径？谢谢! 最佳答案 我创建了一个emacs扩展来将rvm集成到emacs中。如果您有兴趣，可以在这里获取:http://github.com/senny/rvm.el

  5. ruby-on-rails - 事件管理员日期过滤器日期格式自定义 - 2

    是否有简单的方法来更改默认ISO格式(yyyy-mm-dd)的ActiveAdmin日期过滤器显示格式？ 最佳答案 您可以像这样为日期选择器提供额外的选项，而不是覆盖js:=f.input:my_date,as::datepicker,datepicker_options:{dateFormat:"mm/dd/yy"} 关于ruby-on-rails-事件管理员日期过滤器日期格式自定义，我们在StackOverflow上找到一个类似的问题： https://s

  6. ruby - 我如何添加二进制数据来遏制 POST - 2

    我正在尝试使用Curbgem执行以下POST以解析云curl-XPOST\-H"X-Parse-Application-Id:PARSE_APP_ID"\-H"X-Parse-REST-API-Key:PARSE_API_KEY"\-H"Content-Type:image/jpeg"\--data-binary'@myPicture.jpg'\https://api.parse.com/1/files/pic.jpg用这个:curl=Curl::Easy.new("https://api.parse.com/1/files/lion.jpg")curl.multipart_form_

  7. 世界前沿3D开发引擎HOOPS全面讲解——集3D数据读取、3D图形渲染、3D数据发布于一体的全新3D应用开发工具 - 2

    无论您是想搭建桌面端、WEB端或者移动端APP应用，HOOPSPlatform组件都可以为您提供弹性的3D集成架构，同时，由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台（桌面/WEB/APP，而且某些客户端是“瘦”客户端）快速、方便地将数据接入到3D应用系统的解决方案，并且当访问数据时，在各个平台上的性能和用户体验保持一致，HOOPSPlatform将帮助您完成。利用HOOPSPlatform，您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品，HOOPSSDK包含的技术有：快速且准确的CAD

  8. 华为OD机试用Python实现 -【明明的随机数】 2023Q1A - 2

    华为OD机试题本篇题目：明明的随机数题目输入描述输出描述：示例1输入输出说明代码编写思路最近更新的博客华为od2023|什么是华为od，od薪资待遇，od机试题清单华为OD机试真题大全，用Python解华为机试题|机试宝典【华为OD机试】全流程解析+经验分享,题型分享,防作弊指南华为o

  9. FOHEART H1数据手套驱动Optitrack光学动捕双手运动(Unity3D) - 2

    本教程将在Unity3D中混合Optitrack与数据手套的数据流，在人体运动的基础上，添加双手手指部分的运动。双手手背的角度仍由Optitrack提供，数据手套提供双手手指的角度。 01  客户端软件分别安装MotiveBody与MotionVenus并校准人体与数据手套。MotiveBodyMotionVenus数据手套使用、校准流程参照：https://gitee.com/foheart_1/foheart-h1-data-summary.git02  数据转发打开MotiveBody软件的Streaming，开始向Unity3D广播数据；MotionVenus中设置->选项选择Unit

  10. 使用canal同步MySQL数据到ES - 2

    文章目录一、概述简介原理模块二、配置Mysql使用版本环境要求1.操作系统2.mysql要求三、配置canal-server离线下载在线下载上传解压修改配置单机配置集群配置分库分表配置1.修改全局配置2.实例配置垂直分库水平分库3.修改group-instance.xml4.启动监听四、配置canal-adapter1修改启动配置2配置映射文件3启动ES数据同步查询所有订阅同步数据同步开关启动4.验证五、配置canal-admin一、概述简介canal是Alibaba旗下的一款开源项目，Java开发。基于数据库增量日志解析，提供增量数据订阅&消费。Git地址：https://github.co

随机推荐