数据管理的发展与现状.docxVIP

数据管理的发展与现状 不得不说，国内外数据管理工作正处在欣欣向荣阶段，行业内外也均对数据管理的未来走向充满期待。从长期来看，2022年9月，“2035数字议程”发布了《数据治理》报告，研究探讨了未来数据治理的发展方向和趋势。总结起来，数据治理工作的目标和蓝图规划主要锚定在数据生态化、数据市场化、数据全球化方面。从中期来看，2022年，各家央企陆续公布了其数字化转型战略方案和路线图，内容主要聚焦于数据与业务的智能化协同。 那如果从短期来看，2023年数据管理工作又会有哪些发展趋势值得关注呢？笔者主要整理了一些国内外公司机构高层领导的观点，希望能从新的、外部视角给到一个启发。总结起来，以下几大趋势是共识程度较高的，且笔者认为的确是数据管理发展到目前阶段需要直面的。 ? 一 企业需数据来抵消经济不确定性 部分观点认为，无论是面对经济进入衰退周期、还是未来的各种利好，数据都将是企业应对这种不确定性的重要利器。Alation（美国的一家数据编录服务提供商）首席执行官兼联合创始人Satyen Sangani和首席技术官John Wills认为，在公司应对充满挑战的经济格局时，寻找、理解和使用可靠的数据将成为重要的竞争优势。Denodo公司则更加精准地提到了，企业将未来寻求优化基础设施成本，以应对经济低潮，由此带来两个影响，一是云端迁移，以减少数据存储和计算成本；二是以现代化的方式实现对数据的综合管理，进而降低数据成本。通过数据来帮助企业进行降本增效，是未来短时间内继续值得数据工作者重点关注的事项，毕竟通过数据来为企业创收，绝大部分企业并不具备相关条件。 ? 二 面向数据编织的数据架构转型 新的数据架构是未来数据管理工作者需要关注的。Denodo公司认为，在过去二十年间，数据管理经历了集中化与分散化的循环，但过去几年已经证明，对于大多数组织而言，数据更加分散而非集中。为了更好地管理和访问分布式数据，两种数据架构方法（数据编织和数据网格）的采用速度明显加快。 数据编织（Data Fabric）与数据网格（Data Mesh）的最大区别在于，数据编织是在分布式数据之上构建一个统一的虚拟管理层，而数据网格则是基于一些共同规则，分布式构建和管理数据网络。 轻松访问数据并确保其受到治理和安全保护，对于每个数据相关者来说都很重要。Komprise（美国的一家分析驱动型数据管理初创公司）首席执行官兼联合创始人Kumar Goswami指出，数据编织可以弥合数据孤岛并提供更高的可移植性、可见性和治理便捷性。尤其是针对企业中的“暗数据”——非结构化数据，企业需要将非结构化数据整合到其数据架构中，这其中的关键点在于连接和分析，而数据编织技术为此提供了可能。可以说，数据编织技术是适配未来数据湖架构的。TopQuadrant（美国的一家基于知识图谱提供各类数据解决方案公司）首席技术官Ralph Hodgson指出，利用元数据去关联企业中的核心数据，是满足业务出现新情况的基础。 Gartner高级研究总监简儁芬认为，数据管理的未来发展趋势可从三个维度来看——架构的改变、技术的转变以及组织的衍化。其中，架构的改变层面，首先强调了数据仓库举足轻重的地位，其次便讲到了未来，数据目录会被广泛使用。以往“数据目录”主要用于帮助企业机构了解数据的定义和来源，但现在的趋势是数据目录可以帮助企业机构了解数据的特性、使用者以及使用场景。而基于数据编织技术的数据目录，恰恰就是面向数据应用场景的一种数据目录构建方式。技术的转变层面，未来的数据管理和集成将会变得更加“关联”，更少“采集”，这同样是数据编织的架构思想。 ? 三 大众化数据应用 越来越多的数据专家意识到，今天许多的数据平台都是为具备数据素养的人而构建的，对数据有需求的人和懂得操作数据的人存在相当大的差距，企业需要关注的一点是，需要让更多的员工在日常工作中使用数据，则必须降低数据使用门槛。Alation的Satyen Sangani和John Wills认为，需要为非技术数据用户构建平台，以便所有用户都可以协作查找、理解和使用数据，不执行这种数据大众化的平台将变得过时。Mactores联合创始人兼首席顾问Nandan Umarj认为，2023年更多的公司转向自动化数据分析，以减少人工干预，降低人工成本。DocuWare（德国一家数字文档管理公司）公司认为，必须通过数据团队去获取数据是一件耗时且繁琐的过程，如果具有不同专业知识的员工可以轻松快速地访问数据，则使公司能够发现新的业务见解并获得竞争优势。希捷公司发布的《2023年数据市场趋势预测》认为，面对经济不确定性，企业领导者比以往任何时候都更加倚重他们的团队。为团队提供数据访问权限有助于员工充分利用深度数据分析提供的丰富洞察力。若能够为企业中的每一个人提供相应权限的数据，更好地解