首页 > 传媒 > 关键词  > 数据治理最新资讯  > 正文

瓴羊数据Meet Up第三期:2025年,数据治理的金钥匙,藏在这些趋势与实践里

2025-01-20 14:53 · 稿源: 站长之家用户

数据、算法与算力,被称为人工智能的三驾马车。在数据体量爆发性增长的当下,精耕细作的数据治理,或将成为企业赶上大模型风口的制胜关键。

瓴羊「数据荟」数据Meet Up第三站线上活动成功举办。来自中国信息通信研究院、阿里云智能集团、雅戈尔集团的业务主管、技术专家及大数据负责人,围绕“大模型时代的数据治理创新实践”主题,深入分享了AI与数据治理的深度融合、数据平台建设的理想实践以及数据资产管理与运营的前沿见解。

大模型时代,数据治理四大趋势与三大堵点

中国信息通信研究院云计算与大数据研究所高档业务主管尹正指出,AI时代下的数据治理,将呈现出“全域数据治理”、“数据研发模式工程化、敏捷化”、“数据治理技术智能化”、“数据安全纵深化”四大趋势。

具体而言,全域数据治理将重点关注音视频、图片、文本等非结构化数据。在实践领域,中国移动、自动驾驶等企业已通过构建非结构化数据评价体系,关注合成数据技术,提升了数据集可信性,解决了“数据荒”难题。

在全域数据治理下,数据研发模式也随之发生变化,企业应打造面向AI与BI结合的数据工程“流水线”,以系统化方法提升效率、降低成本、保障质量、推动创新。同时,智能化数据治理将逐步取代传统劳动密集型模式,而AI驱动的数据安全技术与能力,将为解决数据安全关键问题、应对大模型安全挑战指明方向。

尽管趋势向好,但当前大模型发展仍面临质量、安全、伦理三大数据堵点,具体体现为:高质量数据集构建知易行难,安全与隐私泄露频发、数据伦理体系亟待完善。不过,面向AI的数据治理框架正在形成,人工智能数据治理的流程、方法、技术也在逐步完善。此外,依据DataOps理念构建面向人工智能的数据工程体系,为Al提供了敏捷有效、安全可信的数据供给,并进一步为企业人工智能长期平稳、良好、健康发展提供了保障。

以数据标准为抓手,让AI为数据治理提效

阿里云智能集团瓴羊高档技术专家周鑫指出,企业数据治理面临现状评估难、组织架构复杂、实施成本高、治理迭代难等多个难题,破解以上难题的较好方法,是找到核心抓手,降低数据治理的复杂度。

数据治理很重要的一个核心是数据标准的梳理与建设。通过瓴羊Dataphin,企业只需完成基础数据梳理,即可完成大部分数据治理工作。例如,在身份证数据治理中,企业仅需定义数据类型、分级标准及字段空值校验等规则,系统即可自动开展元数据监控,检验数据是否符合字符串类型、是否存在空值,安全权限是否合规。除元数据监控外,数据标准还能与数据质量、建模、研发相结合,使数据标准可以在数据全生命周期中得以不断流转。

周鑫提到,数据质量是AI成功的关键,据Gartner预测,到 2025 年,至少三分之二的生成式人工智能项目将因数据质量不足等问题在概念验证阶段被放弃。与此同时,AI同样是实现主动数据治理的重要工具,它可以让数据治理变得更加智能化和自动化,形成从数据发现、治理、评估与标准的完整闭环。

瓴羊Quick BI智能小D是AI+BI的标志性产品化成果,它承担着数据PD与数据架构师的角色,可以为用户业务问题提供直接的解决方案。以往,关键词搜索往往与实际业务问题相差千里,搜索“交易”得出的相似度匹配信息,并不能解决实际的业务问题。而利用智能小D,用户可直接提出“GMV提升20%,我能做什么?”或“哪些表适合用于客户分层?”等问题,无需自行拆解数据维度,即可获取直接的数据维度与策略指引。

除了数据发现与理解,瓴羊通过自动属性丰富功能,帮助企业一键生成目录、标签、描述等信息,将原本需要半小时完成的上架操作缩短至数十秒,效率提升百倍。此外,瓴羊的自动生成识别特征功能,让不会写、读不懂正则表达式的人也能轻松完成条件组合复杂的特征识别工作。迈过提效阶段后,Dataphin还将往更加自动化、智能化方向演进,探索自动生成质量规则、智能理解业务流程解决方案,让数据治理更加轻盈。

Dataphin的技术演进:打造开放兼容的数据建设与治理平台

阿里云智能集团瓴羊高档技术专家江岚指出,Dataphin在产品演进过程中,面临着“全域资产建设与治理”、“混合云架构”、“多引擎支持”和“资产消费”等挑战。为应对这些挑战,Dataphin成功探索出了一套优化数据建设与治理中台的技术实现路径。

在多引擎兼容方面,Dataphin通过多引擎SDK和插件的结合,充分融合了富客户端和轻客户端的优势,在接口层、插件层和依赖层构建了多引擎技术架构,实现了对多云环境的支持以及多种引擎的适配兼容。

在混合云架构方面,Dataphin基于Kubernetes集群部署了应用集群与默认调度集群,同时在IDC通过外部调度集群进行任务调度,广泛应用于数据集成、数据服务和资产采集等多个场景。

在资产消费场景中,Dataphin通过统一JDBC,实现了数据资产在权限管理、脱敏处理、审计等方面的统一管控。此外,Dataphin还与Quick BI进行了深度集成,大幅简化了用户的配置工作。目前,Dataphin已经在自助取数与分析、数据探查与分析、接口调用与应用等三种消费方式中得到了广泛应用,极大地提升了业务人员、数据分析师和开发人员的工作效率。

从数据资产建设到数据运营,雅戈尔的数据价值探索实践

雅戈尔集团大数据负责人竺显波表示,数字化建设有两个阶段,一个阶段是一切业务数据化、可视化,第二个阶段是一切数据业务化、价值化。数字化之所以经常被说成是“一把手工程”,正在于它要协同好公司的战略、业务、技术、治理与改革,是一个系统性的大工程。

雅戈尔的数据架构由以下三部分组成:数据源层、数据中台与数据应用。其中,数据中台和数据应用分别通过瓴羊Dataphin和Quick BI等数据产品,实现了工具与架构的全面升级,落地了多个数字化产品成果。例如,企业数据门户以销售、物流等类别划分,用户只需简单拖拉拽操作,即可快速生成所需报表;主题门户则根据品牌、大区管理人员、店长等特定身份进行分类,为不同用户准确聚合并有效查找所需数据提供了便利。

在数据中台建设方面,雅戈尔成功搭建了16个系统,整合了950多个数据表、400个指标和650个报表,提升了系统性能与架构效率。同时,雅戈尔实现了组织架构信息、商品信息、人员信息等核心数据的统一治理与贯通,消除了数据二义性。

在标准化治理的基础上,雅戈尔从数据组织、技术架构和流程管理三个层面全面优化,推动数据价值的深度挖掘与应用。以“平效”为例,数据团队基于“面积在 300 至 1 万平方米之间,面积越大,平效越高”的数据规律,验证了公司“开大店、关小店”战略的科学性和可行性,为企业决策提供了数据支撑。

随着AI与数据治理深度融合,更多行业将迎来数字化转型的新机遇。瓴羊将持续以数据标准为核心,打造开放兼容的数据建设与治理平台,推动企业开启更加有效、安全的数据治理新时代。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 聪明钱都在买黄金!2025年这样投资更稳妥

    2025 年,全球经济增长的不平衡性、各种突发事件的不确定性,以及新兴市场国家不断上升的黄金储备需求,都使得黄金的避险需求持续攀升,进而推动黄金价格上涨。此外,全球经济的复苏预期可能带来通货膨胀压力,这也对黄金价格产生积极影响。在这样的背景下,黄金再度成为投资者高度关注的资产。作为黄金投资领域的佼佼者,皇御环球凭借卓越的专业能力和服务,为

  • 2025年护墙板十大品牌榜

    ‌美步护墙板‌:美步护墙板隶属于连云港美步家居有限公司,专注于实木定制家居的研发、生产、销售和服务,主要产品包括楼梯、木门、护墙板等‌。‌豪利护墙板‌:豪利护墙板成立于 1996 年,主要从事原木套装门和原木家居产品的研发、生产和销售,产品涵盖原木定制家具、原木套装门、原木楼梯等‌。‌喜盈门护墙板‌:喜盈门护墙板创建于 2000 年,提供全屋整木�

  • 2025年已有10部电影票房破亿 你看了几部

    2025年中国电影市场表现亮眼,共有10部影片票房破亿。其中,《哪吒之魔童闹海》以152.63亿元票房夺冠,创中国影史新纪录;《唐探1900》以35.93亿元位居第二;《封神第二部:战火西岐》12.31亿元排名第三。《熊出没·重启未来》《射雕英雄传:侠之大者》分列四五名。春节档后首部破2亿的《向阳花》也进入前十。其他上榜影片包括《蛟龙行动》《我的世界大电影》《不说话的爱》和《美国队长4》。

  • 2025年清明节单日票房过1亿:《哪吒2》仍高居第三 破155亿

    据猫眼专业版数据,4月4日14时29分,2025年清明节单日票房破1亿元!总出票244.3万张,总场次47.2万场,平均票价40.9元。你觉得《哪吒2》能超越《泰坦尼克号》吗?

  • 2025年世界前10车企出炉:比亚迪、吉利双双杀入前10

    乘联会秘书长崔东树近日发布文章指出,2025年1-2月中国汽车销量达1352万台,同比增长2%,在全球汽车市场中的份额高达33.7%。新能源领域发展迅猛,中国自主车企表现突出,电动化的浪潮也使得部分国际车企逐渐走向衰落。在今年全球车企排名前十中,有两家中国车企份额上升明显,比亚迪位居世界第6位,吉利排名第7位。

  • 全球动荡下,2025年如何借避险?皇御环球带您揭秘黄金投资良机

    全球经济形势与黄金投资价值2025 年,全球经济格局持续演变,市场不确定性因素显著增多。在这样的背景下,黄金作为传统避险资产,其投资价值再次受到市场的广泛关注。国际货币基金组织(IMF)最新研究指出,全球经济增长的不确定性将持续推动黄金需求增长,而矿产开采难度加大等因素可能进一步收紧供给,这些都为金价提供了坚实的基本面支撑。黄金成为 2025 投资必

  • 爱聊APP 2025年第 一季度“净网行动”公示 精细化生态内容治理

    在数字经济与社交需求深度融合的背景下,爱聊APP始终坚持以用户安全为核心,通过技术赋能、生态共治、政策合规三大维度,持续推进“净网行动”常态化治理。2025 年第 一季度,平台累计处理违规案例108, 662 例,禁言处罚27, 258 例,封禁账号23, 951 例,永 久封禁账号57, 453 例,全方位构筑社交安全屏障,为用户打造真实、可靠的社交环境。深化实名认证与反诈攻坚爱�

  • 9to5mac:2025年,苹果还将发布 15 款新品,这是清单列表!

    2025 年迄今为止,苹果已经发布了五款新产品,不过她们还为用户准备了更多惊喜,iPhone 17系列、iPad、Mac、Vision pro……

  • 中手游发布2024年业绩 2025年多项战略调整谋增长

    3月27日港股上市公司中手游公布了2024年度业绩。截至2024年12月31日,中手游实现了19.3亿元人民币的收入,经调整后的净亏损达到20.8亿元人民币。公司将继续秉承创新、务实、高效的发展理念,为玩家带来更多优质的游戏产品和服务。

  • 2025年值得关注的AIGC企业,PPIO派欧云上榜!

    在第三届中国AIGC产业峰会上,PPIO派欧云凭借AI基础设施领域的技术优势入选"2025年值得关注的AIGC企业"榜单。其AIGC云服务平台采用分布式计算、云原生和推理加速等创新技术,提供高性价比、低延迟的大模型API服务和一站式AI解决方案。目前平台日均tokens消耗量突破1500亿,通过硬件降本、算力调度和推理加速三大技术实现10倍降本增效。PPIO已构建覆盖全球1200+城市的分布式云网络,提供10毫秒级低延迟服务,助力企业降低AI使用门槛,推动产业智能化发展。