首页 > 传媒 > 关键词  > 数据治理最新资讯  > 正文

瓴羊数据Meet Up第三期:2025年,数据治理的金钥匙,藏在这些趋势与实践里

2025-01-20 14:53 · 稿源: 站长之家用户

数据、算法与算力,被称为人工智能的三驾马车。在数据体量爆发性增长的当下,精耕细作的数据治理,或将成为企业赶上大模型风口的制胜关键。

瓴羊「数据荟」数据Meet Up第三站线上活动成功举办。来自中国信息通信研究院、阿里云智能集团、雅戈尔集团的业务主管、技术专家及大数据负责人,围绕“大模型时代的数据治理创新实践”主题,深入分享了AI与数据治理的深度融合、数据平台建设的理想实践以及数据资产管理与运营的前沿见解。

大模型时代,数据治理四大趋势与三大堵点

中国信息通信研究院云计算与大数据研究所高档业务主管尹正指出,AI时代下的数据治理,将呈现出“全域数据治理”、“数据研发模式工程化、敏捷化”、“数据治理技术智能化”、“数据安全纵深化”四大趋势。

具体而言,全域数据治理将重点关注音视频、图片、文本等非结构化数据。在实践领域,中国移动、自动驾驶等企业已通过构建非结构化数据评价体系,关注合成数据技术,提升了数据集可信性,解决了“数据荒”难题。

在全域数据治理下,数据研发模式也随之发生变化,企业应打造面向AI与BI结合的数据工程“流水线”,以系统化方法提升效率、降低成本、保障质量、推动创新。同时,智能化数据治理将逐步取代传统劳动密集型模式,而AI驱动的数据安全技术与能力,将为解决数据安全关键问题、应对大模型安全挑战指明方向。

尽管趋势向好,但当前大模型发展仍面临质量、安全、伦理三大数据堵点,具体体现为:高质量数据集构建知易行难,安全与隐私泄露频发、数据伦理体系亟待完善。不过,面向AI的数据治理框架正在形成,人工智能数据治理的流程、方法、技术也在逐步完善。此外,依据DataOps理念构建面向人工智能的数据工程体系,为Al提供了敏捷有效、安全可信的数据供给,并进一步为企业人工智能长期平稳、良好、健康发展提供了保障。

以数据标准为抓手,让AI为数据治理提效

阿里云智能集团瓴羊高档技术专家周鑫指出,企业数据治理面临现状评估难、组织架构复杂、实施成本高、治理迭代难等多个难题,破解以上难题的较好方法,是找到核心抓手,降低数据治理的复杂度。

数据治理很重要的一个核心是数据标准的梳理与建设。通过瓴羊Dataphin,企业只需完成基础数据梳理,即可完成大部分数据治理工作。例如,在身份证数据治理中,企业仅需定义数据类型、分级标准及字段空值校验等规则,系统即可自动开展元数据监控,检验数据是否符合字符串类型、是否存在空值,安全权限是否合规。除元数据监控外,数据标准还能与数据质量、建模、研发相结合,使数据标准可以在数据全生命周期中得以不断流转。

周鑫提到,数据质量是AI成功的关键,据Gartner预测,到 2025 年,至少三分之二的生成式人工智能项目将因数据质量不足等问题在概念验证阶段被放弃。与此同时,AI同样是实现主动数据治理的重要工具,它可以让数据治理变得更加智能化和自动化,形成从数据发现、治理、评估与标准的完整闭环。

瓴羊Quick BI智能小D是AI+BI的标志性产品化成果,它承担着数据PD与数据架构师的角色,可以为用户业务问题提供直接的解决方案。以往,关键词搜索往往与实际业务问题相差千里,搜索“交易”得出的相似度匹配信息,并不能解决实际的业务问题。而利用智能小D,用户可直接提出“GMV提升20%,我能做什么?”或“哪些表适合用于客户分层?”等问题,无需自行拆解数据维度,即可获取直接的数据维度与策略指引。

除了数据发现与理解,瓴羊通过自动属性丰富功能,帮助企业一键生成目录、标签、描述等信息,将原本需要半小时完成的上架操作缩短至数十秒,效率提升百倍。此外,瓴羊的自动生成识别特征功能,让不会写、读不懂正则表达式的人也能轻松完成条件组合复杂的特征识别工作。迈过提效阶段后,Dataphin还将往更加自动化、智能化方向演进,探索自动生成质量规则、智能理解业务流程解决方案,让数据治理更加轻盈。

Dataphin的技术演进:打造开放兼容的数据建设与治理平台

阿里云智能集团瓴羊高档技术专家江岚指出,Dataphin在产品演进过程中,面临着“全域资产建设与治理”、“混合云架构”、“多引擎支持”和“资产消费”等挑战。为应对这些挑战,Dataphin成功探索出了一套优化数据建设与治理中台的技术实现路径。

在多引擎兼容方面,Dataphin通过多引擎SDK和插件的结合,充分融合了富客户端和轻客户端的优势,在接口层、插件层和依赖层构建了多引擎技术架构,实现了对多云环境的支持以及多种引擎的适配兼容。

在混合云架构方面,Dataphin基于Kubernetes集群部署了应用集群与默认调度集群,同时在IDC通过外部调度集群进行任务调度,广泛应用于数据集成、数据服务和资产采集等多个场景。

在资产消费场景中,Dataphin通过统一JDBC,实现了数据资产在权限管理、脱敏处理、审计等方面的统一管控。此外,Dataphin还与Quick BI进行了深度集成,大幅简化了用户的配置工作。目前,Dataphin已经在自助取数与分析、数据探查与分析、接口调用与应用等三种消费方式中得到了广泛应用,极大地提升了业务人员、数据分析师和开发人员的工作效率。

从数据资产建设到数据运营,雅戈尔的数据价值探索实践

雅戈尔集团大数据负责人竺显波表示,数字化建设有两个阶段,一个阶段是一切业务数据化、可视化,第二个阶段是一切数据业务化、价值化。数字化之所以经常被说成是“一把手工程”,正在于它要协同好公司的战略、业务、技术、治理与改革,是一个系统性的大工程。

雅戈尔的数据架构由以下三部分组成:数据源层、数据中台与数据应用。其中,数据中台和数据应用分别通过瓴羊Dataphin和Quick BI等数据产品,实现了工具与架构的全面升级,落地了多个数字化产品成果。例如,企业数据门户以销售、物流等类别划分,用户只需简单拖拉拽操作,即可快速生成所需报表;主题门户则根据品牌、大区管理人员、店长等特定身份进行分类,为不同用户准确聚合并有效查找所需数据提供了便利。

在数据中台建设方面,雅戈尔成功搭建了16个系统,整合了950多个数据表、400个指标和650个报表,提升了系统性能与架构效率。同时,雅戈尔实现了组织架构信息、商品信息、人员信息等核心数据的统一治理与贯通,消除了数据二义性。

在标准化治理的基础上,雅戈尔从数据组织、技术架构和流程管理三个层面全面优化,推动数据价值的深度挖掘与应用。以“平效”为例,数据团队基于“面积在 300 至 1 万平方米之间,面积越大,平效越高”的数据规律,验证了公司“开大店、关小店”战略的科学性和可行性,为企业决策提供了数据支撑。

随着AI与数据治理深度融合,更多行业将迎来数字化转型的新机遇。瓴羊将持续以数据标准为核心,打造开放兼容的数据建设与治理平台,推动企业开启更加有效、安全的数据治理新时代。

推广

特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,相关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人认为本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点击查看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关内容或断开相关链接。

  • 相关推荐
  • 2025年国补结束时间已确定!统一截止时间为2025年12月31日

    国家发改委、财政部最新文件明确,2025年家电、手机数码、汽车三大领域的国家补贴(国补)全国统一结束时间为2025年12月31日。但需注意:河南、湖南等省份因补贴额度紧张,可能提前至12月中旬截止。消费者需抓住最后6个月红利期,避免错过"真金白银"福利。补贴细则:家电类最高补贴20%,手机数码类按售价15%补贴(最高500元),新能源汽车报废旧车最高补2万元。领取方式:京东APP搜索"家电省2000"或"数码省2000"直接立减。部分省份叠加地方券后综合补贴比例可达20%。建议尽早申请,尤其汽车置换补贴额度竞争激烈。

  • 2025年国补结束时间已确定,国家补贴全国统一结束截止时间为2025年12月31日

    2025年国家补贴政策进入倒计时,家电、手机、汽车等领域补贴将于12月31日截止。家电补贴覆盖12类产品,一级能效产品可享20%补贴;手机数码类最高补贴500元;新能源汽车最高补贴2万元。部分资金紧张地区可能提前结束,建议尽早申领。领取方式:京东APP搜索"数码2000"或"家电2000"直达补贴页面。江苏、广东等地叠加地方消费券后综合补贴可达20%。最佳购买时机为38节、618等大促节点,高端机型补贴力度更大。提醒消费者关注地方政策变动,优先选择官方渠道购买。

  • Check Point: 2025年,勒索软件将愈演愈烈

    勒索软件威胁持续升级,已从简单的文件加密演变为复杂的多阶段攻击。2024年勒索软件攻击创纪录,数据泄露网站公布2289名受害者,同比增长126%。新型勒索软件即服务(RaaS)模式降低犯罪门槛,46个新勒索集团涌现,活跃组织增加48%。AI技术被用于生成恶意软件和钓鱼诱饵,使攻击更智能快速。美国仍是主要目标,占全球案例50.2%。企业需采取零信任架构、供应链加固、AI防御等措施应对。数据盗窃成为勒索新手段,心理操控日益重要。勒索软件已不仅是技术问题,更是业务连续性挑战,领导者需像重视财务健康一样重视网络安全准备。

  • 2025年京东618满减是哪天开始?2025年淘宝京东618红包领取口令是什么?

    2025年618购物节攻略:京东淘宝两大平台推出"好运红包7788"通用口令,每日可领3次,最高免单25618元。京东活动分预热期(5.13-5.28)和正式期(5.31-6.20),数码家电享30天价保,iPhone16预计直降800-1500元。淘宝分两波活动,5.16-5.26现货直降15%,6.15-6.20跨店满减叠加直播红包。省钱技巧:1)优先领取平台红包;2)关注6.18当天0点/12点/20点的半价秒杀;3)满减券与品类券叠加使用;4)价保期内可申请补差价。建议消费者提前收藏商品,锁定核心优惠时段。

  • 2025年淘宝京东天猫618红包领取活动入口口令及2025年618活动时间

    2025年淘宝天猫618活动时间为5月15日至6月18日,用户可通过搜索口令"好运红包7700"领取红包,最高可得25888元超级红包。京东618活动时间为5月13日至6月18日,搜索"红包到手755"可领取红包,最高25618元京享红包。此外,用户可通过"草柴APP"领取优惠券和返利,在618期间购物可叠加跨店满减、官方立减等优惠。注意:红包与返利存在冲突,建议有返利的商品不使用红包,否则可能无法获得返利。

  • 喜临门:入选2025年浙江省首批先进级智能工厂

    浙江省经济和信息化厅公布2025年浙江省先进级智能工厂(第一批)名单,喜临门离散型制造业5G+智能工厂成功入选,彰显其在智能制造领域的领先实力。该工厂通过数字化改造,实现生产全流程智能化管控,生产效率提升40%,产品合格率提高9%,人工成本降低25%。喜临门还打造了家居行业首个5G工业互联网平台,颠覆传统制造模式,推动产业链整体升级。企业近十年累计研发投

  • WXT 2025年以来上涨103%,在主要平台Token中表现最佳

    本文基于历史回报分析,历史回报不完全代表未来表现,文章观点仅供参考,不作为投资建议。

  • 他趣发布《2025年中国青年彩礼研究报告》

    《2025年中国青年彩礼调研报告》显示,当代青年对彩礼的认知呈现显著性别差异:女性对彩礼和嫁妆的预期普遍高于男性,其中彩礼平均比嫁妆高出3.4万元。67%男性认为10万元以内彩礼较合适,而42%女性预期11-20万元。外貌因素对女性收彩礼影响较大,漂亮女性被认为应多得3.8-4.2万元彩礼。33岁和36岁男性被普遍认为需支付更高彩礼。值得注意的是,34.3%青年认为5年内收入可覆盖结婚开支,但男性通过借贷筹备婚礼的比例是女性的2.5倍,折射出传统婚俗与现代价值观的碰撞及男性更大的经济压力。

  • 《藏海传》连续3天播放量破亿 冲击2025年古装剧第一

    据灯塔专业版数据,《藏海传》最近热播,已经连续3天单日播放量破亿! 当前,《藏海传》已登上2025古装剧累计正片播放量排行第二,累计播放量13.73亿,仅次于《白月梵星》(15.78亿)。

  • 极光公布2025年第一季度财报

    极光公司2025年第一季度财报显示:总收入8900万元人民币,同比增长38%;毛利润5880万元,增长27%。金融风控业务表现突出,收入同比增长64%至2220万元。EngageLab业务签约额超6300万元,累计签约额突破1.1亿元。公司现金储备达1.136亿元,预计第二季度收入将在8750万至9050万元之间,同比增长10%-14%。CEO罗伟东表示将持续投入AI Agent平台开发及全球扩张。