We're sunsetting PodQuest on 2025-07-28. Thank you for your support!
Export Podcast Subscriptions
cover of episode EP83 对话侯璐瑶:AI时代的大数据平台正在如何发展?衰落还是机遇?

EP83 对话侯璐瑶:AI时代的大数据平台正在如何发展?衰落还是机遇?

2024/11/13
logo of podcast 硬地骇客

硬地骇客

AI Deep Dive AI Chapters Transcript
People
侯璐瑶
Topics
侯璐瑶认为,AI 时代对大数据平台提出了更高的要求,但 AI 应用并未取代大数据,而是与其深度融合。大数据平台仍然是 AI 应用的基础,提供存储和计算能力。数据平台的发展趋势是从 Hadoop 的离线批量计算,到实时数仓,再到融合架构(流批一体),以满足业务对实时性和效率的不断提升的需求。Spark 和 Flink 等计算引擎各有侧重,通常结合使用,根据客户需求选择合适的引擎来解决特定问题。企业对 AI 的接受度高,但实际应用仍处于早期阶段,需要找到 AI 与核心业务的结合点,并注重投资回报率。现在企业在 AI 应用方面非常务实,只会在能带来实际业务价值和投资回报的情况下才会投入。企业更关注 AI 在提效方面的应用,因为经济形势下企业普遍在裁员降本,提高效率成为必然选择。数据中台的概念被过度炒作,实际价值与预期存在差距,企业更加务实,对投资回报率要求更高。传统意义上的数据开发工程师在未来三到五年内将会逐渐消失,他们需要转型,更好地理解和使用 AI 工具。AI 在数据平台领域一个重要的发展方向是提升数据质量和业务理解,构建数据与 AI 之间的桥梁。对于 RAG 等技术在资源有限的创业公司中的应用,建议采用一些工具来快速验证想法,例如 Diffy AI,它提供可视化的编排流程并集成 AI agent,可以帮助快速构建和验证 AI 服务。 赛头和依夏作为主持人,引导侯璐瑶阐述观点,并就相关问题进行深入探讨,例如企业对AI的应用现状、数据中台的反思、AI对数据从业者的影响等。他们还探讨了企业在数据平台上的资金投入变化,以及如何选择合适的AI应用以获得投资回报。

Deep Dive

Chapters
本段落探讨了大数据和AI的关系,并介绍了数据平台的发展趋势,从Hadoop到AI时代的融合架构。数据平台仍然为AI应用提供存储和计算能力,但AI时代对数据平台提出了更高的要求。
  • AI时代对大数据平台的要求更高
  • 数据平台发展趋势:从Hadoop到AI时代的融合架构
  • 第一代至第四代数据仓库的演变

Shownotes Transcript

今天我们邀请到侯总,跟我们一起聊聊AI和大数据的那些事儿!从炙手可热的AI新名词到数据平台的未来发展趋势,从企业如何务实地应用AI到数据从业者面临的机遇和挑战,干货满满!我们还深入探讨数据中台的反思、AI如何赋能数据平台,看AI与大数据的碰撞!

更多内容信息和时间线参考下文的硬地笔记,欢迎收听本期节目。

另外,现在加入「硬地骇客」会员服务,即可在会员专属的微信群与其他朋友一起畅所欲言,成为会员也是对我们持续更新最大的鼓励! ## 嘉宾介绍

侯璐瑶:资深大数据专家,10年以上 to B 大数据行业的工作经验,现为某数据独角兽企业产品负责人。

本期赞助

Podwise.ai - Podcast knowledge at 10x speed 🚀) ## 硬地笔记

00:00:04 硬地骇客:大数据时代终结?AI时代的数据新机遇

00:01:43 AI新名词与大数据的关系:并非取代,而是更高要求

00:03:03 数据平台发展趋势:从Hadoop到AI时代的融合架构

00:08:39 企业对AI的接受度与应用现状:务实与挑战并存

00:13:59 AI时代企业应用的投资回报率:务实选择与避免无效投入

00:21:19 数据中台的反思与数据平台的未来:务实与创新并行

00:31:35 AI对数据从业者的影响:机遇与挑战并存

00:37:20 AI在数据平台领域的应用前景:数据质量与业务理解

欢迎关注我们