Snowflake与Databricks在对话式AI上的竞赛,正在改变自然语言分析被期待的运行位置。两家平台在2024年年中先后发布各自的Genie助手,让对话式查询从利基附加品变成数仓的默认能力。对大型企业而言,这既是降低分析门槛的机会,也是一次对语义层、治理与评估纪律的全面检验——蜂启咨询在亚太区的项目经验是:助手的上限不由厂商决定,而由你自己的数据基础决定。
核心要点:Databricks于2024年5月发布Genie,Snowflake于2024年6月发布自己的Genie,对话式查询成为数仓默认功能。在整理过的语义层之上,团队报告例行问题80%到90%的回答成功率——治理到位可超过90%,而裸模式上可能低于60%。分析师通常把70%到80%的时间花在重复报表请求上,可靠的对话层可以吸收这部分工作。
为什么Snowflake与Databricks的对话式AI竞赛很重要?
这场竞赛之所以重要,是因为它改变了自然语言分析被期待的运行位置。当Snowflake和Databricks都自带助手——Databricks于2024年5月发布Genie,Snowflake在2024年6月的峰会上发布自己的Genie——对话式查询不再是利基附加品,而成为数仓本身的默认功能。对企业来说,对话式BI的起点不再是一个独立的产品选型问题,而是平台助手在你的真实数据、真实用户上表现如何的问题。
底层技术趋势已经确立。Text-to-SQL系统从新鲜事物走向主流:在元数据清晰的良构企业模式上,现代助手大多数时候都能正确回答,许多团队报告例行问题80%到90%的回答成功率。但当模式混乱、定义含糊、或问题需要多表联接与任何模式图都看不出的业务逻辑时,同样的技术会迅速退化。这场竞赛真正争夺的,就是弥合这道鸿沟。
还有一个工作流层面的论据。分析师把不成比例的时间花在服务临时请求上——常见的估计是,重复性报表请求占掉分析师70%到80%的时间。可依赖的对话层不会取代分析师,它吸收例行请求,让分析师去做真正需要判断力的问题。这是每个平台厂商都在卖的业务理由,当助手足够可靠时它是成立的。
对话式数据助手面临哪些共同挑战?
第一个挑战是元数据质量,它是决定一切的那个。平台助手的好坏取决于它对你的数仓的语义理解:表名、列含义、联接路径、业务定义。把助手指向一个列名晦涩、毫无文档的原始数仓,得到的是听起来头头是道、却错在用户无法察觉之处的答案。语义层不是可有可无的装饰;它是可靠助手与负债之间的分界线。
第二个挑战是治理与权限。平台助手默认继承数仓层级的访问权,除非另行配置;一个配置不当的助手会把敏感列暴露给任何能组织出问题的用户。企业需要助手遵守的行级与列级控制,加上每一次查询的审计日志。在受监管环境里,这是门槛要求,不是加分项。
第三个挑战是评估鸿沟。平台演示看起来无懈可击,因为它们跑在元数据完美的精选模式上。你的生产环境不同——没有在上线前构建任务专用测试集的团队,会以最难受的方式发现这道鸿沟:当着业务用户的面。在你自己的问题、自己的数据、自己的定义上做评估,才是对任何平台助手唯一有意义的检验。
还有第四个挑战,厂商材料里很少提到:人的挑战。对话式分析改变了谁能提问,这会重新分配组织内部的非正式权力。分析师可能觉得自己的手艺被商品化;业务用户可能过度信任流畅的答案;管理者可能在助手赢得任何信任之前,就把它当成编制论证。部署顺利的企业会及早点名这些摩擦——把助手定位为分析团队的产能倍增器、对验证设定明确预期,并让分析师参与整理语义层,让他们的专长被嵌进系统,而不是被系统取代。
什么把演示与可依赖的助手区分开?
把演示与可依赖助手区分开的是三件事,没有一件是模型规模。第一是语义层:对每个术语的含义、每个指标如何计算做出显式、受治理的定义。当助手查询的是整理过的语义层而非裸模式,复杂问题的回答可靠性会大幅上升——治理良好的部署例行超过90%的正确率,而裸模式查询在同一问题集上可能低于60%。
第二是落地与验证。可依赖的助手展示它的过程:查了哪些表、用了哪些过滤、采用了哪个收入定义、数据最后刷新于何时。用户因此可以抽查答案而不是盲目信任,而信任随着每一次被验证的答案复利累积。第三是反馈回路:一个捕获错误答案、纠正它、并把纠正写回语义层的机制,让同样的错误不再复发。平台提供管道;反馈纪律是企业自己的功课。
这就是为什么平台选择只是决策的一部分。助手的上限由你的语义层、权限模型与评估实践决定——无论哪家厂商,这三样同样决定任何对话式BI部署的质量。弱语义层上的强助手,跑不过治理良好的语义层上的普通助手。
最后是助手与既有BI投资的关系。当平台助手补充而非替代分析师已经维护的语义层与受治理定义时,它最强大。把助手当作同一套受治理定义之上的新前端的团队,在各 surfaces 得到一致的答案;放任助手对裸模式自由发挥的团队,制造出一个平行且互相矛盾的真相。架构决策——助手架在语义层之上,而不是旁边——塑造所有下游结果。
企业应该如何起步?
从数仓的精选切片开始,而不是整个数仓。选择业务最常问的表与指标——收入、销售管道、库存、人员编制——只为这些构建语义定义。把平台助手接到这个精选面上,并在任何其他人看到之前,先用从真实用户收集的问题集做测试。
尽早从真实业务用户那里收集问题集。请十几位运营负责人用他们自己的话写下今天在问的问题,把它们作为测试集。给助手的答案打分——正确、部分正确、错误——并在改进语义层的过程中跟踪分数。大多数团队发现第一轮修复是定义问题,不是技术问题:困惑的不是助手,是定义。
然后有节奏地扩展:更多表、更多指标、更多用户,每次扩展之前都先把权限模型与审计链路就位。蜂启咨询这样的合作伙伴可以帮你构建精选语义层、设计评估测试集、搭建反馈回路,让你的平台助手在生产环境中赢得信任,而不是停留在演示里。
推广按风险排序,而不是按热情排序。第一个领域应该是答错只会带来麻烦、而不是危险的地方——内部运营报表是比受监管财务披露更好的试验场。对任何超过既定阈值、将进入决策的输出,保留人工复核一道关;阈值只随测试集上的打分准确度提升而下调。最后,为运营留预算:语义层会随业务变化而漂移,问题集会老化,模型行为会随平台每次发版而变动。对话式助手不是一个你能完工的项目,而是一个需要持续运营的产品——有归属人、有路线图、有自己的季度评审。
还有一条纪律把整个努力串起来:用用户体验的方式度量助手。跟踪首次提问即答对的比例、从提问到可信答案的中位耗时、以及无需人工转接即结束的会话占比,并把这些数字与测试集的准确率并排公布。平台发布新模型版本时,先重跑测试集再庆祝——厂商基准上的提升,不代表你的定义、你的联接和你的用户身上的提升。
核心要点有哪些?
- Snowflake与Databricks都在2024年年中发布Genie助手,对话式查询成为数仓默认功能
- 决定回答可靠性的是语义层,不是模型——整理过的定义每次都胜过裸模式
- 权限与审计日志必须在助手到达用户之前配置好;数仓层级访问不是安全的默认值
- 从业务用户那里构建真实问题集,上线前先对照它给答案打分
- 治理良好的例行问题预期80%到90%的成功率——并验证复杂联接的长尾
- 运行反馈回路,把错误答案变成语义层修复,让错误不再复发
接下来应该怎么做?
对话式AI竞赛的赢家不是选对平台的买家,而是把语义层、权限与评估做扎实的运营者。平台会继续迭代,助手会继续变强,但这三样决定答案质量的东西不会过时——它们是你无论选谁都需要建的资产。
蜂启咨询帮助亚太区企业评估平台对话能力、构建精选语义层与评估体系,并把助手接入既有BI治理框架。如果你正在Snowflake与Databricks之间做选型,或准备让平台助手在生产环境落地,欢迎预约演示,我们将结合你的数据现状给出可执行的路线图。