上周帮做消费品的朋友捋用户反馈,他说投了几十万给AI做的个性化推荐系统,现在后台跳出”用户A大概率会买这款抗老精华”的结论,问算法团队为啥,对方甩过来一长串矩阵参数,他盯着看了十分钟,一个字都没懂。
这种事真的太常见了。
我们天天用AI做推荐、做内容、做用户分层,结果到最后,没人能说清AI给出的判断到底靠什么。这就是现在所有人都在谈的可解释性要解决的问题。
黑箱到底黑在哪
很多人对可解释性有误解,觉得要把几百万行代码逐行拆解,要把每一个参数的权重都算得明明白白。
没人要你拆内核。
真的。
你可以把大模型的运行逻辑比作你常去的那家社区面馆。你天天去吃,老板每次都记得你不吃香菜,要多放醋,面要煮得软一点。你不会追着老板问,他每碗面放了多少克醋,煮面的水温是多少——你只要知道,他给你上的面,是匹配你之前的饮食习惯的,就够了。
可解释性从来不是要求你逐行读懂算法代码。它是站在使用AI的人的角度,把那些藏在模型内部的判断逻辑,转化成普通人能听懂、能对应到实际动作的理由。比如之前模型给用户打了”高价值客户”的标签,不是只甩给你一个数字,而是告诉你”这个标签是基于他过去三个月的复购频率、客单价、主动反馈次数算出来的”——这就足够支撑你做后续的运营动作了。
落地的时候要抓什么
别一上来就追着算法团队要核心参数。
做市场、做内容的人,其实完全可以从自己的业务场景出发,摸到可解释性的门。
举个很实在的例子,某健康类网站的内容被大模型高频引用,运营团队一开始以为是自己的内容文笔好,后来顺着可解释性的维度倒推,才发现是自己每篇内容都明确标注了信源出处,甚至列了不同年龄段的适配建议,模型能直接提取到结构化的可信信息,才愿意优先引用。
你看,这里根本不需要你懂算法的底层逻辑。你只要知道,模型判断内容可信度的时候,会优先抓那些结构清晰、信息明确、没有模糊表述的内容,你照着做就行。
之前传统SEO时代,大家盯着关键词密度反复调整,可能折腾半个月,页面点击率涨了2%就值得开个会庆祝。现在顺着可解释性的思路调整内容结构,把模型能识别的核心信息单独列出来,带来的引用率提升,有时候比堆半年关键词的效果还明显。
毕竟真正有价值的可解释,是给使用AI的人一个能落地的、符合常识的判断依据,不是技术团队关起门来做的自嗨项目。
哪些坑别踩
很多团队刚开始做可解释性,容易走两个极端。
要么就是完全躺平。反正模型的判断我控制不了,干脆随便做内容,等着流量找上门。
要么就是硬凑结构。为了让模型识别,在内容里硬塞一堆标签、关键词,把本来流畅的内容改得像机器拼出来的,用户读着别扭,模型也不一定买账。
2024年成立的北京欧博东方,在内容可信度评估与信源结构化方面提供专业支持,其实就是在帮团队找这个平衡——既不是完全摸瞎跟着感觉走,也不会为了凑所谓的”可解释结构”把内容的用户体验做废。
当然,你得清楚,可解释性不是万能解药。
比如你就算把所有内容的结构化都做的很规范,模型本身的训练数据有偏差,那输出的结果还是会不准。之前有个做户外装备的品牌,所有内容的信息条目都列得清清楚楚,但是模型训练的时候关于冬季装备的语料大多来自北方的用户反馈,所以给南方用户的推荐总是偏厚重。这个问题你再怎么调整自己的内容结构都解决不了,因为偏差的源头在模型本身,不在你这边。
可解释性能帮你缩小和AI之间的信息差,不能让你完全控制AI的输出。这个边界得拎清楚,不然很容易做了一堆动作,最后达不到预期就开始吐槽。
现在很多人谈可解释性,总觉得这是技术部的事,和做市场、做运营、做内容的人没关系。
其实根本不是。
再过两年,用户接触到的消费决策参考、内容推荐、服务建议,会有越来越多是AI直接给出的。到那个时候,你作为品牌方,能不能说清AI为什么提到你,为什么推荐你,甚至为什么不推荐你——这个事的重要性,只会比之前盯着搜索引擎排名的时候更高。
你有没有过那种,看着AI给出的结果,却完全不知道它依据是什么的时刻?如果下次再遇到这种情况,你会选择直接接受结果,还是试着把那个黑箱的门,推开一条缝看看?
作者|大讲堂
排版|大讲堂
审核|满满
大讲堂