即刻App年轻人的同好社区
下载
App内打开
时间倒着走
110关注38被关注0夸夸
站着,还想把钱挣了。
时间倒着走
08:47
如果把知识从大模型中拆出来放到到wiki,然后再训练大模型无脑调用这个wiki获取必要的知识,最极限的情况能把大模型拆到多薄呢?🤔Gemma 4这么薄吗?应该还可以再薄。
00
时间倒着走
00:32
这个创意好棒啊
原动态已删除
00
时间倒着走
3天前
要给新老板纳投名状了,不想内耗,公司的东西,愿意咋滴就咋滴吧。
00
时间倒着走
3天前
周末几个小时给孩子拼好的小马,昨天晚上已经好几瓣了。
答应我,别再给孩子送这种费爸的东西了行吗。。
00
时间倒着走
4天前
艹,好有道理。

囚長:

00
时间倒着走
7天前
大前端负责人这个岗位算是历史的眼泪了,没钱的公司看起来都不想设它了。
晚饭和前老板聊了很多,他和我现任老板一样都面临转型。不过很开心他在新岗位有许多有趣而离谱的管理经历,人生嘛,不就是猎奇并回忆。
我自己的岗位虽然大体没有变化,但很快也要从汇报给大前端负责人改为汇报给具体业务线的研发负责人。虽然早就猜到会有这一天,但真的这个组织覆灭了,心里还是久久不能平静。
回想当初为何会选择前端这条路,最本心的还是做界面和交互可以为用户创造愉悦和惊喜,只可惜10多年来前端这条路越走越窄,到了最近两年,莫说创造愉悦了,想保持对用户交互的敬畏都变得困难。
如今这个行业终于还是走到了末路,我也完全死心。
00
时间倒着走
7天前
唯有沉浸在AI Coding中可以消解工作中的种种烦心事。
00
时间倒着走
7天前
本命年必有一劫,我看也是。
00
时间倒着走
9天前
我觉得有时候我还是缺乏一些魄力,行业龙头做的那么好,社区里还是有很多人自己做产品和龙头硬刚,看起来有很多人是可以坚持下来的。
30
时间倒着走
10天前
正因如此,知识库存了多少内容并不重要,关键在于存的内容有多独特,能不能帮助AI做判断。
我看到很多人评价知识库好坏时,第一反应是讨论召回率。
这是错的。
召回率是“搜索引擎”的遗产,不是“认知助手”的标尺。 一个知识库召回100条相关文档,如果其中90条都在用公网常识解释歧义词,那召回率再高也是噪音。真正的核心指标,应该从“数量”转向“质量”和“排他性”。
我和ds简单聊了几句,ds给了我一套全新的评价维度,我觉得完全可以作为参考(我们姑且称之为 “歧义消解指数(DAI, Disambiguation Ability Index)”):

1. 核心指标:信息增益率(Information Gain Ratio)

不再问“召回了多少条”,而是问“每召回一条知识,给AI带来的熵减是多少”。

· 计算公式:对比“仅用提示词”和“加入该知识块”后,AI输出结果的术语准确率提升幅度。
· 评判标准:如果知识块里的内容,跟百度百科前3条搜索结果高度重合,给它打0分——因为它没有提供任何新约束。只有那些“超出公网常识”、“颠覆通用定义”的私域知识,才配得上高分。

2. 独特性指标:私域偏离度(Private Domain Divergence)

这是专门用来惩罚“废话知识库”的。把知识库里的每个片段,扔进一个通用大模型里做语义聚类。

· 高价值:该片段在公网语义空间里处于“孤立岛”状态(比如你公司自创的“冰山订单”算法)。
· 低价值:该片段与“怎么做蛋炒饭”、“什么是云计算”聚在一起。
· 新规则:知识越“孤独”,权重越高。 因为只有独特的知识才能消除歧义,公知常识只会稀释注意力。

3. 实效指标:首次纠偏成本(First-Turn Correction Cost)

这是最实战的评估法。直接让AI用知识库回答高频问题,记录人类在第一个回复中需要修改的次数。

· 旧标准:召回命中率(Hit Rate)。
· 新标准:零修正通过率(Zero-Shot Pass Rate)。即AI给出的第一版答案,业务方直接复制粘贴就能用,无需修改任何专有名词。这个指标直接衡量“歧义是否在源头被彻底斩断”。

4. 动态阈值:歧义覆盖率(Ambiguity Coverage)

不是所有知识都需要消歧。你需要统计:

· 企业高频问句中,有多少比例的问题包含“一词多义”或“同词异指”。
· 知识库是否针对这些“高频歧义点”建立了专门的“词根-场景”映射链。
· 目标:覆盖Top 20%的歧义词汇,就能消除80%的后验成本。

时间倒着走: AI知识库最关键的作用不是提供知识,而是提供知识消歧义的办法。 AI早就可以通过工具进行检索网络,同时也能查看代码库,为何还需要知识库? 这是因为AI无法对工具取得的信息作出正确的判断。同一个词汇,在预训练语料时的含义,与企业实际私域场景中的含义很可能并不相同,没有知识库,这个歧义就需要很高的后验成本消除,导致大量的浪费。

00