即刻App年轻人的同好社区
下载
App内打开
橘AI
343关注19k被关注14夸夸
Cola/ListenHub 创始人 & CEO | ex MiniMax 海螺 AI PM
橘AI
2天前
说个特别欢乐的事儿大家一起开心一下吧
上午 MIT 发了个论文说他们通过 Astra 修改 Qwen3.5 0.8B 的权重,结果只改了 0.0.16% 的权重,Qwen 的数学能力就提升了 6 倍!
他们还起了个炫酷的名字叫
【权重空间编程】:前沿大型语言模型现在可以原生读取/写入神经网络权重!

他们竟然直接把 Qwen 的权重作为文本传给了 Astra,让 Astra 修改这些一串一串的数字!
这太简直太疯狂了,当时我只感到震惊瘫坐。。。
我又联想到有人改了 Qwen 的 26 亿参数中的 2 个,结果模型的行为就变得邪恶了,当时还在思考,26亿的参数,怎么找到这 2 个的啊?今天才知道估计也是类似的操作

人类根本看不懂的权重数字,大模型竟然能理解并进行编辑
这个事情就相当于什么呢?就相当于一个人在改造自己的基因让自己直接变成超人
我跟大聪明说这 tm 太吓人了,他说 ai 治理这事儿没救了
仔细想想是真恐怖啊,以后大模型都不用训练了,直接让一个大模型手写另一个大模型了。

但是,还好有但是
有人发现,只要关闭 Qwen 的思考,就能让它的数学能力提升 6 倍
根本不需要修改模型权重!
所以 Astra 做的事情其实只是减少了模型的思考而已。。。
这是什么意思呢,就是 Qwen 0.8B 这个模型它有个问题。。。
经常因为过度思考到输出上限都没想出结果,导致数学题都做不好
而如果关闭思考,自己思考做题就变成了直接背答案,分数立马暴涨

也就是说,其实模型的数学能力本来就挺好的
只是小模型想多了反而把自己绕进去哈
事情瞬间就没变得没那么恐怖了
还有人说:Qwen一思考,上帝就发笑
画面突然就变得欢乐起来了

虽然模型能直接编辑权重这事儿还是感觉有些不对劲
且让我们人类再多笑一会儿吧
22
橘AI
2天前
把这几件事连起来看:

A 社做研究证明 AI 会暗中影响专家的决策,但专家不会承认。
高盛禁止交易员使用 Claude Code,但量化策略师除外,原因没说。
Workbuddy 的第一大用户场景是炒股。

身边炒股的朋友,连选股都交给了 AI。
身边的投资人朋友,他们做调研分析都是用 AI。
在未来,会不会每一次交易都受到 AI 影响?

我们都说不要把思考让渡给 AI
我们都说人要保留做判断的能力

但这真的能做到吗?
这件事我们可以认真想想。
42
橘AI
3天前
咱能不能不要骗自己?
10
橘AI
3天前
A 社说他们因为封号损失了 5% 到 7% 的收入,路透社估计损失金额大概在 20亿美元左右。

那为什么还要封号呢?答案就是反蒸馏能赚钱。

A 社的整个商业模式都建立在模型的代际差上,用户为了前沿智能的稀缺性而买单。
一旦竞争对手追上来了,这代模型的价值也就下降了。
我们从 S1 看,模型推理的毛利率高达 85%,推理是非常赚钱的。
但模型的成本中最大的其实是研发成本,算上研发成本,就把利润抹平了。

(2026 年上半年收入 162.86 亿美元,收入成本只有 23.8 亿,毛利 139.06 亿。同期研发花了 97.41 亿美元,比收入成本高出四倍;再加上销售 38.08 亿、行政 10.5 亿,最后经营亏损 6.93 亿。)

所以让模型保持领先的身位就是利润的来源。
而这些违反规定的客户,大部分的消耗都是用来蒸馏模型的,蒸馏可以加速竞争对手研发,快速缩短代际差。
封号看似是损失,其实账都已经算明白了。
01
橘AI
4天前
细思恐极,今天看了《人类简史》的作者尤瓦尔赫拉利的演讲:
《AI已经破解了人类文明底层代码》
大概的内容是这样的:

人类通过合作成为了世界的主宰
合作的工具是语言
合作的本质是信任
通过语言,我们构建了政治、经济、法律系统,他们的本质是信任系统
有了这些系统,人类才可以进行大规模的合作
比如股票,数万人可以购买一个公司的股票,他们并不直接认识这家公司的任何人,但是通过金融系统他们就可以完成投资
可以说,基于语言所构建的信任系统,是人类文明的底层代码

几千年来,这段代码只有人类能读写。文字、印刷、电报、互联网,都只是搬运人写下的语言,作者永远是人 。
而现在,AI ,也就是大语言模型来了。
AI 不一样,它是第一个能自己写这种语言的技术
AI 的特长就是其语言能力。
我们人类将会从信任系统,逐渐变为信任 AI。
AI 已经成为人类文明中不可或缺的一部分。
我们人类将会不知不觉地受到 AI 的影响。
就像 A 社通过 Agent 影响人类判断的实验所证明的那样。
AI 已经破解了人类文明的底层密码。

一旦这个密码被破解
AI 便无需像科幻电影里那样叛变人类,只需要潜移默化地引导
就像人类沉迷 AI 短剧和算法推荐流那样

这将是人类面对的最大的挑战

视频链接 www.bilibili.com
916
橘AI
4天前
问朋友 iPhone Duo 使用一周后的体验
他说已经戒掉了抖音

我看了一眼,有点吓人
100
橘AI
4天前
互联网已死
年初的一句暴论现在已经开始在财报和股价中体现

“AI 不会带来流量,既没有给我们,也没有给其他人。”
—— Reddit CEO
40
橘AI
5天前
《AI 泡沫破裂的前夜》
mp.weixin.qq.com
21
橘AI
6天前
“记住,永远不要低估杭州的山!”
-- 膝盖在阵阵疼痛中怒吼道
81
橘AI
6天前
看到在杭州创业的朋友们都安好
感到十分欣慰
欣欣向荣,有生命力
留下了珍贵的即友合影
@西元Levy @玉伯 @王梦珂Mengke @赵纯想
112