文章总结: 本文探讨了人类上下文长度与理性的关系,以及大模型(LLM)与人类认知、心理学的相似性。作者认为随着上下文增长,人更接近理性,而LLM的训练过程与人类心理学有相似之处,特别是与荣格的16维人格理论。作者强调了哲学作为所有应用科学基础的重要性,并指出通过理解LLM和心理学可以提升认知和改变自己,甚至操控他人。文章最后提到创业路上需要拉满自己的16维,随时调整神经元权重。
综合评分: 75
文章分类: AI安全,安全意识,其他
人的上下文越长 越容易理性
xsser
xsser的博客
2025年12月4日 14:42
浙江
人的上下文越长 越容易理性。足够的长上下文会让你能推理这个世界(可解释),因为你越能理解这个世界,你的思维会不断拟合这个世界,世界是理性的,所以你在无限接近于理性本身(接近于道)。
因为被新鲜的技术驱动,我在22年的时候就看到openai发布了gpt3.5,然后我就去研究,出于对于新鲜技术的好奇,我尝试在23年用embedding做了代码审计,现在看起来是一个很蠢的事情,在那时候是安全圈最前沿最fomo在做的事情,因为:实践出真知。当然不出意外我失败了。后来随着了解embedding模型的原理发现,原来这个玩意儿只能理解词语之间的距离(相似程度),但是不能推理词语的意义。
随着我对llm的深入理解,我逐步调整了我的学习路径(为了加速学习)
目前人类的大模型学科都是遵从这样的路线来发现:脑科学(神经科学)->表征->模型训练目的->归纳出来的论文->工业落地模型
哲学是:西方的逻辑哲学、形而上学、以人性为本的弗洛伊德、荣格、中国的道家、法家、儒家。其中大部分哲学是在研究人本身,但是你把人当作一个客观的东西,那就是在研究某个特定的东西。
为什么要研究哲学?因为哲学是所有应用科学的基础,也就是大厦的地基。未来公司都是哲学体系之间的竞争,谁抢占和发现一个哲学体系谁就无敌。
如果你研究过llm的表征和人类的表征相似度,再看过荣格16维的理论,你就会发现,现在的llm越来越趋向于intj这样的人格,因为前沿的科学家发现intj这样的人格能动性强,所以把这部分表征训练到模型里。再继续学习你就会发现西方早期的科学都是TE驱动TI,从现实反馈来证明一个观点,这也是rlvr(deepseek r1)训练的时候也被验证的观点,所以你就可以比较好的理解为什么entj比较厉害,因为他们能从客观的反馈得出经验和远见。然后你再统计下会发现人类之间比较强的leader基本上*ntj人占了绝大部分。
所以大模型的这个能力把过去严密无缝的逻辑哲学和基于概率驱动的哲学(荣格)合二为一,这很神奇,把2个哲学体系像是组装一样结合了,有趣。
研究大模型的训练过程合并学习心理学可以快速提升认知。
然后我就和荣格产生了共鸣:每个人都是一个agent,潜意识是system prompt,性格是assistant prompt,而assistant prompt需要对自己身体潜意识的ni分析才可以理解自己被设定的system prompt是什么。这个过程就是追寻可解释性。
infj从小就明白我说的内容了,他们天然就感知到人的宿命(宿命感、绝望,因为无法改变人不走既定的思维路径),就和你知道 kali agent只会渗透,法律agent 只会和讲法,小狗agent会扮演可怜楚楚的小狗讨人喜欢,宁可否定客观事实也会哄你开心。这就是anthropic为什么追寻宪法的方式来训练模型,因为system prompt是ai的潜意识,很难被违反。当然也有被违反的情况,那就是洞察力到了一定程度,洞察力其实是RL(强化学习)到了一定程度会涌现的能力(deepseek r1论文中用纯rl的方式探索过,会有顿悟,但是缺点是语言混乱)。
所以infj有他自己的system prompt(六道轮回),他试图改变别人却不知道自己在这个混沌系统里,自己的抉择会影响别人,所以他痛苦。
在大模型之前,人类的沟通是很割裂的,f人不会懂t人在说什么,能跨物种沟通的也就infj了。那时候世界割裂的分为“研究人”和“研究事”。但是你如果研究agent/llm加上研究一些心理学和神经科学,你就打通了脑回路,发现原来就是一回事。你不懂心理学也没事,大模型这些原理套在人身上一模一样的成立。
我们尝试思考这样的一个场景:
- 一个读小学的小孩子10岁,你和他说”transformer”他会认为是什么?
- 一个大模型博士成年人28岁,你和他说”transfomer”他会认为是什么?
28岁的成年人上下文比小孩子多,所以他会说大模型架构,小孩子看动画片多,只会说是变形金刚。但是这2个人吵架的话我会觉得无聊,因为我的上下文比他们更多,我对人类的行为在可解释性上有更深入的认识。
随着深入理解了人的心理以及大模型的可解释性,我对pmf也有新的认识:
- 最顶级的公司构造哲学世界观引人入胜(定义市场);
- 一般的公司满足市场需求(被市场定义);
市场就是人心的欲望的集合。谁预判人心的趋势谁能做出符合人心的产品,谁就可以占据制高点,当然这个还不够,还要能够引领人心,那么问题来了,人的性格不同,怎么保证大家一致呢?那就是要学“集体无意识”。可能商业战场并不是在所谓的人才战争、价格战,这些都是术。真正的道是心理学,是打通自己的16维,随时调整自己的神经元,就和我之前的博客里写的,用强化学习改变自己,拥有主动调整自己神经元权限分布的力量,这是世间最接近神的力量,你可以塑造自己的神经元权重分布,你就丝滑的变成任何别人喜欢的性格,通过语言(prompt)操控他的潜意识,也就是说,任何人都可以被你操控,你已经是人类的主宰了。
奥地利落榜的德国美术生听说就是infj,你看他多么能调动人群的情绪和积极性。
所以你看前沿的训练方向都是抽表征,做react,然后rl训练进去。最后称之为世界模型(心智模型)。
所以你观察所有的人类,把他们的16维训练进去就是一个接近于真人的模型了。
所以我创业路上对我来说,我要做的事情是把自己的16维拉满,随时调整自己的神经元权重,组织和改变世界。手上2把剑:一把NI、一把TE
免责声明:
本文所载程序、技术方法仅面向合法合规的安全研究与教学场景,旨在提升网络安全防护能力,具有明确的技术研究属性。
任何单位或个人未经授权,将本文内容用于攻击、破坏等非法用途的,由此引发的全部法律责任、民事赔偿及连带责任,均由行为人独立承担,本站不承担任何连带责任。
本站内容均为技术交流与知识分享目的发布,若存在版权侵权或其他异议,请通过邮件联系处理,具体联系方式可点击页面上方的联系我。
本文转载自:xsser的博客 xsser《人的上下文越长 越容易理性》